sometableテーブルにデータをインポートするには、ファイルを直接clickhouse-clientにパイプします。
FORMAT CSV 句を使用します。また、url() 関数を使って URL から直接データを読み込んだり、s3() 関数を使って S3 ファイルから読み込んだりすることもできます。
このCSVファイルにはヘッダーが含まれています:
; が使用されます。
CSVファイルからデータをインポートする際、先頭の数行をスキップしたい場合があります。これは、input_format_csv_skip_first_lines オプションを使用して行えます。
\N を使用します。ただし、これは format_csv_null_representation オプションで変更できます。
次のような CSV ファイルがあるとします。
Nothing を String として扱います (これは正しい挙動です) :
Nothing を NULL として扱う場合は、次のオプションで指定できます。
NULL が入っていることが確認できます:
FORMAT 句を使用します。
| を使用するようになります:
\n ではなく \r\n が使用されます。
DESCRIBE ステートメントを使用することで確認できます。
String 型として扱われます。
ClickHouse では、CSVWithNamesAndTypes (およびその他の *WithNames フォーマットファミリー) を使用してデータをエクスポートする際に、カラム型を明示的に指定することもできます。
row() で囲まれ、行は , で区切られ、各値は ; で区切られていることがわかります。この場合、このファイルからデータを読み込むには次の設定を使用できます。
COMPRESSION 句を使用できます。
COMPRESSION 句を省略しても、ClickHouse はファイルの拡張子に基づいて圧縮形式を推定しようとします。同じ方法で、ファイルを圧縮フォーマットに直接エクスポートすることもできます。
data_csv.csv.gzファイルが作成されます。
ClickHouse は、さまざまなシナリオやプラットフォームに対応するため、テキスト形式とバイナリ形式の両方を含む多数のフォーマットをサポートしています。さらに多くのフォーマットとその活用方法については、以下の記事を参照してください。
- CSV および TSV フォーマット
- Parquet
- JSON フォーマット
- Regex と Template
- Native とバイナリ形式
- SQL フォーマット