Npy

Input	Output	Alias
✔	✔

説明

Npy 形式は、.npy ファイルから NumPy 配列を ClickHouse にロードするために設計されています。 NumPy ファイル形式は、数値データの配列を効率的に保存するために使用されるバイナリ形式です。インポート中、ClickHouse は最上位次元を単一カラムの行の配列として扱います。

以下の表は、サポートされている Npy データ型とそれに対応する ClickHouse の型を示しています。

データ型の対応

Npy データ型 (`INSERT`)	ClickHouse データ型	Npy データ型 (`SELECT`)
`i1`	Int8	`i1`
`i2`	Int16	`i2`
`i4`	Int32	`i4`
`i8`	Int64	`i8`
`u1`, `b1`	UInt8	`u1`
`u2`	UInt16	`u2`
`u4`	UInt32	`u4`
`u8`	UInt64	`u8`
`f2`, `f4`	Float32	`f4`
`f8`	Float64	`f8`
`S`, `U`	String	`S`
	FixedString	`S`

使用例

Python を使って .npy 形式で配列を保存する

import numpy as np
arr = np.array([[[1],[2],[3]],[[4],[5],[6]]])
np.save('example_array.npy', arr)

ClickHouse で NumPy ファイルを読み込む

SELECT *
FROM file('example_array.npy', Npy)

┌─array─────────┐
│ [[1],[2],[3]] │
│ [[4],[5],[6]] │
└───────────────┘

データの選択

ClickHouse のテーブルからデータを選択し、clickhouse-client を使用して Npy 形式のファイルに保存することができます。

$ clickhouse-client --query="SELECT {column} FROM {some_table} FORMAT Npy" > {filename.npy}

説明​

データ型の対応​

使用例​

Python を使って .npy 形式で配列を保存する​

ClickHouse で NumPy ファイルを読み込む​

データの選択​

形式設定​

説明

データ型の対応

使用例

Python を使って .npy 形式で配列を保存する

ClickHouse で NumPy ファイルを読み込む

データの選択

形式設定