データ取り込み
ClickHouseは、データ統合と変換のためのさまざまなソリューションと統合されています。詳細については、以下のページをご覧ください:
データ取り込みツール | 説明 |
---|---|
Airbyte | オープンソースのデータ統合プラットフォームです。ELTデータパイプラインの作成が可能で、140以上のコネクタが付属しています。 |
Apache Spark | 単一ノードまたはクラスター上でデータエンジニアリング、データサイエンス、機械学習を実行するための多言語エンジンです。 |
Amazon Glue | データの発見、準備、分析、機械学習、アプリケーション開発のためにデータを変換するプロセスを簡素化する、完全に管理されたサーバーレスのデータ統合サービスです。 |
Azure Synapse | Microsoft Azureが提供する、クラウドベースの完全に管理された分析サービスであり、大規模なデータ統合、変換、および分析を簡素化するためにSQL、Apache Spark、およびデータパイプラインを組み合わせています。 |
Azure Data Factory | スケールでデータワークフローを作成、スケジュール、およびオーケストレーションすることを可能にするクラウドベースのデータ統合サービスです。 |
Apache Beam | バッチ処理とストリーム(連続)データ処理パイプラインの両方を定義し実行するためのオープンソースの統一プログラミングモデルです。 |
BladePipe | サブ秒のレイテンシーを持つリアルタイムのエンドツーエンドデータ統合ツールであり、プラットフォーム間でのシームレスなデータフローを促進します。 |
dbt | アナリティクスエンジニアがセレクトステートメントを書くだけで、データウェアハウス内のデータを変換できるようにします。 |
dlt | 様々かつしばしば雑然としたデータソースから、よく構造化されたライブデータセットにデータをロードするために、Pythonスクリプトに追加できるオープンソースライブラリです。 |
Fivetran | クラウドデータプラットフォームの間でデータを移動させる自動化されたデータ移動プラットフォームです。 |
NiFi | ソフトウェアシステム間のデータフローを自動化するために設計されたオープンソースのワークフローマネジメントソフトウェアです。 |
Vector | 組織がその可観測データをコントロールできる高性能な可観測性データパイプラインです。 |