データ取り込み
ClickHouseは、データ統合と変換のためのさまざまなソリューションと統合されています。詳細については、以下のページをご覧ください:
| データ取り込みツール | 説明 |
|---|---|
| Airbyte | オープンソースのデータ統合プラットフォームです。ELTデータパイプラインの作成が可能で、140以上のコネクタが付属しています。 |
| Apache Spark | 単一ノードまたはクラスター上でデータエンジニアリング、データサイエンス、機械学習を実行するための多言語エンジンです。 |
| Amazon Glue | データの発見、準備、分析、機械学習、アプリケーション開発のためにデータを変換するプロセスを簡素化する、完全に管理されたサーバーレスのデータ統合サービスです。 |
| Azure Synapse | Microsoft Azureが提供する、クラウドベースの完全に管理された分析サービスであり、大規模なデータ統合、変換、および分析を簡素化するためにSQL、Apache Spark、およびデータパイプラインを組み合わせています。 |
| Azure Data Factory | スケールでデータワークフローを作成、スケジュール、およびオーケストレーションすることを可能にするクラウドベースのデータ統合サービスです。 |
| Apache Beam | バッチ処理とストリーム(連続)データ処理パイプラインの両方を定義し実行するためのオープンソースの統一プログラミングモデルです。 |
| BladePipe | サブ秒のレイテンシーを持つリアルタイムのエンドツーエンドデータ統合ツールであり、プラットフォーム間でのシームレスなデータフローを促進します。 |
| dbt | アナリティクスエンジニアがセレクトステートメントを書くだけで、データウェアハウス内のデータを変換できるようにします。 |
| dlt | 様々かつしばしば雑然としたデータソースから、よく構造化されたライブデータセットにデータをロードするために、Pythonスクリプトに追加できるオープンソースライブラリです。 |
| Fivetran | クラウドデータプラットフォームの間でデータを移動させる自動化されたデータ移動プラットフォームです。 |
| NiFi | ソフトウェアシステム間のデータフローを自動化するために設計されたオープンソースのワークフローマネジメントソフトウェアです。 |
| Vector | 組織がその可観測データをコントロールできる高性能な可観測性データパイプラインです。 |