データ取り込み
ClickHouseは、データ統合と変換のためのさまざまなソリューションと統合されています。 詳細については、以下のページを確認してください:
データ取り込みツール | 説明 |
---|---|
Airbyte | オープンソースのデータ統合プラットフォーム。ELTデータパイプラインを作成でき、140以上のアウトオブボックスコネクタが用意されています。 |
Apache Spark | 単一ノードのマシンまたはクラスター上でデータエンジニアリング、データサイエンス、および機械学習を実行するための多言語エンジンです。 |
Amazon Glue | Amazon Web Services (AWS) によって提供される完全に管理されたサーバーレスデータ統合サービスで、分析、機械学習、およびアプリケーション開発のためにデータを発見、準備、変換するプロセスを簡素化します。 |
Azure Synapse | Microsoft Azureによって提供される完全に管理されたクラウドベースの分析サービスで、大規模なデータ統合、変換、および分析を簡素化するためにビッグデータとデータウェアハウジングを組み合わせています。SQL、Apache Spark、およびデータパイプラインを使用します。 |
Azure Data Factory | 大規模なデータワークフローを作成、スケジュール、およびオーケストレーションできるクラウドベースのデータ統合サービスです。 |
Apache Beam | 開発者がバッチおよびストリーム(連続)データ処理パイプラインを定義および実行できるオープンソースの統一プログラミングモデルです。 |
dbt | 分析エンジニアが選択ステートメントを書くことで、データウェアハウス内のデータを変換できるようにします。 |
dlt | さまざまな、しばしば乱雑なデータソースから整然としたライブデータセットにデータをロードするためにPythonスクリプトに追加できるオープンソースライブラリです。 |
Fivetran | クラウドデータプラットフォーム間でデータの移動を自動化するプラットフォームです。 |
NiFi | ソフトウェアシステム間のデータフローを自動化するために設計されたオープンソースのワークフローマネジメントソフトウェアです。 |
Vector | 組織がその可観測性データを管理できるようにする高性能の可観測性データパイプラインです。 |