ClickHouse Workload for Microsoft Fabric: OneLake 上でサブ秒単位の分析を実現、パブリックプレビューを開始

Microsoft Fabric を利用する多くのデータチームにとって、データの置き場所に関する課題はすでに解決しています。データはガバナンスが効き、統合された OneLake に配置されています。より難しいのは、アナリストチームでは到底発生させられないほどの高い同時実行数で、ミリ秒単位の応答を求める AI エージェントがそのデータに対してクエリを実行し始めたときにどう対応するかです。リアルタイムでインタラクティブなダッシュボードや顧客向けアプリケーションも同様の負荷をもたらしますが、エージェントの登場によってその要求はさらに加速しています。

現在 Fabric を運用しているチームに、こうしたワークロードをどのように処理しているか尋ねてみると、さまざまな回避策が返ってきます。既存のエンジン内での事前集計パイプライン、カスタムキャッシュ層、あるいは Fabric と並行して外部データベースを稼働させ、自作の ETL でデータを取り込み続けるといった方法です。いずれも機能はしますが、どれもプラットフォームの外部で構築、保護、保守しなければならない余計なインフラストラクチャとなってしまいます。

Microsoft Fabric 向け ClickHouse ワークロードは、まさにこの課題を解決することを目的としており、現在パブリックプレビューとして Fabric ワークロードハブから利用できます。最速のオープンソース分析データベースである ClickHouse を、OneLake のアクセラレーション層となるネイティブワークロードとして、Fabric ワークスペースに直接導入します。

ClickHouse ワークロードの概要 #

数クリックで OneLake テーブルを専用の ClickHouse Cloud サービスに同期し、Fabric 内から数十億行のデータに対して 1 秒未満の応答時間でクエリを実行できます。OneLake は一貫して信頼できる唯一の情報源(Source of Truth)として維持されます。

ワークスペース内で ClickHouse アイテムを作成すると、お使いの Microsoft Entra アカウントを使用して Microsoft Azure 上に専用の ClickHouse Cloud サービスがプロビジョニングされ、トライアルも含まれています。

本ワークロードでは以下のことが可能です。

• Fabric のキャパシティを消費することなく、専用でコスト効率の高い ClickHouse Cloud のコンピュート上で、AI エージェント、ダッシュボード、アプリケーション向けに高い同時実行性でデータを提供
• パイプラインの構築や保守を行うことなく、OneLake テーブルを高速化されたコピーとして ClickHouse に同期
• Fabric 内の組み込み SQL コンソールからクエリとデータ探索を実行し、作成したクエリを保存していつでも再利用可能
• あらゆるツールと接続: Microsoft Copilot Studio や GitHub Copilot のエージェント向けにガバナンスの効いた読み取り専用アクセスを提供。エージェント以外にも、認定済みの ClickHouse コネクタを介した Power BI での利用、Fabric ノートブックでの分析、公式の ClickHouse クライアントを使用したアプリケーション開発が可能

クイックツアー #

ClickHouse アイテムを作成する。 ワークスペースで + 新しいアイテム を選択し、ClickHouse Cloud を選びます。ワークスペースは ClickHouse の組織に、アイテムは専用のサービスに対応付けられます。ワークスペースのすべてのメンバーは、最初にアイテムを開いたときに ClickHouse ユーザーとして追加されます。

OneLake から同期する。 レイクハウスを選び、高速化したいテーブルを選択して同期を開始します。型推論された転送先テーブルをそのまま利用することも、あらかじめ独自のテーブルを定義しておくこともできます。パブリックプレビュー期間中、同期はポイントインタイムのスナップショットとして実行され、取り込み料金は発生しません。

クエリを実行する。 組み込みの SQL コンソールは標準的な SQL に対応しており、ClickHouse の包括的な分析ツール群をフルに活用できるため、既存のクエリやスキルをそのまま活かせます。数十億行に及ぶテーブル全体の集計も、多数のクライアントが同時にクエリを実行している状況でさえ、安定してミリ秒単位で結果が返ってきます。保存しておきたいクエリを保存すれば、いつでも呼び出せます。パブリックプレビューでは、保存されたクエリは各ユーザー専用となります。

ツールを接続する。 「接続」画面には、本サービスにアクセス可能なあらゆる環境向けのコピー&ペースト可能なクイックスタートが用意されています。エージェントアクセスを有効にすると、本サービスは Copilot Studio、Microsoft Foundry、GitHub Copilot、およびあらゆる MCP 互換ツール向けのガバナンスの効いた読み取り専用エンドポイントになります。クイックスタートには、Power BI Desktop およびサービス、Fabric ノートブック、HTTPS、JDBC/ODBC、MySQL プロトコル、そして Python、Node.js、Java、Go、C#、Rust などの公式クライアントも網羅されています。

ClickHouse Cloud で開く。 ワンクリックで、Microsoft SSO を使ってサインインした状態で Cloud コンソールに移動でき、スケーリング、アイドリング、モニタリング、バックアップなど、管理者に必要なすべての操作を行えます。日常業務は Fabric 内で完結させ、必要なときだけワンクリックで Cloud コンソールにアクセスできます。

内部の仕組み #

さらに踏み込んで、サードパーティのデータベースがどのようにしてネイティブな Fabric エクスペリエンスを実現しているかを解説します。

プロビジョニング。 本ワークロードは Fabric Extensibility Toolkit 上に構築されています。利用者が ClickHouse アイテムを作成すると、Fabric はアイテムのライフサイクル API 経由で私たちのバックエンドを呼び出し、組織、サービス、トライアルを自動的にプロビジョニングします。ユーザーはトークン交換を通じてジャストインタイムで作成されます。Fabric Workload Client SDK から渡された Entra トークンを検証し、テナント ID とオブジェクト ID から決定論的に導出された一致する ClickHouse Cloud ID を確立します。ClickHouse の組織ロールは Fabric ワークスペースのロールからマッピングされるため、管理者は管理者として、閲覧者は読み取り専用としてアクセスすることになります。

同期。 OneLake からのすべての同期は、S3 や Azure Blob Storage 向けのオブジェクトストレージパイプを支えているのと同じマネージド取り込み機構である ClickPipes を介して実行されます。ClickPipe は認証された認証情報を使用して OneLake から直接テーブルを読み取り、型をマッピングしたうえで専用サービスへとデータをストリーミングします。データは OneLake と専用サービスの間を直接流れるため、すべてが Azure 内で完結し、データ転出(エグレス)コストは発生しません。

エンジン。 アイテムの背後にあるサービスは Azure 上の ClickHouse Cloud であり、お使いの Fabric キャパシティに最も近いリージョンにプロビジョニングされます。これらはデータレジデンシー要件を満たす EU リージョンを含む、私たちのサポート対象リージョンです。これは垂直および水平方向にスケールする専用コンピュートであり、デフォルトでアイドリングが有効化されています。また、専用インフラストラクチャとして Microsoft Marketplace 経由で課金されるため、エージェントやアプリケーションの負荷が Power BI のキャパシティと競合することはありません。

セキュリティ、プライバシー、コンプライアンスの詳細については、こちらのベンダー認証情報をご確認ください。

今後の展望 #

これまでに話を聞いたチームから最も多く寄せられた要望は、OneLake への書き戻し、権限の同期、そしてより緊密な Microsoft Power BI との統合であり、それこそが私たちの進む方向です。今後構築を予定している機能は以下のとおりです。

• OneLake への書き戻し: ワークロードに OneLake への書き込み機能を取り込み、マテリアライズドビューの出力などの高速化された結果をレイクハウスに戻すことで、Power BI、セマンティックモデル、および Fabric の他の機能で利用可能に
• より高度なレプリケーション: 現在のポイントインタイムのスナップショットにとどまらない、OneLake からの継続的な同期
• 権限の同期: OneLake の権限を ClickHouse に引き継ぐ、よりきめ細かなアクセス制御
• より緊密なワークロード体験: コラボレーションのためのさらなるアクセス制御と保存済みクエリの共有、Private Link によるプライベートネットワーキング、サービスの管理機能の Fabric 内への直接的な提供の拡充
• ClickHouse の強みを活かした専用機能: 全文検索、ベクトル検索、マテリアライズドビューを、Fabric ワークロード内のファーストクラスの機能として提供

今すぐ始める #

本ワークロードは現在 Fabric ワークロードハブにて提供中であり、ClickHouse の Scale ティアのトライアルが含まれています。ドキュメントには、Fabric の祝日サンプルデータを使用した入門チュートリアルが用意されています。独自のデータセットを用意することなく、同期、クエリ、Power BI、さらにはエージェントへの問い合わせに至る一連の流れをすべて試すことができます。

手元の OneLake テーブルで実際に試してみて、ぜひご意見をお聞かせください。現在はパブリックプレビューの段階であり、今いただくフィードバックが次回以降にリリースされる機能の形を作っていきます。