hudiCluster テーブル関数

これは hudi テーブル関数の拡張です。

指定されたクラスター内の多くのノードで、Amazon S3 の Apache Hudi テーブルからファイルを並行処理することができます。イニシエーターはクラスター内のすべてのノードへの接続を作成し、各ファイルを動的に派遣します。ワーカーノードは、イニシエーターに次の処理タスクを問い合わせ、それを処理します。これはすべてのタスクが終了するまで繰り返されます。