deltaLakeCluster 表函数
这是对 deltaLake 表函数的扩展。
允许从指定集群中的许多节点并行处理 Amazon S3 中的 Delta Lake 表文件。在发起者上,它创建与集群中所有节点的连接,并动态派发每个文件。在工作节点上,它向发起者询问下一个要处理的任务并进行处理。直到所有任务完成,这个过程会重复进行。
语法
参数
-
cluster_name
— 用于构建一组地址和远程及本地服务器连接参数的集群名称。 -
所有其他参数的描述与等效 deltaLake 表函数中的参数描述一致。
返回值
一个具有指定结构的表,用于从指定的 Delta Lake 表中读取集群数据,该表位于 S3 中。