可以使用Serverless Pool创建Parquet文件吗?



我们使用Synapse已经有一段时间了,主要使用无服务器池和Parquet、外部表和视图。我有几个读取多个外部表的大型视图,需要很长时间才能生成。我希望我可能能够安排一个作业来生成这些可由另一个外部表读取的拼花文件。

我想知道是否有一种方法,我可以通过SQL查询在无服务器池上生成一个拼花文件。

我相信我看到了一种使用Spark Pool的方法,但我很好奇是否有一种使用无服务器池的方法,因为我认为从长远来看,这将是一个更便宜的选择。

您可以创建具有复制活动的数据工厂管道。复制活动源数据集需要指向Serverless Pool DB,以及需要运行的查询。复制活动接收器可以是Parquet格式的ADLS2文件夹。您可以根据需要通过触发器调度该管道。

输入图片描述

相关内容

  • 没有找到相关文章

最新更新