如何使用 Azure 数据工厂将 CSV 转换为 ORC 格式



我正在使用 azure 数据工厂将逗号分隔的分区数据文件复制到 ADLS 中。

要求是使用 SNAPPY 压缩将逗号分隔的文件复制到 ORC 格式。

是否有

可能使用 ADF 实现这一点? 如果是,那么你能帮我吗?

不幸的是,数据工厂可以从 ZLIB 和 SNAPPY 读取,但只能写入 ZLIB,这是 orc 文件格式的默认设置。

更多信息在这里: https://learn.microsoft.com/en-us/azure/data-factory/supported-file-formats-and-compression-codecs#orc-format

希望这有帮助!!

最新更新