我正在使用 azure 数据工厂将逗号分隔的分区数据文件复制到 ADLS 中。
要求是使用 SNAPPY 压缩将逗号分隔的文件复制到 ORC 格式。
是否有可能使用 ADF 实现这一点? 如果是,那么你能帮我吗?
不幸的是,数据工厂可以从 ZLIB 和 SNAPPY 读取,但只能写入 ZLIB,这是 orc 文件格式的默认设置。
更多信息在这里: https://learn.microsoft.com/en-us/azure/data-factory/supported-file-formats-and-compression-codecs#orc-format
希望这有帮助!!