如何压缩CSV文件?Azure数据湖/Databricks

Question

我在Azure Data Lake中有一个CSV文件。我想通过DataBricks将此文件的类型更改为csv.gz。

我可以将这个文件写入df，然后将文件保存为csv.gz，然后从数据湖中删除csv文件。

是否可以在不将文件写入df的情况下将类型更改为csv.gz？

提前谢谢。

Answer 1

是否可以在不将文件写入df的情况下将类型更改为csv.gz？

不，这是不可能的。将此文件写入df，然后将文件保存为csv.gz，然后从数据湖中删除csv文件是正确的方法。