将 spark 数据帧存储到 csv 文件中并压缩该文件并将其存储在数据湖中

时间:2021-03-05 21:09:19

标签: azure apache-spark-sql zipfile

我在 databricks 中有一个 spark 数据框,需要将该 df 存储在 datalake 中。 文件应以 csv 格式写入,稍后需要将其压缩为 zip。 将数据湖安装到数据块中已完成。 有什么建议可以写一个 csv 并将其压缩成 zip 文件吗?

0 个答案:

没有答案
相关问题