有没有办法使用spark_write_csv在sparklyr中为csv文件设置名称？

Question

我需要将数据帧写入单个csv文件，并发现我可以使用sdf_coalesce()将文件转换为单个分区。我想知道是否有任何方法可以更改spark_write_csv()生成的csv文件的名称？

提前致谢。

Answer 1

没有。自动生成文件名，使其在不同任务中是唯一的，并且不可配置。如果您需要特定名称，则必须使用特定于正在使用的文件系统/存储解决方案的实用程序重命名输出。