Spark数据框到csv文件保存为部分

时间:2016-10-14 10:27:30

标签: apache-spark

您好我有这个代码,将数据帧保存到系统本地的cvs中,并且我不断获取目录名称myfile.csv / part-0000.gz,part-0001.gz ....我只想要一个cvs文件。这是我的代码

String current = LocalDateTime.now().format(DateTimeFormatter.ISO_LOCAL_DATE_TIME);
groupedMessages.write()
  .format("com.databricks.spark.csv")
  .option("header", "true")
  .option("codec", "org.apache.hadoop.io.compress.GzipCodec")
  .save("/finance_reports/myfile.csv");

}

0 个答案:

没有答案