如何从带有标题的spark 2.1中的空数据集<row>创建csv文件

时间:2018-02-23 16:31:48

标签: apache-spark

Spark 2.1具有在从数据集创建CSV时写入空文件的默认行为

如何创建带标题的csv文件? 这就是我用来编写文件

dataFrame.repartition(NUM_PARTITIONS).write()
              .option("header", "true")
              .option("delimiter", "\t")
              .option("overwrite", "true")
              .option("nullValue", "null")
              .option("codec", "org.apache.hadoop.io.compress.GzipCodec")
              .csv("some/path");

0 个答案:

没有答案