Spark 1.6-df.write.save()和df.write.parquet()有什么区别

时间:2018-08-03 20:03:00

标签: apache-spark dataframe apache-spark-sql

所以我试图在Scala中学习一些Spark 1.6,我想知道保存这样的数据帧之间是否有任何区别

sqlContext.setConf("spark.sql.parquet.compression.codec", "gzip")
df.where($"mycol" === 0).write.save("/myfolder/")

与之相反

sqlContext.setConf("spark.sql.parquet.compression.codec", "gzip")
df.where($"mycol" === 0).write.parquet("/myfolder/")

谢谢! :)

0 个答案:

没有答案