将数据帧写入hdfs中未压缩的镶木地板文件时出错

时间:2017-05-23 18:54:04

标签: apache-spark

我使用了以下代码

df.write.format("parquet").option("compression","none").mode("overwrite").save("/asdf")  

df.write.option("compression","snappy").save("/mmmm")
                                       ^

我正在获取压缩文件

/asdfh/part-r-00001-bcadb2e0-8ae1-4170-86f2-3dd42460bdd4.gz.parquet

0 个答案:

没有答案