使用pyspark在hdfs上定位拼花文件

时间:2018-09-08 07:11:10

标签: pyspark

我有一个要为其创建镶木地板文件的数据框。我正在使用以下命令创建镶木地板文件。

mydf.write.parquet(“ test.parquet”) 我试图给出完整的路径,但仍然找不到该文件。该命令可以正常工作,因为我能够将文件读回到新的DF中,但是我想找到该文件。

问题是我可以在我们的hdfs上找到该文件?

谢谢, 罗宾

0 个答案:

没有答案