Spark-python textFile创建奇怪的rdd

时间:2018-11-25 09:38:19

标签: python apache-spark pyspark

我保存了一个RDD rdd.saveAsTextFile("file_dir")

当我键入 rdd = sc.textFile("path/to/file_dir")已创建一个RDD。

唯一的问题是创建的RDD不可用。

tail file "('a', (('a1', '1'), ('a2', '2')))"

rdd.collect()[1] "('a', (('a1', '1'), ('a2', '2')))"

rdd.collect()[1][0] "("

如何将输出格式更改为可以使用的格式?

0 个答案:

没有答案