标签: json scala apache-spark hdfs
我正在使用Spark群集,我想将一个字符串写入文件并使用Scala将其保存到主节点 我查看this topic并尝试了一些建议,但我找不到保存的文件
答案 0 :(得分:0)
您只需要在RDD上调用collect即可将集合返回给驱动程序。然后,您可以将其写入驱动程序上的文件系统。
虽然建议以并行方式编写它以提高性能。