如何通过RDD索引使用saveTextFile?

时间:2019-06-12 06:32:22

标签: scala apache-spark

我正在尝试使用Scala将RDD写入hdfs,它将通过密钥(例如我的RDD类型是RDD[String, Float, Float],第一个元素是key。

代码是

val record: RDD[(String, Float, Float)] = sth.map { x => (str, v1, v2)}

如何保存它并用此键编制索引,我希望所有记录(key1, v1, v2)存储在key1目录中,而(key2, v1, v2)存储在key2目录中,等等。我使用类似saveTextFile的东西吗?

0 个答案:

没有答案