如何创建PairRDD？

Question

我需要创建一个PairRDD（draft_ids），其中key是项目的标识符，而value是通过split方法获得的所有字段。我们有rdd草稿

draft.take(3).foreach(println)

[Ljava.lang.String;@302bf7bb
[Ljava.lang.String;@3128929f
[Ljava.lang.String;@30037ad7

Answer 1

您需要调用mapToPair函数，该函数返回一个元组 例如在python中：

def myMap2pair(element):
    key = element.getKey()
    value = element.getValue()
    return key, value

draftKV = draft.map(myMap2pair)