将DStream转换为RDD

时间:2016-08-28 13:32:06

标签: apache-spark pyspark spark-streaming

如何将Spark Streaming DStream转换为RDD,以便在Spark Context&不在流媒体上下文?使用Python。

这是我得到的错误: AttributeError:' TransformedDStream'对象没有属性' foreach'

def result(y):
  return y


d_stream = input_stream.map(lambda x : mainReduce(x)).map(lambda q: q)

rdd = d_stream.foreach(result)

0 个答案:

没有答案