如何在Apache Spark中使用来自Kafka主题的Python读取JSON数据

时间:2019-08-20 11:00:47

标签: json pyspark spark-streaming-kafka

我是新火花,请让我知道如何使用Apache Spark中来自kafka主题的python读取json数据。 我尝试遵循以下代码,该代码适用于单行json,但不适用于多行json

*kafkaStream = KafkaUtils.createStream(ssc, k_host+':'+k_port, 'spark-streaming', {k_topic:1})
kafkaStream.pprint()
lines = kafkaStream.map(lambda row : row[1])*

谢谢。

0 个答案:

没有答案