如何将从Kafka直接流接收的数据存储到csv文件中?

时间:2020-10-23 13:44:21

标签: python csv pyspark apache-kafka spark-streaming

我打算对从Kafka流中接收到的数据存储到CSV文件中,因为我打算对该数据进行一些机器学习,但是我无法弄清楚如何将数据存储在CSV中。

我写的代码是:

erb

weatherStream在控制台中以json格式打印数据,如下所示:

Console output

数据正以json格式打印,我想获取每个值并将其存储在csv中,并对流中检索到该csv文件的所有数据进行处理。

我希望我的查询清楚! 谢谢

0 个答案:

没有答案