如何在spark streaming和kafka中处理XMLmessage?

时间:2016-10-04 10:20:12

标签: apache-spark apache-kafka spark-streaming

我是新来的火花。在kray流中使用来自kafka的消息作为xml格式。你能告诉我如何处理这个xml是火花流吗?

1 个答案:

答案 0 :(得分:0)

Spark Streaming和Kafka文档在上游提供了示例:
http://spark.apache.org/docs/latest/streaming-kafka-0-8-integration.html

这是支持的版本的兼容性矩阵。从开始使用流媒体开始,首先坚持稳定版本:
http://spark.apache.org/docs/latest/streaming-kafka-integration.html

您可以使用此库处理Spark中的XML记录 https://github.com/databricks/spark-xml