将kafka-sparkstreaming从基于接收方的方法升级为基于非接收方的方法

时间:2018-10-29 06:56:24

标签: apache-spark apache-kafka spark-streaming upgrade compatibility

我目前正在研究Kafka和Spark Streaming POC。 Kafka版本是0.9,spark版本是2.1.0。现在我正在考虑将kafka升级到0.10。并考虑将Spark流作业从基于接收器升级到基于无接收器,如Apache Spark的官方页面所述。 https://spark.apache.org/docs/2.2.0/streaming-kafka-integration.html

由于在spark的官方网站上提到 spark-streaming-kafka-0-10 API的稳定性目前处于试验阶段。 所以我的问题是: 从基于接收器的方法升级为基于无接收器的方法有哪些挑战...? 有兼容性问题吗?我应该去升级吗??

0 个答案:

没有答案