我怎么能用Apache kafka来激发流媒体并在rdd PySpark中获取msg

时间:2016-10-24 08:44:15

标签: apache-kafka pyspark apache-zookeeper

我正试图从Kafka流式传输到火花。

  1. 安装了kafka和spark
  2. 默认启动zookeeper
  3. properties config使用默认属性启动kafka服务器 config
  4. 开始kafka制作人已启动kafka consumer已发送消息 从生产者到消费者。 工作正常。

    但我不知道如何发送spark rdd。 我试图从3天开始解决这个问题,但没有得到任何结果。

    因为我是spark kafka的新人。

    我想发送生产商msg来激发rdd。

    我已经设置了spark-2.0.1-bin-hadoop2.7和kafka_2.11-0.10.0.1。 请帮我解决我的问题。

0 个答案:

没有答案