我想从服务器中读取数据,并在Producer中监听数据流并发送到Topic。 数据源是客户端流式传输RPC ,其中客户端使用提供的流写入一系列消息并将其发送到服务器。
我确实找到了example,其中Producer连接到Twitter客户端并读取数据。但是,我的目标是在生产者的服务器收听流后立即读取数据并发送到Kafka主题。
是否有类似的例子或任何人遇到过这种情况?
任何帮助将不胜感激。
答案 0 :(得分:1)
了解您正在使用的流式RPC机制的细节会有所帮助,但作为第一个停靠端口我会看到akka-stream-kafka(又名reactive-kafka),因为它专门为流媒体场景: http://doc.akka.io/docs/akka-stream-kafka/current/producer.html
查看那里的例子。此外,alpakka是基于akka-stream的集成模式的一项举措,但支持的连接器列表到目前为止有限: http://developer.lightbend.com/docs/alpakka/current/