我希望用Python或R(最好是R)一起破解kafka消费者。 使用kafka控制台使用者我可以grep一个字符串并检索相关数据但是我在R中适当地解析它时会感到茫然。
有kafka客户端可以使用其他语言(例如:PHP,CPP),但从数据分析的角度来看,R中的一个客户端会很有用。
如果此论坛上的专家R开发人员暗示/建议可以让我在这方面取得进展的资源,那将是很棒的。
Apache Kafka:incubator.apache.org/kafka /
Kafka Consumer Client(s):https://github.com/kafka-dev/kafka/tree/master/clients
答案 0 :(得分:4)
由于有C++ API for Kafka,您可以使用Rcpp将其带到R。
编辑以回应对R-only解决方案的评论:我不知道Kafka是否足够好回答,但一般来说,中间件运行速度很快,连接多个客户端,流等等。所以你想要在某个地方简化一些东西以获得R(单线程原样)来玩它。
答案 1 :(得分:4)
[2015年更新]有一个库可以让您连接到kafka - rkafka