没有Storm / Spark流媒体的Kafka数据处理

Question

我知道可以使用Storm或Spark流来用kafka进行实时数据处理，但我想问一下kafka中是否有类似于Flume拦截器的功能，其中数据清理等可以在在一次活动中飞翔。

Answer 1

目前在Kafka的发布版本中没有这样的功能，但是下一个版本（根据the roadmap的0.10.0.0）将具有Kafka Streams，它看起来与您要求的类似。

Answer 2

你正在寻找的是Kafka Interceptors，它实际上受到了Flume拦截器界面的启发。就像@Lundahl指出当前版本不支持这一点，但下一个版本会支持。