Apache Kafka沿袭信息

时间:2018-12-26 14:31:23

标签: apache-kafka kafka-producer-api

有什么方法可以获取 Kafka 作业的沿袭数据。

例如,对于所有 MapReduce 工作,我们都有一个作业历史URL

对于Kafka,是否可以通过类似的方式获取生产者的元数据,从而为特定主题生成信息? (例如:生产者的IP地址

1 个答案:

答案 0 :(得分:0)

开箱即用,不,不适用于生产者。

您可以列出消费者客户的地址,但看不到生产者的话题。

一种选择是查看Apache Atlas中的沿袭信息,该信息是Hortonwork的Stream Messaging Manager中用于分析Kafka连接信息的组件之一。

enter image description here

否则,您将无法尝试阻止生产者将这些数据与消息一起发送。