有什么方法可以获取 Kafka 作业的沿袭数据。
例如,对于所有 MapReduce 工作,我们都有一个作业历史URL 。
对于Kafka,是否可以通过类似的方式获取生产者的元数据,从而为特定主题生成信息? (例如:生产者的IP地址)
答案 0 :(得分:0)
开箱即用,不,不适用于生产者。
您可以列出消费者客户的地址,但看不到生产者的话题。
一种选择是查看Apache Atlas中的沿袭信息,该信息是Hortonwork的Stream Messaging Manager中用于分析Kafka连接信息的组件之一。
否则,您将无法尝试阻止生产者将这些数据与消息一起发送。