如何在pentaho 8中使用Kafka消费者?

时间:2017-12-18 11:36:15

标签: apache-kafka pentaho kettle consumer

我尝试使用pentaho kettle 8的新Kafka消费者步骤,但我无法加载任何数据。当我使用它时,它总是像阅读,但我看不到任何数据。

有任何教程或如何读取数据的示例?我看到官方文档不是很有用,没有很好的解释,我没有在网上找到任何例子。

提前谢谢你,

2 个答案:

答案 0 :(得分:0)

我有一个工作转型和子转型,我们做的改变是,

在卡卡转型中,

1.我们在连接时使用直接引导服务器。 2.我们添加了消费者群体" cons1" 3.将auto.offset.reset更改为"最早"在选项选项卡上。

在子转换中。

In"从流中获取记录"一步,我们给出了以下字段 字段名称类型 关键无 消息无
主题无
分区无
偏移无 时间戳时间戳

Kafka版本:kafka_2.11-1.1.0

我上传了一个可行的示例.ktr https://drive.google.com/file/d/1mr1ZYU_A0uAedRdgRs2oDF6HubOO4UPx/view?usp=sharing

答案 1 :(得分:0)

检查kafka配置文件:server.properties 设置advertised.listeners = PLAINTEXT://your.host.name:9092 否则将无法进行远程访问