Debezium没有从mongo获取所有主题

时间:2019-12-19 09:27:37

标签: mongodb apache-kafka apache-kafka-connect debezium

正如标题所述,我正在使用debezium连接到我的mongo oplog,它成功连接了日志,表明它开始整合所有主题的所有文档,但是当我检查创建的主题时,我只能看到两个。

这是我的连接器配置

name=mongodb-source-connector
connector.class=io.debezium.connector.mongodb.MongoDbConnector
mongodb.hosts=rs0/*************:27017
mongodb.name=mongo_conn
mongodb.user=**********
mongodb.password=********
initial.sync.max.threads=1
tasks.max=1
transforms=unwrap,convert,convert2,convert3,convert4
transforms.unwrap.type=io.debezium.connector.mongodb.transforms.UnwrapFromMongoDbEnvelope
transforms.unwrap.operation.header=true
transforms.convert.type=org.apache.kafka.connect.transforms.TimestampConverter$Value
transforms.convert.target.type=string
transforms.convert.field=createdAt
transforms.convert.format=yyyy-MM-dd HH:mm:ss ZZZ
transforms.convert2.type=org.apache.kafka.connect.transforms.TimestampConverter$Value
transforms.convert2.target.type=string
transforms.convert2.field=updatedAt
transforms.convert2.format=yyyy-MM-dd HH:mm:ss ZZZ
transforms.convert3.type=org.apache.kafka.connect.transforms.TimestampConverter$Value
transforms.convert3.target.type=string
transforms.convert3.field=created_at
transforms.convert3.format=yyyy-MM-dd HH:mm:ss ZZZ
transforms.convert4.type=org.apache.kafka.connect.transforms.TimestampConverter$Value
transforms.convert4.target.type=string
transforms.convert4.field=updated_at
transforms.convert4.format=yyyy-MM-dd HH:mm:ss ZZZ

这是我的连接器输出

https://pastebin.com/QNfvpGiD

我尝试用自己的名字自己设置主题,然后再次启动连接器,仍然没有任何反应,我不确定问题是否出在SMT级别上。

0 个答案:

没有答案