Debezium能否捕获Postets物化视图的更改

时间:2019-10-24 08:53:52

标签: postgresql apache-kafka apache-kafka-connect debezium

我们当前正在尝试使用Debezium捕获Postgres数据库中4个表的更改。目前,我们知道在此用例中,我们可以使用kafka-streams应用程序来联接/聚合KTable的表,但是我们希望保持kafka-stream拓扑简单,因此我们的想法是使用Postgres和捕捉变化。

是否可以这样做,如果可以的话,我们应该如何配置呢?

Kafka Connect源配置:

{
"name": "campaign-db-source-connector",
  "config": {
    "connector.class": "io.debezium.connector.postgresql.PostgresConnector",
    "key.converter": "io.confluent.connect.avro.AvroConverter",
    "value.converter": "io.confluent.connect.avro.AvroConverter",
    "key.converter.schema.registry.url": "http://schema-registry:8081",
    "value.converter.schema.registry.url": "http://schema-registry:8081",
    "tasks.max": "1",
    "database.hostname": "campaign-db",
    "database.port": "5432",
    "database.user": "postgres",
    "database.password": "postgres",
    "database.dbname" : "campaigndb",
    "database.server.name": "campaign-db"
  }
 }

此配置当前可以捕获单个表中的所有更改,但不能捕获物化视图中的所有更改。 (未创建主题)

1 个答案:

答案 0 :(得分:1)

否,Debezium Postgres连接器无法捕获视图中的更改。您要么必须将联接保留在表中并捕获该表,要么必须使用类似Kafka Streams的方法创建联接。