使用mongo-kafka作为接收器连接器,如何将字段的值设置为Date类型?

时间:2019-10-25 20:34:02

标签: mongodb apache-kafka-connect mongodb-kafka-connector

我有一个mongo接收器连接器以及一个架构注册表。

我将mongo接收器连接器配置为访问架构注册表,类似于:https://github.com/mongodb/mongo-kafka/blob/master/docs/sink.md#configuration-example-for-avro

我根据以下内容创建了一个架构:https://github.com/mongodb/mongo-kafka/blob/master/docs/sink.md#logical-types。看起来像这样:

{
  "type": "record",
  "name": "MyLogicalTypesRecord",
  "namespace": "com.mongodb.kafka.data.kafka.avro",
  "fields": [
    {
      "name": "myTimestampMillisField",
      "type": {
        "type": "long",
        "logicalType": "timestamp-millis"
      }
    }
  ]
}

但是,当记录通过时,数据看起来像这样:{ "myTimestampMillisField": 1572035138104 },而不是与此{ "myTimestampMillisField": ISODate("2019-10-25T20:28:19.628Z") }类似的东西。

我检查了模式注册表,以确保逻辑类型在那里并且看起来不错。

我不确定自己做错了什么,还是不确定是否有更好的方法在mongo中将其设置为Date类型。有什么想法吗?

1 个答案:

答案 0 :(得分:0)

我知道了。

https://docs.confluent.io/current/connect/transforms/timestampconverter.html

"transforms": "TimestampConverter",
"transforms.TimestampConverter.type": "org.apache.kafka.connect.transforms.TimestampConverter$Value",
"transforms.TimestampConverter.field": "myTimestampMillisField",
"transforms.TimestampConverter.target.type": "Date"