如何将数据从Kafka加载到CrateDB？

Question

从CrateDB GitHub页面上的以下问题来看，这似乎是不可能的，即CrateDB不支持Kafka协议。 https://github.com/crate/crate/issues/7459

还有另一种方法将数据从Kafka加载到CrateDB吗？

Answer 1

通常，您将使用Kafka Connect将Kafka集成到目标（和源）系统，并使用适合目标技术的连接器。

我找不到CrateDB的Kafka Connect连接器，但是Kafka Connect有一个JDBC sink connector，还有一个JDBC driver for CrateDB，所以值得一试。

您可以阅读有关Kafka Connect here的更多信息，并在本博客系列中进行实际操作：

• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-1/
• https://www.confluent.io/blog/blogthe-simplest-useful-kafka-connect-data-pipeline-in-the-world-or-thereabouts-part-2/
• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-3/

免责声明：我为Confluent工作，我写了上述博客文章。