AWS Kinesis Firehose是否有Kafka对应产品？

Question

就像AWS Kinesis Firehose一样，它是一种将数据（缓冲在一起）摄取到对象的方法，这种功能是否存在Kafka对应物？

Answer 1

是，Kafka Connect，它是Apache Kafka的一部分。

您可以将其与variety of connectors配合使用，以将数据从源（RDBMS，JMS，MQTT，CSV等）流式传输到Kafka主题，再从Kafka主题传输到目标（RDBMS， S3，BigQuery，HDFS等）

Kafka Connect运行中：

• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-1/
• https://www.confluent.io/blog/blogthe-simplest-useful-kafka-connect-data-pipeline-in-the-world-or-thereabouts-part-2/
• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-3/

免责声明：我为Confluent工作。