我们如何流传输数据管道以将数据从雪花传输到kafka？

Question

我想将转换后的数据从雪花获取到我的postgres数据库。为此，我想将数据从雪花移动到kafka，然后从kafka移动到postgres。无法弄清楚如何将数据从雪花移动到kafka。

Answer 1

• 您可以使用 NiFi 从 Snowflake 获取数据并将其发送到 kafka 话题
• 你可以使用像 Fivetran 这样的三方
• 您可以使用复制到 S3 或云存储并使用侦听器获取新事件 https://docs.snowflake.com/en/user-guide/data-unload-s3.html