德鲁伊卡夫卡摄入了你的写作

时间:2018-06-06 19:23:37

标签: apache-kafka druid

我现在正在学习德鲁伊。我读到通过Kafka Indexing Service提取的确切保证了一次语义。

但是,我在确定德鲁伊的一致性模型时遇到了问题。通常,流是异步的,但我想在应用程序中使用read-your-writes语义。

有没有可能检查德鲁伊的摄入状态?例如,我发送事件A并想要检查它是否已经保存在德鲁伊中。如果是,查询德鲁伊应返回带有此值的结果。

也许还有一些其他的可能性可以通过一次性语义和读写操作来实时摄取?

1 个答案:

答案 0 :(得分:1)

德鲁伊有单独的摄取和阅读数据的过程。 read-your-writes不是直接可能的,但是你可以获得写入的成功,而且你可以单独查询来阅读你的写作。

检查宁静服务器,它提供了一个基于http的网关实时写入,它也试图处理一次摄入。

虽然确保一次摄取的最佳方法是根据您的使用情况定期进行批量摄取重建索引。