我正在寻找一种模型,用于从队列中读取时间序列数据并将其聚合到1分钟的存储桶中,然后将这些存储桶写到另一个队列中(尽管我可以在任何位置写入存储桶)。
当观察到下一个存储桶的第一个事务时,存储桶被关闭(写入)。如果没有及时观察到“关闭”交易,则应强制关闭存储桶。
我对邮件的处理和聚合等没有问题。
我有一些可行的方法;但我认为可以通过预取,确认和超时(强制关闭存储桶)的方式进行改进。
例如,当出现问题时,由于消息吞吐量缓慢而使它超时,我通常会收到从未得到确认的消息。
是否存在用于此类处理的模型?