我一直在寻找一段时间,但我找不到用kafka-python创建batch consumer
的方法。我找到了Java的指南,但它并不是我想要实现的目标。实际上,我的目标只是消耗固定数量的记录,让他们说出并处理它们(执行一些转换),然后将它们存储到数据库中。
答案 0 :(得分:1)
这是一个消费者论点:
max_poll_records(int) - a中返回的最大记录数 单个调用poll()。默认值:500
我认为kafka-python可以使用最大数量的记录进行批量消费,也许不完全是你所说的固定数字。