标签： apache-spark apache-kafka
我有一个3节点的kafka群集设置。我正在使用apache spark（消费者）从kafka代理读取消息。每个主题都有6个分区。一切都很好。当日志从apache Nifi发送到kafka队列时，spark使用者可以平滑地读取偏移量中的消息，但是如果使用者崩溃，spark使用者将无法从kafka中读取其余消息。
我正在阅读卡夫卡经纪人给我的消费者的最新抵销记录。
我正在使用kafka 2.11
谢谢。
农药