我只是对Logstash中的错误处理有疑问。
例如我有一个类似的集群;
kafka - > logstash - > Elasticsearch
并且此logstash也连接到HDFS。
所以
kafka - > logstash - > Elasticsearch 要么 kafka - > logstash - > HDFS (顺便说一句,我从两个不同的主题消费)
我的问题在这里;如果HDFS无法访问且弹性搜索主题相同,我如何停止在Kafka中使用HDFS主题?
我确信如果我使用Spark Streaming而不是logstash,那么会有一个错误处理系统,这将使我能够这样做,但我根本不知道如何通过Logstash完成。你能告诉我一些有关这方面的信息吗?
谢谢大家