什么生产者收集并将webserver日志转换为avro格式并写入kafka？

Question

目前，我想收集apache web服务器日志（access_logs，error_logs文件）并以Avro格式写入Kafka。是否有现有的生产者可以进行此操作？如果没有，请您提供实施方法吗？我在谷歌搜索但没有运气。

与http://grokbase.com/t/kafka/users/14851mg6mk/apache-webserver-access-logs-kafka-producer类似，但我想用Avro格式编写。

提前致谢。

Answer 1

您可以将Logstash Kafka output与Avro codec一起使用 - 这应该是我理解您想要做的事情。