通过Confluent Kafka Connect中的Syslog连接器将UDP提要发布到Kafka主题

时间:2019-06-08 11:07:20

标签: apache-kafka-connect confluent

  • 我正在使用nc 127.0.0.1 5514 -u -v
  • 创建到端口 5514 的UDP提要
  • 我使用合意的社区版5.2.1
  • 我还安装了kafka connect syslog版本1.2.6

  • 以下是我的系统日志连接器的配置

name=syslog    
tasks.max=1
connector.class=io.confluent.connect.syslog.SyslogSourceConnector    
syslog.port=5514    
syslog.listener=UDP    
topic=udptest    
confluent.license=
confluent.topic.bootstrap.servers=127.0.0.1:9092  
confluent.topic.replication.factor=1
  • 然后我开始使用/Users/dineth/Documents/confluent/bin/confluent start汇合
  • 使用/Users/dineth/Documents/confluent/bin/kafka-topics --create --zookeeper 127.0.0.1:2181 --replication-factor 1 --partitions 1 --topic udptest

  • 创建了kafka主题
  • 之后,我使用/Users/dineth/Documents/confluent/bin/confluent load syslog -d /Users/dineth/Documents/confluent/share/confluent-hub-components/confluentinc-kafka-connect-syslog/etc/minimal-udp.properties

  • 加载了连接器
  • 然后我使用/Users/dineth/Documents/confluent/bin/kafka-console-consumer --bootstrap-server 127.0.0.1:9092 --topic udptest --from-beginning

  • 开始kafka-console-consumer
  • 当我通过UDP将某些内容馈送到端口5514时,控制台不显示任何内容。

  • 但是当我尝试直接向kafka-console-producer产生一些字符串并尝试从上面创建的相同主题中使用时,它工作正常。

0 个答案:

没有答案