如何为远程计算机配置Confluent hdfs sink连接器?

时间:2017-11-01 18:05:02

标签: apache-kafka apache-kafka-connect

如何从'配置hdfs接收器连接器A'卡夫卡机器到' B' Hadoop机器我该怎么做?有什么好的例子吗?

2 个答案:

答案 0 :(得分:0)

在机器'C'上运行Kafka Connect(将bootstrap.servers设置为指向机器'A')。 然后使用HDFS Connectorhdfs.url创建一个连接器,指向机器'B',从机器'A'上的Kafka主题传输数据。

答案 1 :(得分:0)

connect-standalone etc/kafka/connect-standalone.properties etc/kafka-connect-hdfs/quickstart-hdfs.properties

假设Kafka在机器A上运行。只需要在quickstart-hdfs.properties中进行更改

hdfs.url=hdfs://url.of.machine.B:9000

确保您能够正确地从A到B建立连接。