如何在HDP 2.4中设置和使用Kafka-Connect-HDFS

时间:2016-09-29 15:08:57

标签: hdfs apache-kafka hortonworks-data-platform apache-kafka-connect

我想在hortonworks 2.4上使用kafka-connect-hdfs。你可以帮我解决我在HDP环境中设置所需的步骤。

1 个答案:

答案 0 :(得分:2)

除了从源代码构建Kafka Connect HDFS之外,您还可以在Hadoop节点上下载并提取Confluent Platform的TAR.GZ文件。这并不意味着你正在安装Confluent"

然后你可以cd /path/to/confluent-x.y.z/

从那里开始运行Kafka Connect。

./bin/connect-standalone ./etc/kafka/connect-standalone.properties ./etc/kafka-connect-hdfs/quickstart-hdfs.properties

如果这对您有用,那么为了运行connect-distributed(推荐的运行Kafka Connect的方式),您需要在要运行Kafka Connect的其他计算机上下载相同的内容。