如何在HDP 2.4中设置和使用Kafka-Connect-HDFS

Question

我想在hortonworks 2.4上使用kafka-connect-hdfs。

Answer 1

除了从源代码构建Kafka Connect HDFS之外，您还可以下载并提取Confluent Platform的TAR.GZ文件到Hadoop节点上。这并不意味着你正在"安装Confluent"

那么你可以cd /path/to/confluent-x.y.z/

然后运行Kafka Connect。

./bin/connect-standalone ./etc/kafka/connect-standalone.properties ./etc/kafka-connect-hdfs/quickstart-hdfs.properties

如果这对你有用，那么为了运行connect-distributed(推荐的运行Kafka Connect的方式)，你需要在你想要运行Kafka Connect的其他机器上下载相同的东西。