将数据从elasticsearch发送到kafka,最后发送到influxdb



我想知道如何将数据从elasticsearch发送到kafka,然后再发送到influxdb?我已经尝试过将融合平台与来自elasticsearch的源连接器和来自influxdb的接收器连接器一起使用,但问题是我一直在将数据从elaticsearch发送到kafka

此外,一旦我的电脑关闭,我就不再有连接器的备份,我必须从头开始

这就是为什么我的问题:

  • 如何将数据从elasticsearch发送到kafka?使用合流平台?

  • 如果我想使用kafka连接,我真的必须使用合流平台吗?

Kafka Connect是Apache 2.0许可的,并包含在Apache Kafka下载中。

Confluent(以及其他公司(为其编写插件,如Sinks到Elasticsearch或Influx。

例如,Confluent Hub上的Elasticsearch源似乎不是由Confluent构建的。

相关-使用汇流集线器而不安装汇流平台

一旦我的计算机关闭,我就不再有连接器的备份,我必须从头开始

KafkaConnect分布式模式将其配置数据存储在Kafka主题中。。。Kafka默认将主题数据存储在/tmp中。。。当你关闭电脑时,它会被删除

同样,如果您将Docker用于这些没有安装卷的系统,Docker在默认情况下也不是持久的

最新更新