kafka自带connect 和 confluent platform connect 区别

守护轻鸟 发表于: 2019-09-18   最后更新时间: 2019-09-18  

项目中需要把kafka中的数据写入到es、mysql中,会涉及到一些简单的etl数据清洗,由于不想自己写接收kafka,入es这种重复代码,只想关注etl数据清洗部分,后来了解到了kafka connect,调研了一下,发现kafka安装后本身就带有connect模块,后来又了解到了另外一个平台confluent platform,这里边也会有kafka的connect ,目前调研阶段,不知道这两个



您需要解锁本帖隐藏内容请: 点击这里
本帖隐藏的内容




上一条: kafka connect 转换异常
下一条: kafka集群部署相关问题。

  • confluent platform不连接额,只知道是为企业提供服务的,但是底层都是基于kafka的原生功能。
    你可以用logstash 或者 filebeat,我们就是这么用的。