三人行必有我师

logstash消费kafka到es建立2个index数据一样

Logstash | 作者 my_libl | 发布于2019年10月12日 | 阅读数:2565

架构 elk kafka 版本全部7.2 系统centos7.3filebeat 取2个数据源1和2,把1的数据放到kafka,topic 1里2数据放在topic 2里
logstash建立两个配置文件到kafka分别消费数据1组里的topic1和2组里的topic2
logstash两个配置文件在es里分别建立1和2的index

问题是es里的1和2index数据都一样,index1里有2里的数据,2里也有1里的数据
 
我想实现的是es的index1里是1的数据,es的index2里是2的数据
 
 
已邀请:

chencandong

赞同来自:

看上去应该是配置问题,不同的kafka入不同的索引,建议检查一下看看是不是两组kafka的数据一致,如果一致的话就应该是filebeat的配置问题,如果不一致建议检查看看logstash的配置!

要回复问题请先登录注册