使用 shuf 来打乱一个文件中的行或是选择文件中一个随机的行。

logstash7.5.2输出重复数据

Logstash | 作者 NewFlower | 发布于2020年02月13日 | 阅读数:1912

logstash7.5.2输出重复数据,即数据源每新增一条数据,logstash输出两条数据,logstash输出到file和输出到es,都存在该问题。
使用logstash7.6后,问题消失,不知道为什么,请各位大佬帮忙解决。









































已邀请:

yang4210

赞同来自:

版本有bug.
7.5.2的logstash接收filebeat的信息, filebeat采集nginx日志,也出现重复。退回7.4.2就没问题。

NewFlower

赞同来自:

确实也是使用过了logstash7.6后就没有问题了。

要回复问题请先登录注册