使用 shuf 来打乱一个文件中的行或是选择文件中一个随机的行。

Index pattern 去重问题

Logstash | 作者 MihaiWong | 发布于2019年12月14日 | 阅读数:1322

如何在一个index pattern 下,在不同的index中去除重复的数据:
比如根据 title字段,在index-*的pattern下,index-1中已经存在的一条数据 title,如何在logstash中,在index-2中就不会插入title与index-1 中title相同的数据了。
已邀请:

要回复问题请先登录注册