是时候用 ES 拯救发际线啦

Logstash:处理重复的文档

Logstash | 作者 liuxg | 发布于2020年06月09日 | 阅读数:1785

你是否有发生在导入数据时有重复数据的发送,它们是不是给你带来了烦恼。 根据你的用例,Elasticsearch中 的重复内容可能不被接受。 例如,如果你要处理指标,则 Elasticsearch中 的重复数据可能会导致错误的聚合和不必要的警报。 即使对于某些搜索用例,重复的数据也可能导致不良的分析和搜索结果。如果你想了解如何在 Logstash 中删除重复的数据,请参阅文章 https://elasticstack.blog.csdn ... 39848
已邀请:

要回复问题请先登录注册