搜索结果正在快递途中

elasticsearch,bulk批量插入会有数据丢失

Elasticsearch | 作者 dingxiaocao | 发布于2019年08月14日 | 阅读数:4685

批量插入es数据出现丢失,导致最终数据数量比数据库数量要少,不知道什么原因。
已邀请:

fantuan

赞同来自:

检查下bulk请求的响应头是否有429。如果有,说明写入速率过快,bulk请求被es拒绝了。

xinfanwang

赞同来自:

bulk api的返回结果自己检查一下。要不没法确定问题的。

chinagrowing

赞同来自:

不知道问题是否解决。
如果集群没有问题,可以看写入的doc id是否是自己设定的,如果是,那么可以确认是否存在doc id一样的情况。如果存在一样,那么存在update情况,数量减少。

dairui520

赞同来自:

问题解决了吗? 我也出现了大量的bulk 存在部分数据更新失效的问题

要回复问题请先登录注册