使用 shuf 来打乱一个文件中的行或是选择文件中一个随机的行。

子文档 bulk 写入速度慢, 开始快, 中间慢, 结尾又快

Elasticsearch | 作者 Zhayhp | 发布于2020年04月02日 | 阅读数:1617


10.png

很神奇的问题, 父子文档, bulk 批量导入子文档, 开始快, 中间慢, 结束时又快,  不知是什么原因造成的. 请各位大佬分析分析. 版本号5.6.9
 
慢的时候 _cat/tasks 查看 bulk 会达到 100数据量的写入需要1.3s 左右
 
bulk 数据: _id 为 rid_cid. _parent 为 rid
{"update":{"_id":"12664332_999385","_index":"indexXXX","_type":"indexXXX_child","_parent":"12664332","_retry_on_conflict":3}} 
{"doc":{"cid":999385,"ctype":1,"hooked":0,"rid":12664332,"status":0,"useless_id":855799},"doc_as_upsert":true}

1.png


2.png


3.png


4.png


5.png


6.png


7.png


8.png


9.png

 

10.png


11.png

 
已邀请:

Poison

赞同来自:

我想评论了!!

要回复问题请先登录注册