使用javaAPI上传1gb,共350000份文档,发生OOM

Elasticsearch | 作者 mai | 发布于2019年07月11日 | 阅读数:151


报错.png

使用bulkprocessor,bulkactions为1000,size为20mb,经过多次实验,总是上传到340000就发生oom,弄了一天也没弄好,新人求救
已邀请:

rochy - rochy_he@tw

赞同来自: mai

应该是索引的 refresh 设置的有问题吧
写入的时候关闭 refresh 是可以提高速度,但是长时间不 refresh 会造成 oom

xiaoke - http://blog.51cto.com/kexiaoke

赞同来自:

加内存

ridethewind

赞同来自:

你的ES配了多大内存,考虑加内存

要回复问题请先登录注册