无论才能、知识多么卓著,如果缺乏热情,则无异纸上画饼充饥,无补于事。

logstash性能调优

Logstash | 作者 linjikun | 发布于2019年11月27日 | 阅读数:3726

logstash读取kafka数据输出到elasticsearch,在kafka堆积了大量的数据,cpu使用率到达98%,
服务器环境是16c64g
jvm配置了24g
logstash.yml配置如下
 pipeline.workers: 48
 pipeline.batch.size: 5000
 pipeline.batch.delay: 5
微信图片_20191127171035.png
已邀请:

micmouse521

赞同来自: linjikun

1. pipeline.batch.delay: 5这个可以调长一点,比如50
2.部署多个logstash
3.试试携程的hangout
 

要回复问题请先登录注册