使用 shuf 来打乱一个文件中的行或是选择文件中一个随机的行。

filebeat内存泄漏和分拣速度的问题

Beats | 作者 hellocat | 发布于2019年06月13日 | 阅读数:2884

1. 我目前生成日志的速度大概是8M/s,用了两个版本filebeat6.2.4和6.7.2,发现物理内存RES和虚拟内存VIRT都在往上涨,之前看https://blog.csdn.net/u0136134 ... 57827 该博客里说对queue.mem.events和max_message_bytes两个参数进行设置可以解决这个问题,我设成了32和10M(即最大可能占用内存是320M),但是发现RES超过320M后很长一段时间(5h)都没有回落,想请教大神们这个问题有解决办法吗。
 
2.有没有大哥测过filebeat最大的分拣速度是多少,我现在发现日志生成速度一快起来(8M/S)会出现输出丢失日志的情况。
 
感谢
已邀请:

wajika

赞同来自:

没有遇到过这种情况
我这里的使用情况是VIRT 511m  RES 44m

要回复问题请先登录注册