你的浏览器禁用了JavaScript, 请开启后刷新浏览器获得更好的体验!
输入关键字进行搜索
搜索:
发现
分享
文章
活动
登录
要不要再翻翻文档呢?
logstash5.5版本,配合filebeats解析文件导入ES5.5的时间超过10s,怎么能够把处理时间< 5s,cpu和内存能够在哪里设置?
Logstash
| 作者
王社英
| 发布于2019年02月25日 | 阅读数:
1718
分享到:
QQ空间
新浪微博
微信
QQ好友
印象笔记
有道云笔记
filebeats监控一个目录,一旦有新csv文件产生,发送到logstash解析,然后导入ES,现在生产环境要求
文件从产生到导入es要求时间 < 5s
,现在测试10s都导入不了es,不稳定,有时候可以,有时候不可以,请问帮忙分析一下,这个是filebeats的问题,还是logstash的问题,可以通过调整那些参数解决问题?cpu和内存可以认为是足够的
没有找到相关结果
已邀请:
与内容相关的链接
提交
1 个回复
tacsklet
-
公司有用到es
赞同来自:
filebeat有backoff,max_backoff,backoff_factor的参数,可以试试这些参数有没有什么影响。
参考:
https://www.elastic.co/guide/e ... .html
要回复问题请先
登录
或
注册
发起人
王社英
活动推荐
Jun
17
搜索客 Meetup 讲师招募(长期有效)
线上
·
6-17 周一
·
进行中
Nov
30
【活动报名】ClickHouse Beijing User Group 第2届 Meetup
北京
·
11-30 周六
·
报名中
相关问题
怎么解决elasticsearch集群占用太多虚拟内存(VIRT)的问题?占用了几十个G,有什么可以对它进行限制的相关设置吗?
elasticsearch 设置 node.data: false 依然有数据
除了设置mapping为not analyzied,还有其他方法让一个string字段不分词吗?
Elasticsearch聚合操作的时间复杂度是O(n)吗?
《Elasticsearch源码解析与优化实战》这本书中,有关6.x的新版副本恢复方法.
如何设置分配给elasticsearch的内存大小?
Elasticsearch内存配置成系统内存的50%是否合理?
elasticsearch 每个shard对应的文件含义
logstash导入mysql上亿级别数据的效率问题
es6.4版本相较于es5.4版本查询性能上的优化有什么改变吗
es是如何解析querystring语法的AND、OR优先级的?
问题状态
最新活动:
2019-02-25 11:34
浏览:
1718
关注:
2
人
1 个回复
tacsklet - 公司有用到es
赞同来自:
参考:https://www.elastic.co/guide/e ... .html