你的浏览器禁用了JavaScript, 请开启后刷新浏览器获得更好的体验!
输入关键字进行搜索
搜索:
发现
分享
文章
活动
登录
Easysearch、Elasticsearch 还是 Opensearch,是个问题
logstash 写入ElasticSearch占用大量带宽
Logstash
| 作者
Jerakrs
| 发布于2016年11月04日 | 阅读数:
5234
分享到:
QQ空间
新浪微博
微信
QQ好友
印象笔记
有道云笔记
单个logstash,每秒从kafka中读取一万条日志数据,占用带宽6Mbps,不做任何处理,直接写入ES,却占用80Mbps的带宽,正常吗?该怎么解决
没有找到相关结果
已邀请:
与内容相关的链接
提交
1 个回复
y676360
赞同来自:
在logstash中做日志处理没?一般输出格式转为json都会有较大的数据膨胀,并且在logstash中是否有日志增强?都可可以确认下。
可以从kafka中取出原始日志,再抓取logstash中的输出,两者对比一下即可。
要回复问题请先
登录
或
注册
发起人
Jerakrs
活动推荐
Jun
17
搜索客 Meetup 讲师招募(长期有效)
线上
·
6-17 周一
·
进行中
Dec
28
2024 OSC源创会年终盛典 启程在即,我们在珠海等你!
珠海市
·
12-28 周六
·
报名中
相关问题
elasticsearch scroll查询的原理没太懂
我来写第一个帖子-你们都是什么时候知道elasticsearch的?
怎么解决elasticsearch集群占用太多虚拟内存(VIRT)的问题?占用了几十个G,有什么可以对它进行限制的相关设置吗?
elasticsearch 设置 node.data: false 依然有数据
ES集群,进行大量删除操作时候,bulk队列溢出
ElasticSearch-Hadoop的目標是什麼呢??
elasticsearch functionScoreQuery scriptFunction效率问题
如何清理Elasticsearch特定时间段数据?
请教elasticsearch出现unassigned shards根本原因
Elasticsearch聚合操作的时间复杂度是O(n)吗?
如何设置分配给elasticsearch的内存大小?
问题状态
最新活动:
2016-12-12 11:36
浏览:
5234
关注:
3
人
1 个回复
y676360
赞同来自:
可以从kafka中取出原始日志,再抓取logstash中的输出,两者对比一下即可。