看，灰机...

filebeat写入1500w数据到es

Elasticsearch | 作者 JElbert | 发布于2018年07月28日 | 阅读数：4173
分享到：QQ空间新浪微博微信QQ好友印象笔记有道云笔记
手头需求是写入1500W条json数据 每条数据800个字段 10000条json文件数据现在是90M左右，现在复制出100份，用filebeat扫描进es， es配了4台，由于现在手头没物理机资源，只能在4台2g内存的虚拟机... 然后现在的写入速度很堪忧，测了下 平均 0.92m/s 180条/s，这要搞到1500w条太慢了， 不知是虚拟机内存的影响大 还是filebeat写入es没开启bulk写入？还是filebeat本身性能瓶颈
2018-07-28 添加评论

没有找到相关结果

    已邀请:

    lz8086 - es小司机

    赞同来自:

    你这样测试有什么意义呢？跟线上网络，磁盘，内存，cpu情况一点都不一样。
    2018-07-30 0 1
    分享

    medcl - 今晚打老虎。

    赞同来自:

    自己写程序可能还更快点，Filebeat 不是用来批量导入数据的
    2018-07-30 0 0
    分享
    为什么被折叠? 0 个回复被折叠

    要回复问题请先登录或注册

    Copyright © 2024 · CC BY-NC-SA 3.0

    本站服务器及带宽由 提供赞助