使用 shuf 来打乱一个文件中的行或是选择文件中一个随机的行。

数据量小,性能要求高,求推荐集群配置

Elasticsearch | 作者 yanxumian | 发布于2019年10月17日 | 阅读数:1885

小白求助,下面这种需求如何搭建集群比较合适
1)200万数据,排序查询、 并发500 + 200万数据按一个指标聚合(大概到4个聚合到一个),并发500 :
2)400万数据, 排序查询, 并发1200+ 400万数据按一个指标聚合(大概到4个聚合到一个),并发1200 :
已邀请:

laoyang360 - 《一本书讲透Elasticsearch》作者,Elastic认证工程师 [死磕Elasitcsearch]知识星球地址:http://t.cn/RmwM3N9;微信公众号:铭毅天下; 博客:https://elastic.blog.csdn.net

赞同来自: yanxumian

评估集群规模考虑的因素:
1、当前存储:数据总量——有提供 400W
2、未来存储:数据增量
需要集合1,2,需要你补充:单条数据大小,给出数据占据的存储大小,并且预留未来扩展?
3、性能指标,你有提到并发1200——对cpu有较高要求
4、复杂功能,你有提到一个指标聚合——不算复杂,内存适中就能搞定
 
你可以拿到机器后,借助:esrally跑一下性能,结合实际硬件性能为准。
 

Marquezzzz

赞同来自:

推荐先做benchmark测试

要回复问题请先登录注册