weizijun

weizijun

elasticsearch fan

威望 : 29 积分 : 1975 赞同 : 36 感谢 : 7

擅长话题

更多 »回复

0

Q:滴滴对使用es的人有暴露集群的概念吗 A:滴滴ES平台对用户暴露的是逻辑集群和逻辑索引的概念,逻辑集群用来做资源隔离,逻辑索引是用户使用的索引,用户无需关心ES平台内真实的的物理集群、索引分布情况。

0

Q:这个导入场景就是个离线场景吗?实时的写入是怎么处理的?  有啥实时写入的方案吗 A:滴滴内部实时写入主要是将kafka数据实时同步到ES,包括log、binlog以及用户本身在kafka的数据,完整的同步功能,在滴滴内部有一个同步中心的服务完成。可以做很多...

0

Q:怎么处理线上集群指标突然偏高或者100%的告警 A:先要确认负载飙高的原因来自于查询还是写入,滴滴内部写入可以在clientnode层限流来降低写入导致的负载飙高,查询可以在ES-Gateway层的DSL流控模块来降低查询导致的负载飙高

0

Q:hdfs上的文件load到es datanode,这一步怎么减少磁盘io A:这一步的IO开销主要来自于lucene文件拷贝,不能再减少了,但是相比直接写数据到ES集群,IO减少了非常多,因为写数据过程中还有写translog开销+merge开销。

0

Q:同样都是用ES生成的Lucene,为什么效率提升了这么多,是离线生成的集群资源比较多吗 A:FastIndex是利用了Hadoop强大的计算能力,使用的离线资源越多,导入数据越快。

更多 »发问

10

197 次浏览  • 4 个关注   • 3 天前

发问

回复

文章

最新动态

详细资料

个人成就:

威望: 29 积分: 1975 赞同: 36 感谢: 7

最后活跃:
8 小时前
擅长话题:
elasticsearch 14   1
elastic 4   0
日志丢失 2   0
es 1   1
delete 2   0
elaseticsearch 11   0
lucene 11   0
索引 2   1
advent 11   0
更多 » 关注 8

ouyangchucai rockybean strglee laoyang360 medcl

更多 » 71 人关注

su_san kin122 loredp Dm bingo919

关注 0 话题
主页访问量 : 5173 次访问