使用 shuf 来打乱一个文件中的行或是选择文件中一个随机的行。

Elastic中国开发者发会2018 - ES Migration in Grab - 吴炜彬,Grab

2018-11-19 by 吴炜彬

吴炜彬
Grab Singapore 资深数据库工程师
演讲:ES 的孟母三迁,东南亚打车软件Grab的POI搜索平台迁移史
Grab最近几年一跃成为东南亚第一打车手机软件,其中的POI 搜索业务后端部分功能通过Elasticsearch进行实现。在业务量迅速膨胀的一年中,ES 集群从 AWS EC2 到 AWS Elasticsearch Service 再到 Elastic Cloud Enterprise 实现了 ES 版的孟母三迁。最终落户Elastic Cloud Enterprise 每天处理上亿POI搜索请求。过程中体验各个平台方案的酸甜苦辣,经历日日夜夜的实战压测,感受数十次数据迁移的酸爽。这几大国外常用的平台方案,他们的实战细节,今天将一一分享。 

主要负责Grab 全部ES 线上集群搭建,维护,优化。负责开发Elasticsearch 压测,迁移,管理工具。