日志

日志

日志长时间保存方案

Elasticsearchmedcl 回复了问题 • 3 人关注 • 1 个回复 • 390 次浏览 • 2018-05-29 22:05 • 来自相关话题

Elastic Podcast 第二期,嘉宾:吴晓刚/胡航@Ctrip

Podcastmedcl 发表了文章 • 14 个评论 • 885 次浏览 • 2018-05-21 12:30 • 来自相关话题

banner.jpg
 Elastic Podcast 第二期来啦, 这一次我们来到了位于上海的携程旅行网,携程内部大量运用了 Elasticsearch 来进行集中式的运维日志管理和为业务部门提供统一的搜索服务平台,目前线上总共部署了多达 94 个 Elasticsearch 集群和超过 700 多个 Elasticsearch 节点,每天新增日志 1600 亿条,峰值达到 300 万每秒,存放在 Elasticsearch 里面的索引文档达到 2.5 万亿,磁盘存储达到 PB 级。想知道携程是如何应对这些海量数据下的挑战,以及最佳实践,让我们一起来收听这一期的 Podcast,跟随携程的两位技术负责人吴晓刚和胡航来一探究竟。 主持人: Elastic 技术布道师,曾勇(Medcl)。 嘉宾: 吴晓刚,携程技术保障部系统研发总监, Elasticsearch 国内早期实践者,中文社区活跃用户。 曾在 eBay, Morgan Stanley, PPTV 等国内外公司从事系统软件研发、系统集成与技术支持工作。对于大规模 IT 系统的运维自动化、可视化、性能优化具有浓厚的兴趣。在技术方面一直抱有知其然知其所以然的态度。 胡航,携程旅行网高级技术经理,负责相关搜索实现、SOA服务的开发。曾供职于腾讯、盛大等公司,对新技术持有强烈的好奇心,目前关注于 Elasticsearch 的业务实现、JVM 性能优化等。 可以点击下面的任意链接来收听(时长约 50 分钟): 往期:Elastic 在德比软件的使用 关于 Elastic Podcast 《Elastic Podcast》是由 Elastic 中文社区发起的一档谈话类的播客节目,节目会定期邀请 Elastic 开源软件的用户,一起来聊一聊围绕他们在使用 Elastic 开源软件过程中的各种话题,包括行业应用、架构案例、经验分享等等。  
ctrip_podcast_pic.jpg
[胡航/吴晓刚/曾勇]

日志长时间保存方案

回复

Elasticsearchmedcl 回复了问题 • 3 人关注 • 1 个回复 • 390 次浏览 • 2018-05-29 22:05 • 来自相关话题

Elastic Podcast 第二期,嘉宾:吴晓刚/胡航@Ctrip

Podcastmedcl 发表了文章 • 14 个评论 • 885 次浏览 • 2018-05-21 12:30 • 来自相关话题

banner.jpg
 Elastic Podcast 第二期来啦, 这一次我们来到了位于上海的携程旅行网,携程内部大量运用了 Elasticsearch 来进行集中式的运维日志管理和为业务部门提供统一的搜索服务平台,目前线上总共部署了多达 94 个 Elasticsearch 集群和超过 700 多个 Elasticsearch 节点,每天新增日志 1600 亿条,峰值达到 300 万每秒,存放在 Elasticsearch 里面的索引文档达到 2.5 万亿,磁盘存储达到 PB 级。想知道携程是如何应对这些海量数据下的挑战,以及最佳实践,让我们一起来收听这一期的 Podcast,跟随携程的两位技术负责人吴晓刚和胡航来一探究竟。 主持人: Elastic 技术布道师,曾勇(Medcl)。 嘉宾: 吴晓刚,携程技术保障部系统研发总监, Elasticsearch 国内早期实践者,中文社区活跃用户。 曾在 eBay, Morgan Stanley, PPTV 等国内外公司从事系统软件研发、系统集成与技术支持工作。对于大规模 IT 系统的运维自动化、可视化、性能优化具有浓厚的兴趣。在技术方面一直抱有知其然知其所以然的态度。 胡航,携程旅行网高级技术经理,负责相关搜索实现、SOA服务的开发。曾供职于腾讯、盛大等公司,对新技术持有强烈的好奇心,目前关注于 Elasticsearch 的业务实现、JVM 性能优化等。 可以点击下面的任意链接来收听(时长约 50 分钟): 往期:Elastic 在德比软件的使用 关于 Elastic Podcast 《Elastic Podcast》是由 Elastic 中文社区发起的一档谈话类的播客节目,节目会定期邀请 Elastic 开源软件的用户,一起来聊一聊围绕他们在使用 Elastic 开源软件过程中的各种话题,包括行业应用、架构案例、经验分享等等。  
ctrip_podcast_pic.jpg
[胡航/吴晓刚/曾勇]