疲劳是最舒适的枕头,努力工作吧。
话题 (活动) 已与当前话题合并
meetup

meetup

Elasitcsearch中国开发者报告调研 | 获奖名单公布

活动zengcici 发表了文章 • 1 个评论 • 96 次浏览 • 5 天前 • 来自相关话题

2012年 Elasticsearch 首个版本发布,经过6年多的更新迭代,Elastic Stack 生态已经日渐成熟,Elastic 软件在国内拥有越来越多的用户,应用Elasticsearch的开发人群也不断扩大。 为了深入了解 Elasticsearch 开发者群体的现状,2019年11月,Elastic社区、阿里云Elasticsearch技术团队和阿里云开发者社区三方联合发起了Elasticsearch开发者研活动。 在调研过程中,1186位开发者完成了调研问卷,18位技术专家完成了专题访问。参与调研的开发者们从不同角度,分享了个人特征、社会属性、技术能力、从业经历等信息;在Elasticsearch技术的应用、行业实践、职业发展等方面,真实的提供了反馈。 作为首次国内发起的针对 Elasticsearch 开发者群体的行业性调研报告,我们希望能给更多从业者提供关于自身职业、行业以及技术应用的参照,也希望有更多的开发者关注并进入到这一特定技术领域,共同推动 Elastic Stack 相关技术持续向前发展。   以下为本次参与调研的60位幸运者名单,礼品获取信息请关注**短信通知**。
图片1.png
  报告获取时间:2019年12月07日   钉钉扫码,加入《Elasticsearch中文技术交流群》 在2019年12月07日免费获取“Elasticsearch开发者报告”  
阿里云Elasticsearch技术交流群.jpg
 

【深圳ES Meetup】阿里云欧阳楚才:ES实践中最大的业务挑战是保障线上服务稳定

活动nodexy 发表了文章 • 0 个评论 • 260 次浏览 • 2019-11-14 16:23 • 来自相关话题

11月16日 Elastic 中文社区深圳 Meetup 上,欧阳楚才将为大家分享 阿里云Elasticsearch内核优化与应用实践。借此机会,我们邀请到他聊聊选ES在阿里云实践过程中遇到的最大业务挑战和解决方案,以及他在高并发架构设计方面的心得。 分享嘉宾 欧阳楚才 搜索技术专家 @阿里巴巴 在阿里巴巴负责Elasticsearch云服务研发工作,有比较丰富的搜索引擎研发经验,熟悉Lucene、Elasticsearch等开源技术,擅长高并发系统架构设计。 Q1、ES 在阿里云实践中遇到最大的业务挑战是什么?如何解决的? A:阿里云Elasticsearch最大的业务挑战是保障线上服务稳定。通过支持多可用区部署,避免单机房异常导致服务不可用。通过ECS本地盘、ESSD云盘提供高IOPS的存储,避免IO瓶颈导致查询响应慢,使用ECS本地盘也可以降低存储成本。通过ElasticFlow离线构建索引,避免写入和查询争抢资源导致查询响应变慢。通过智能诊断服务Eyou定期检查Elasticsearch服务健康状况,及时发现系统存在的隐患。 Q2、您在高并发系统架构设计方面有哪些心得为大家分享? A:结合业务场景做容量规划,评估系统需要支撑的写入TPS、查询QPS、最大响应延迟时间。对于Elasticsearch而言,通常最大的瓶颈在磁盘IO,尽量使用SSD盘高性能存储设备。为了系统稳定,单个节点Elasticsearch的JVM内存尽量不要超过32G,单节点存储数据量尽量不要超过5TB,高并发搜索场景推荐单节点配置16核CPU、64G内存、2TB SSD盘。Elasticsearch集群节点数不要超过300个,数据量大的集群根据业务拆分多个集群,配置跨集群搜索。系统上线前做全链路压测,找到系统瓶颈。生产环境开启慢查询日志,分析bad case。 Q3、结合您的实践经历,对 ES 目前的生态发展、应用以及未来有什么样的看法? A:Elasticsearch是开源的分布式搜索和分析引擎,开箱即用、弹性扩展方便。从早期的ELK到现在的Elastic技术栈,版本迭代持续加速,Elasticsearch的性能、扩展性、相关性不断优化。Elasticsearch最开始设计用于搜索引擎,后来不断被应用到日志分析、数据库加速、安全风控等领域,通过插件扩展机制可以用于图像、视频等非结构化数据分析。 Q4、您对本次技术沙龙活动的主题分享有什么期待? A:期待能看到更多Elasticsearch应用案例,跟大家一起交流最佳实践。 Q5、您对 Elastic 中文社区发展有什么意见或建议呢? A:Elastic中文社区之前组织过翻译《Elasticsearch权威指南》中文文档,当时的Elasticsearch版本为2.x,现在的Elasticsearch7.x版本在API、功能方面已经有很大变化,建议组织志愿者更新文档。 11月16日 Elastic 中文社区深圳 Meetup 火热报名中 主题分享:《阿里云Elasticsearch内核优化与应用实践》欧阳楚才   主题摘要:Elasticsearch在阿里云上服务了大量的客户,同时也面临着巨大的业务挑战。阿里云ES在内核引擎、中文分词、向量检索、容器化部署等方面做了一系列开发工作,应用于文档、日志、图像、视频的检索与分析。
b89578fa-29bc-49c3-a515-837cf1dcf7c3.png
 

【深圳ES Meetup】字节跳动黄杨锋:从0到1构建 ES 服务平台的挑战

活动nodexy 发表了文章 • 0 个评论 • 436 次浏览 • 2019-11-13 09:07 • 来自相关话题

11月16日 Elastic 中文社区深圳 Meetup 上,黄杨锋将为大家分享基于K8S的ES服务平台在头条的实践。借此机会,我们邀请到他聊聊从0到1构建ES服务平台遇到的痛点、解决方案以及未来的规划。 分享嘉宾 黄杨锋 高级工程师 @字节跳动 目前在头条深圳负责ES服务平台相关的研发工作;此前曾就职于华为、YY、腾讯等企业,在腾讯基于ES做微信支付数据的检索。 Q1、从0到1构建 ES 服务平台的过程中有哪些痛点?分别是如何解决的? A:(1)需要隔离,远离大集群,是通过 k8s来解决。       (2)性能分析方面相对还比较薄弱 ,打算增加metric和trace日志来看看具体耗时。 Q2、在 ES 服务平台方面未来还有什么样的规划? A:相关规划详见下图
CAPTURE_20191113_90835.jpg
Q3、结合您的实践经历,对 ES 目前的生态发展、应用以及未来有什么样的看法? A: ES 发展很快,周边生态也越来越丰富,希望 ES 在快速发展的过程中,更加注重查询性能的优化提升,以及集群的稳定性。 Q4、您对本次技术沙龙活动的主题分享有什么期待? A:期望看到性能优化、机器学习相关的最新进展。 Q5、您对 Elastic 中文社区发展有什么意见或建议呢? A:(1)ES 在中国程序员中的影响力感觉可以加强,希望可以做到像 Google/Amazon 在中国程序员群体上那样有很大的影响力;       (2)希望官方出一些内核相关的书籍或文章;       (3)希望价钱可以再调低点。 11月16日 Elastic 中文社区深圳 Meetup 火热报名中 主题分享:《基于K8S的ES服务平台在头条的实践介绍》黄杨锋 主题摘要:ES 服务平台自上线以来,已经接入了头条、抖音等众多业务。本次分享将介绍 ES 服务平台从 0 到 1 的创建过程中所做的一些工作,包括 K8S 碰到的一些难点、ES 功能的增强、跨机房容灾、全栈监控告警、自动化部署等功能。
b89578fa-29bc-49c3-a515-837cf1dcf7c3.png

【深圳ES Meetup】李猛:DB与ES结合,是业务系统实践值得探讨的事

活动nodexy 发表了文章 • 2 个评论 • 424 次浏览 • 2019-11-09 17:41 • 来自相关话题

1月16日 Elastic 中文社区深圳 Meetup 上,李猛将带来关于ES 实践方面的主题分享。借此机会,我们邀请到他聊聊作为ES深度用户在探索ES过程中的心得以及对ES社区、活动、未来生态发展等方面的看法。   李猛 架构师/Elastic认证工程师 Elastic Stack产品深度用户,2012/2013年接触Elasticsearch,对Elastic Stack开发、架构、运维等方面有深入体验,实践过多种ES项目,最暴力的大数据分析应用,最复杂的业务系统应用等。   Q1、作为深度用户,当初是基于什么样的动机和考量选择使用 ES 产品并持续深入探索的? A:易用性与功能强大,个人平常比较爱好算法研究,选择任何数据产品本质上都是选择算法,算法的本质决定了产品的强大。 架构是个宏观问题,ES的设计是标准的分布式,架构的优秀设计带来的是易用性; 算法是个微观问题,ES集成了很多优秀的算法,这样在很多业务场景下都可满足,而不用更换不同的数据产品,这样也会带来产品运维方面的便利性,保障应用的技术栈不至于过多复杂。 Q2、在探索 DB 与 ES 的互通方面,有遇到什么难题吗?最后是如何解决的呢? A:数据一致性与实时性问题。应用架构思维变化,业务调整变化与技术方案变化。 Q3、结合您的实践经历,对 ES 目前的生态发展、应用以及未来有什么样的看法? A:ES目前主要应用是在单索引条件下查询,附带有简单的聚合分析能力。复杂的分析能力不具备,ES未来会增强复杂的分析能力,比如有条件的支持2个索引的关联分析。 Q4、您对本次技术沙龙活动的主题分享有什么期待? A:期望更多人参加探讨更多的业务应用场景,比如传统应用方面、大数据方面、机器学习方面;帮助大家以后项目实战有更多的案例参考。 Q5、您对 Elastic 中文社区发展有什么意见或建议呢? A:ES目前在国内的热度几乎超过任何数据库,几乎大大小小的公司,都在使用;从开始入门到成熟运用多多少少都会遇到很多问题,  希望社区活动更加多一点,业余的交流更多一点。比如可以办一些,走进某些企业的活动。 11月16日 Elastic 中文社区深圳 Meetup 火热报名中 分享主题:《DB到ES数据实时同步之路》 李猛  主题摘要:关系型数据库天然具备最严格的事务特性,有效的保证数据库一致性,但在高效查询方面显得很无力;Elasticsearch天然具备高效的查询算法,但在数据一致性方面却是先天缺陷;如何将DB与ES的优点结合,是任何一个企业公司业务系统实践都值得探讨的事。
b89578fa-29bc-49c3-a515-837cf1dcf7c3.png
 

深圳 ES Meetup 来啦! 11月16日 阿里中心

活动nodexy 发表了文章 • 1 个评论 • 283 次浏览 • 2019-11-05 10:08 • 来自相关话题

shenzhen-es-201911_(1).png
    活动链接:   https://meetup.elasticsearch.c ... .html    议程   13:00-13:30  签到 13:30-13:40  活动介绍 13:40-14:20 分享主题:基于K8S的ES服务平台在头条的实践介绍 分享嘉宾:黄杨锋 @字节跳动 主题摘要:ES服务平台自上线以来,已经接入了头条、抖音等众多业务。本次分享将介绍ES服务平台从0到1的创建过程中所做的一些工作,包括K8S碰到的一些难点、ES功能的增强、跨机房容灾、全栈监控告警、自动化部署等功能。 14:20-15:00 分享主题:DB到ES数据实时同步之路 分享嘉宾:李猛 主题摘要:关系型数据库天然具备最严格的事务特性,有效的保证数据库一致性,但在高效查询方面显得很无力;Elasticsearch天然具备高效的查询算法,但在数据一致性方面却是先天缺陷; 如何将DB与ES的优点结合,是任何一个企业公司业务系统实践都值得探讨的事。 15:20-16:00 分享主题:Elasticsearch在腾讯的优化实践 分享嘉宾:陈曦 @腾讯云 主题摘要:Elasticsearch在腾讯得到了大规模应用,支撑了后台海量日志分析、腾讯云监控系统、腾讯文档搜索服务等。在服务公司内外部用户的过程中,腾讯ES团队碰到了很多痛点,对ES内核做了大量优化,使其在高性能、高可用性、低成本等方面有了大幅度的提升。本次分享将着重介绍腾讯ES团队对ES的优化实践。 16:00-16:40 分享主题:阿里云Elasticsearch内核优化与应用实践 分享嘉宾:欧阳楚才 @阿里巴巴 主题摘要: Elasticsearch在阿里云上服务了大量的客户,同时也面临着巨大的业务挑战。阿里云ES在内核引擎、中文分词、向量检索、容器化部署等方面做了一系列开发工作,应用于文档、日志、图像、视频的检索与分析。   16:40-17:20 分享主题:码云Gitee的Elasticsearch检索优化实战 分享嘉宾:陈鑫 @码云 主题摘要: 码云(Gitee.com)的Elasticsearch应用实战,以代码仓库搜索为例,讲解Elasticsearch在分词、信息检索模型、排序模型的自定义、重写和优化经验。   17:20-18:00 抽奖 & 交流  

Elastic&滴滴 meetup杭州站 2019年9月7日,抓紧报名哦

活动Allwang 发表了文章 • 5 个评论 • 2620 次浏览 • 2019-07-22 10:38 • 来自相关话题

Elastic中文社区联合滴滴出行,将于2019年9月7日,在杭州举办一次线下技术交流活动。 本次活动交流内容主要围绕Elastic的开源产品(Elasticsearch、Logstash、Kibana 和 Beats)及周边技术,探讨在搜索、数据实时分析、日志分析、安全等领域的实践与应用。 活动分享火热报名中! 报名地址 朱杰 Elastic elastic资深顾问 《卓越运维三连击日志、指标和APM》 主题摘要:讲解将日志、指标和APM融入同一个技术栈的优势,在Elastic Stack中统一管理这三者的挑战和解决方法。分析在同一个技术栈里做三者的关联的优势和意义。相关问题解答和产品演示。 高斌龙 腾讯 Elasticsearch云服务后台开发工程师 《云上Elasticsearch的容灾与数据备份机制》 主题摘要:介绍基于云服务器和云硬盘搭建的ES集群,如何实现跨机房容灾和跨地域容灾;另外介绍云上的ES集群如何进行数据备份和恢复。 朱永清 杭州美创 技术专家 《ES 认证工程师考试经验分享》 主题摘要:如何参加 ES 认证工程师考试,如何做好考前准备并顺利通过考试,和一些经验分享。 钟华 滴滴ES团队 资深软件开发工程师 《基于Hadoop快速构建离线elasticsearch索引》 主题摘要:本主题介绍滴滴内部FastIndex服务,一种利用Hadoop计算能力快速离线构建elasticsearch索引的方式,替代之前使用DataX离线导入方式,在大数据场景下,可将写入时间降低为DataX的十分之一,同时不影响在线ES集群。 活动时间: 2019年9月7日 活动地址: 杭州市西湖区弘德路256号 西溪谷国际商务中心G座8楼(滴滴办公大楼) 报名地址

Elasticsearch 北京站活动: Elastic{ON} - 2019 年 4 月 10 日

活动medcl 发表了文章 • 5 个评论 • 2651 次浏览 • 2019-03-06 10:26 • 来自相关话题

Elastic 官方将于 4 月 10 日在北京举行为期一天的 Elasticsearch 官方活动 - Elastic{ON} Tour,这是 Elastic{ON} Tour 在中国的第一站,欢迎参加。

活动内容精彩纷呈,您在会上可以深入了解产品路线图,获取专家建议,而且我们还会为您深入剖析从 Machine Learning 到规模扩展等方方面面的内容。

早鸟优惠票,仅限 75 张。

报名及注册地址

直接报名的地址

有小部分优惠码请微信联系:elasticchina

深入了解日志、搜索和安全等内容,精彩无限

了解 Elasticsearch、Kibana、Beats 和 Logstash 的路线图。与专家见面。从其他 Elastic Stack 用户那里学习经验。Elastic{ON} 参会门票价格实惠,您只需从工作中抽出最短的时间,便可获得所需的实用内容、专家建议和实操培训,还能拓宽 自己的人脉。

  • 深入了解 Elastic Stack 的发展路线图。

  • 在 “Ask Me Anything”(有问必答)展台进行咨询,由专家面对面为您答疑解惑。

  • 结识 Elastic 的工程师、专家和用户。

  • 通过演讲和现场演示,了解诸如 APM 和 Elasticsearch SQL 等全新功能。

  • 了解如何确定部署规模并对架构进行优化。

  • 免费参加一场按需提供的日志、指标或 APM 基础知识培训课程,课程原价 200 美元。

日程安排

上午 8:00 - 结束

Ask Me Anything(有问必答) + 演示 全天均可以访问 “Ask Me Anything”(有问必答)展台,面对面获取 Elastic 工程师和架构师提供的专业建议。亲自现场演示诸如 Canvas、APM 等崭新功能,加深自己的了解。

上午 8:00 - 上午 9:00

登记入场,赞助商展示,以及多元化讨论 戴上胸牌,了解我们的赞助商有哪些活动,然后在群组讨论中分享您对多元化以及包容性的看法。

上午 9:00 - 上午 9:30

开场主题演讲 Elastic Stack 的开发人员直接为您奉上关于新产品、功能、解决方案和部署选项的愿景。

上午 9:30 - 上午 10:15

Elastic Stack 最新动态 了解 Elasticsearch、Kibana、Beats 和 Logstash 的产品路线图,而且会有精彩演示和重磅发布,涵盖从 rollup(汇总)到 Elastic SQL 在内的方方面面。

上午 10:15 - 上午 10:45

日志、指标和 APM:运维分析的三连击 集中存储日志和指标,现在还可将 APM 数据也包括在内,助力您在运维可见度方面达到更高水平。了解 Elasticsearch 如何将所有这些类型的数据高效地存储在单一存储库内,查看如何通过 Kibana 来搜索日志、分析指标和利用 APM 功能,以便更好地监测性能并更快速地完成故障排查。

上午 10:45 - 上午 11:00

上午中场休息 上午 11:00 - 上午 11:30 使用 Elastic Stack 进行端对端安全分析 希望在日新月异的安全领域领先竞争对手吗?了解如何按照您需要的速度和规模创建集中式安全分析平台,以便在威胁检测和跟踪活动中进行不定期分析。

上午 11:30 - 中午 12:00

技术讲座 Elastic 专家将会就与您所在社区内用户相关的主题进行分享。

中午 12:00 - 下午 1:00

午餐 和与会的其他人员以及 Elastic 专家共进午餐。

下午 1:00 - 下午 1:30

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 1:30 - 下午 2:00

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 2:00 - 下午 2:20

合作伙伴讲座 了解 Elastic 合作伙伴最新推出的最优产品和服务。

下午 2:20 - 下午 2:40

中场休息 拜访赞助商,亲自完成 Elastic 演示内容,前往 “Ask Me Anything”(有问必答)展台尽情提问并一扫心中疑惑。

下午 2:40 - 下午 3:10

技术讲座 Elastic 专家将会就与您所在社区内用户相关的主题进行分享。

下午 3:10 - 下午 3:40

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 3:40 - 下午 4:10

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 4:10 - 下午 4:15

结束和幸运抽奖 一天活动结束,参加幸运抽奖。

下午 4:15 - 下午 5:15

欢乐时光

报名及注册地址

北京站.png

750x280.png

【北京活动】OpenResty x Open Talk 丨北京站

活动suweibei 发表了文章 • 0 个评论 • 495 次浏览 • 2019-03-04 14:47 • 来自相关话题

一、活动介绍

OpenResty 是一个基于 Nginx 与 Lua 的高性能 Web 平台,其内部集成了大量精良的 Lua 库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态 Web 应用、Web 服务和动态网关。目前 OpenResty 是全球占有率排名第五的 Web 服务器,超过 1 万多家商业公司都在使用 OpenResty,包括又拍云、腾讯、奇虎360、京东、12306、Kong 等公司,应用在 CDN、广告系统、搜索、实现业务逻辑、余票查询、网关、ingress controller 等各种不同的场景下。

为促进 OpenResty 在技术圈的发展,增进 OpenResty 使用者的交流与学习,OpenResty 社区联合又拍云,举办 “OpenResty × Open Talk” 全国巡回沙龙,邀请业内资深的 OpenResty 技术专家,分享 OpenResty 实战经验,推动 OpenResty 开源项目的发展,促进互联网技术的教育。

二、报名地址

http://www.huodongxing.com/event/2481310558700

三、活动时间

2019 年 03 月 23 日(周六)

四、活动地址

北京市海淀区中关村大街 11 号E世界财富中心 A 座 B2 PEOPLE²

五、嘉宾与议题

叶靖.jpg

分享嘉宾一:叶靖 / 又拍云平台开发部负责人

目前主要负责又拍云弹性云处理平台以及内部私有云的设计和开发工作,兼部分文件上传接口相关的工作。对 Python / Lua / Go 等语言有较深入的研究,在 ngx_lua 和 OpenResty 模块开发方面有丰富经验,专注于高并发、高可用服务架构设计,对 Docker 容器有较多的实践。平时热衷于参与开源社区分享开源经验。

分享话题:《 OpenResty 在又拍云容器平台中的应用 》

主要介绍 Kong、Ingress-Nginx 等基于 OpenResty 实现的 API 网关和负载均衡器的使用方法和工作原理,以及如何基于 OpenResty 实现高性能的外部负载网关。

王辉.jpg

分享嘉宾二:王辉 / 新浪微博产品部移动高级开发工程师

专注新浪微博后端业务,微博移动应用后端网关负责人,曾负责过视频直播、消息下推等系统。

分享话题:《 OpenResty 构建一站式应用网关实践 》

新浪微博基于 OpenResty 构建了一个包含上行请求和下行推送的一站式应用网关,对外提供TCP、TLS、HTTPS、HTTP、QUIC等众多通道进行传输数据,数据进行私有协议编解码。可以对外提供提供透传式代理服务、多个接口聚合服务以及GraphQL模块。在本次分享,将会介绍基于 OpenResty 构建的完整服务架构,当前所遇到的问题、解决的方式以及调试的线上技巧等。分享提纲:

1、基于 OpenResty 构建一站式网关概述;

2、我们遇到问题以及解决方式;

3、收获总结和问题反思。

刘洋.jpg

分享嘉宾三:刘洋 / Polaristech 技术专家

曾就职于 Redhat、阿里云,10 余年研发经验,近期加入 Polaristech 投入边缘计算领域。作为 RHCA,不仅在 Linux 领域拥有丰富的技术积累,同时在工作中也积累了大量的市场经验。

分享话题:《 基于 OpenResty /Kong 构建边缘计算平台 》

随着移动端和固网宽带等高速网络的普及,计算能力正在向贴近用户的边缘位置迁移。本次分享,将会基于 Polaristech 帮助客户落地的 IOT 项目和银行的开放银行项目经验,介绍如何以 OpenResty 和 Kong 为基础框架构建边缘计算平台,实现就近接入、边缘加速、API 管理、分布式全链路管理等多方面的架构和设计经验。

吴钧泽.jpg

分享嘉宾四:吴钧泽 / 好未来高级工程师

Swoft 开源框架开发者,ServiceMesher 社区成员 ,重度开源爱好者。目前主要负责好未来支付交易系统,对分布式系统架构、高性能应用有着浓厚的兴趣。

分享话题:《 当 OpenResty 遇上教育行业》

本次分享将会介绍 OpenResty 在教育行业的落地实践、性能优化等内容,介绍基于 Openresty  打造高性能的 PassPort 平台  Openresty 性能优化和在教育行业的有趣实践。分享提纲:

1、为什么选择 OpenResty ;

2、基于 Openresty 打造 PassPort  平台;

3、基于 Openresty 开发高性能 API Gateway ;

4、一些有趣的实践;

5、未来的规划。

罗玉杰.jpg

分享嘉宾五:罗玉杰 / 京东云技术专家

10 余年 CDN、流媒体行业从业经验,热衷于开源软件的开发与研究,对 OpenResty、Nginx 模块开发有较深入的研究,熟悉 CDN 架构和主流流媒体协议。

分享话题:《 OpenResty 在直播场景的应用 》

本次分享,将会介绍基于 OpenResty、Redis 实现的 AWS S3 上传服务,将 TS、m3u8 文件上传至云存储,供 HLS 直播、时移、回看、延播下载使用;同时还将介绍直播、时移回看、延播服务等功能的实现。

六、现场礼品

现场礼品.jpg
 

【线下活动-分享主题征集-武汉】 2019年3月 Elastic&尚德机构技术沙龙

活动medcl 回复了问题 • 3 人关注 • 1 个回复 • 1900 次浏览 • 2019-02-22 15:42 • 来自相关话题

【2019.01.12】OpenResty x Open Talk 丨深圳站

活动suweibei 发表了文章 • 0 个评论 • 442 次浏览 • 2018-12-17 11:03 • 来自相关话题

一、活动介绍

OpenResty 是一个基于 Nginx 与 Lua 的高性能 Web 平台,其内部集成了大量精良的 Lua 库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态 Web 应用、Web 服务和动态网关。目前 OpenResty 是全球占有率排名第五的 Web 服务器,超过 1 万多家商业公司都在使用 OpenResty,比如又拍云、腾讯、奇虎360、京东、12306、Kong 等公司,应用在 CDN、广告系统、搜索、实现业务逻辑、余票查询、网关、ingress controller 等各种不同的场景下。

又拍云 Open Talk 是由又拍云发起的系列主题分享沙龙,秉承又拍云帮助企业提升发展速度的初衷,从 2015 年开启以来,Open Talk 至今已成功举办 45 期,辐射线上线下近十万技术人群,分别在北京、上海、广州、深圳、杭州等 12 座城市举办,覆盖腾讯、华为、网易、京东、唯品会、哔哩哔哩、美团点评、有赞、无码科技等诸多知名企业,往期的活动的讲稿及视频详见:https://opentalk.upyun.com

为促进 OpenResty 在技术圈的发展,增进 OpenResty 使用者的交流与学习,OpenResty 中国社区联合又拍云,举办 “OpenResty × Open Talk” 全国巡回沙龙,邀请业内资深的 OpenResty 技术专家,分享 OpenResty 实战经验,推动 OpenResty 开源项目的发展,促进互联网技术的教育。

二、活动时间

2019 年 01 月 12 日(周六)

三、活动地址

广东省深圳市南山区深圳虚拟大学园 R3-B 栋一楼触梦社区

四、报名地址

http://www.huodongxing.com/event/5470242889300

五、嘉宾及议题介绍

alt

分享嘉宾一:温铭 / OpenResty 软件基金会主席

OpenResty 软件基金会主席,前360开源委员会委员;现为 OpenResty Inc. 合伙人,致力于打造基于 OpenResty、Linux 内核等基础平台的企业级产品和解决方案。创业之前在互联网安全公司工作了 10 年,主要从事服务端的开发和架构,负责开发过木马云查杀、反钓鱼系统和企业安全产品。

分享主题:《 使用 OpenResty 实现 memcached server 》

OpenResty 软件基金会主席,前360开源委员会委员;现为 OpenResty Inc. 合伙人,致力于打造基于 OpenResty、Linux 内核等基础平台的企业级产品和解决方案。创业之前在互联网安全公司工作了 10 年,主要从事服务端的开发和架构,负责开发过木马云查杀、反钓鱼系统和企业安全产品。

alt

分享嘉宾二:张聪 / 又拍云首席架构师

多年 CDN 行业产品设计、技术开发和团队管理相关经验,个人技术方向集中在 Nginx、OpenResty 等高性能 Web 服务器方面,国内 OpenResty 技术早期推广者之一;目前担任又拍云内容加速部技术负责人,主导又拍云 CDN 技术平台的建设和发展。

分享主题:《 OpenResty 动态流控的几种姿势 》

本次分享主要介绍 OpenResty 上几种常用的请求限制和流量整形的方式,特别值得一提的是,详细介绍在又拍云网关层的实际应用案例,以及又拍云贡献的开源 Resty 库。

alt

分享嘉宾三:张波 / 虎牙直播运维研发架构师

目前主要负责虎牙直播运维体系的建设,主要针对 web 和后台类程序的发布、监控、运维自动化相关的运维系统的设计和开发。

分享主题:《 掘金 Nginx 日志 》

Nginx 是现在最流行的负载均衡和反向代理服务器之一,如果你是一位中小微型网站的开发运维人员,可能仅 Nginx 每天就会产生上百 M 甚至数以十 G 的日志文件,Nginx 日志被删除以前,或者我们可以想想,其中是否蕴含着位置的金矿等待挖掘?

alt

分享嘉宾四:陈乾龙 / 京东微信手 Q 业务部

负责微信、手Q抢购后台,以及 OpenResty 入口流量的网关

分享主题:《 基于 OpenResty 流量的防刷及容灾 》

本次分享主要介绍基于 OpenResty 搭建流量网关的实践以及开发过程中碰到的问题及优化。

六、现场礼品

alt

【 报名开启】2018 Elastic & 袋鼠云 & 阿里云技术沙龙(杭州)

ElasticsearchAllwang 发表了文章 • 1 个评论 • 1089 次浏览 • 2018-12-02 20:40 • 来自相关话题

互联网时代,十亿、百亿、千亿的数据日志呈井喷式增长,基于日志搜索分析的需求也越来越强烈。Elasticsearch 作为一个分布式、可扩展、实时的搜索与数据分析引擎, 在大体量的数据处理上,无论实在全文搜索,还是在结构化数据统计中,都有非常大的优势。然而在真正实践过程中海量数据如何高效采集,如何合理优化分配索引,如何规划集群,如何满足业务分析需求都是我们可能会面临的问题。 本次袋鼠云联合阿里云、Elastic 中文社区,共同邀请滴滴、有赞等行业技术专家一同分享和探讨各自领域Elastic的实践。   本次活动时间12月15日 周六人数限制100人,大家抓紧报名哈,报名链接https://meetup.elasticsearch.c ... .html。 参与线下互动还有机会获得技术书籍与精美礼品哦!!! 不出意外,这应该是2018年Elastic在杭州的最后一次沙龙,小伙伴们抓紧今年的尾巴,不放过任何学习的机会哦!!!
互联网时代,十亿、百亿、千亿的数据日志呈井喷式增长,基于日志搜索分析的需求也越来越强烈。Elasticsearch 作为一个分布式、可扩展、实时的搜索与数据分析引擎, 在大体量的数据处理上,无论实在全文搜索,还是在结构化数据统计中,都有非常大的优势。然而在真正实践过程中海量数据如何高效采集,如何合理优化分配索引,如何规划集群,如何满足业务分析需求都是我们可能会面临的问题。 本次袋鼠云联合阿里云、Elastic 中文社区,共同邀请滴滴、有赞等行业技术专家一同分享和探讨各自领域Elastic的实践。   本次活动时间12月15日 周六人数限制100人,大家抓紧报名哈,报名链接https://meetup.elasticsearch.c ... .html。 参与线下互动还有机会获得技术书籍与精美礼品哦!!! 不出意外,这应该是2018年Elastic在杭州的最后一次沙龙,小伙伴们抓紧今年的尾巴,不放过任何学习的机会哦!!!

2018 年 Elastic Advent Calendar 分享活动已结束 🎉🎉

Adventmedcl 发表了文章 • 38 个评论 • 4660 次浏览 • 2018-11-20 22:33 • 来自相关话题

活动规则很简单:   活动创意来自于圣诞节倒计时,从12月1号开始到12月25日结束。   每天固定一篇文章分享,内容长短都可。   报名现在开始,留言报名即可,留言格式: Day[日期] -  你的分享标题。 一共25篇,报满即止。   虽然是西方的节日,不过目的是为了大家一起分享,重在参与嘛。   往期活动可参考:https://elasticsearch.cn/topic/advent   活动参与名单:      如何发布? 自己选择发布文章,按你的标题在12月你的这一天发布出来就好了。
1543474748734.jpg
 

【 报名已结束】2018 Elastic & 东方航空大数据技术沙龙

Elasticsearchkennywu76 发表了文章 • 0 个评论 • 1015 次浏览 • 2018-11-14 15:21 • 来自相关话题

本次活动报名已截止,因为名额限制无法报名成功的小伙伴也不用着急,届时会议将采用zoom进行直播,在 PC、Mac、iPhone/iPad、安卓手机/平板上,点击https://www.zoomus.cn/j/1524425455 即可轻松加入观看。
本次活动报名已截止,因为名额限制无法报名成功的小伙伴也不用着急,届时会议将采用zoom进行直播,在 PC、Mac、iPhone/iPad、安卓手机/平板上,点击https://www.zoomus.cn/j/1524425455 即可轻松加入观看。

【线下活动 - 分享主题征集 - 上海】2018 Elastic & 东方航空大数据技术沙龙

活动kennywu76 发表了文章 • 5 个评论 • 1599 次浏览 • 2018-10-18 11:10 • 来自相关话题

Elastic中文社区联合东方航空公司,将于2018年12月08日,在上海举办一次线下技术交流活动。 本次活动交流内容不限于Elastic Stack,可以是搜索、推荐、机器学习、商业智能、智能运维等任意大数据相关技术的最佳应用实践。 活动分享主题正🔥征集中!    有意参与本次主题分享的同学,请发送邮件至kennywu76@outlook.com,并提供如下信息:
  1. 个人简介
  2. 分享主题
  3. 内容提纲
  为确保本次活动的紧凑,分享主题将控制在5个以内。 部分同学提交的内容可能无法安排进本次活动日程,但我们将保留所有提交的主题,并尽力安排在后续的线下活动进行分享 。   征集截止时间:  2018年11月10日 活动时间:  2018年12月08日(暂定) 活动地址:  东航城(上海市闵行区虹翔三路)   欢迎社区同学踊跃报名,期待你的分享!
Elastic中文社区联合东方航空公司,将于2018年12月08日,在上海举办一次线下技术交流活动。 本次活动交流内容不限于Elastic Stack,可以是搜索、推荐、机器学习、商业智能、智能运维等任意大数据相关技术的最佳应用实践。 活动分享主题正🔥征集中!    有意参与本次主题分享的同学,请发送邮件至kennywu76@outlook.com,并提供如下信息:
  1. 个人简介
  2. 分享主题
  3. 内容提纲
  为确保本次活动的紧凑,分享主题将控制在5个以内。 部分同学提交的内容可能无法安排进本次活动日程,但我们将保留所有提交的主题,并尽力安排在后续的线下活动进行分享 。   征集截止时间:  2018年11月10日 活动时间:  2018年12月08日(暂定) 活动地址:  东航城(上海市闵行区虹翔三路)   欢迎社区同学踊跃报名,期待你的分享!

9月8日 Elastic Meetup 北京线下沙龙报名中

活动medcl 发表了文章 • 15 个评论 • 2832 次浏览 • 2018-08-16 17:57 • 来自相关话题

meetup-beijing.png
 时间:9月8日 地点:北京市海淀区上地西路6号,联想研究院圆楼三层报告厅 活动页面:https://meetup.elasticsearch.cn/2018/beijing.html  议题:征集中,等你来投稿
  • 58到家搜索服务化实践和演进  -- 邢天宇/五八到家
  • Elasticsearch在百度aladdin日志系统的应用  -- 王鹏/百度
  • elasticsearch 在58集团信息安全部的应用 -- 亢伟楠/五八集体
  • Waterdrop:构建在Spark之上的简单高效数据处理系统  -- 霍晨/新浪网
  • 基于 ElasticSearch 构建个性化推荐和高级搜索  -- 周金阳/果壳网/在行
  报名地址:http://elasticsearch.mikecrm.com/fUqiv0T  演讲主题介绍   #1 基于 ElasticSearch 构建个性化推荐和高级搜索 [周金阳]周金阳果壳网/在行 算法工程师 使用 ES 来构建一个简易却行之有效的个性化推荐系统,以及一些高级搜索排序的实践。 搜索排序主要是分享一些机器学习工具与 ES 配合的实践心得。   #2 elasticsearch 在58集团信息安全部的应用 [亢伟楠]亢伟楠58集团 资深开发工程师 全面介绍 ELK Stack 在58集团信息安全部的落地,升级,优化以及应用。 包括如下等方面:接入背景,存储选型,性能挑战,master node以及data node优化,安全实践,高吞吐量以及低延迟搜索优化;kibana 的落地,本地化使其更方便产品、运营使用。   #3 58到家搜索服务化实践和演进 [邢天宇]邢天宇北京五八到家信息技术有限公司 java工程师 介绍58到家搜索服务体系的构建和普及,elasticsearch在到家中的各种应用以及优化等等。   #4 Waterdrop:构建在Spark之上的简单高效数据处理系统 [霍晨]霍晨新浪网,大数据研发工程师 大数据时代,随着Spark等工具的出现,数据处理能力在逐渐提升。 但是Spark本身的开发和运维具有一定的成本,为此我们开源了Waterdrop,通过配置文件的形式配置Spark任务,企图降低Spark的使用门槛,减小开发和运维成本 - 什么是waterdrop - Waterdrop架构介绍 - Waterdrop VS Spark - Waterdrop VS Logstash - Waterdrop的优势 - Waterdrop使用场景 - Roadmap   #5 elasticsearch在百度aladdin日志系统的应用 [王鹏]王鹏百度,研发工程师 背景:aladdin建库问题相关的case追查,日志统计分析,问题需要解决。 方案:使用ES(es版本: 6.0.0)做存储和检索系统,日志以json格式,抽取重要字段建索引,每天一个index,index名字包含时间后缀,保存三天内的数据;建库10个模块,每天有100亿条记录,20T左右数据;使用20个容器做集群。 效果:毫秒级返回查询结果,利用kibana实时分析建库情况,同时能方便按需提供数据给业务方。   报名地址:http://elasticsearch.mikecrm.com/fUqiv0T      Elastic 中国开发者大会 2018,阵容强大,正在火热售票中 🔥 https://conf.elasticsearch.cn/2018/shenzhen.html

【深圳ES Meetup】李猛:DB与ES结合,是业务系统实践值得探讨的事

活动nodexy 发表了文章 • 2 个评论 • 424 次浏览 • 2019-11-09 17:41 • 来自相关话题

1月16日 Elastic 中文社区深圳 Meetup 上,李猛将带来关于ES 实践方面的主题分享。借此机会,我们邀请到他聊聊作为ES深度用户在探索ES过程中的心得以及对ES社区、活动、未来生态发展等方面的看法。   李猛 架构师/Elastic认证工程师 Elastic Stack产品深度用户,2012/2013年接触Elasticsearch,对Elastic Stack开发、架构、运维等方面有深入体验,实践过多种ES项目,最暴力的大数据分析应用,最复杂的业务系统应用等。   Q1、作为深度用户,当初是基于什么样的动机和考量选择使用 ES 产品并持续深入探索的? A:易用性与功能强大,个人平常比较爱好算法研究,选择任何数据产品本质上都是选择算法,算法的本质决定了产品的强大。 架构是个宏观问题,ES的设计是标准的分布式,架构的优秀设计带来的是易用性; 算法是个微观问题,ES集成了很多优秀的算法,这样在很多业务场景下都可满足,而不用更换不同的数据产品,这样也会带来产品运维方面的便利性,保障应用的技术栈不至于过多复杂。 Q2、在探索 DB 与 ES 的互通方面,有遇到什么难题吗?最后是如何解决的呢? A:数据一致性与实时性问题。应用架构思维变化,业务调整变化与技术方案变化。 Q3、结合您的实践经历,对 ES 目前的生态发展、应用以及未来有什么样的看法? A:ES目前主要应用是在单索引条件下查询,附带有简单的聚合分析能力。复杂的分析能力不具备,ES未来会增强复杂的分析能力,比如有条件的支持2个索引的关联分析。 Q4、您对本次技术沙龙活动的主题分享有什么期待? A:期望更多人参加探讨更多的业务应用场景,比如传统应用方面、大数据方面、机器学习方面;帮助大家以后项目实战有更多的案例参考。 Q5、您对 Elastic 中文社区发展有什么意见或建议呢? A:ES目前在国内的热度几乎超过任何数据库,几乎大大小小的公司,都在使用;从开始入门到成熟运用多多少少都会遇到很多问题,  希望社区活动更加多一点,业余的交流更多一点。比如可以办一些,走进某些企业的活动。 11月16日 Elastic 中文社区深圳 Meetup 火热报名中 分享主题:《DB到ES数据实时同步之路》 李猛  主题摘要:关系型数据库天然具备最严格的事务特性,有效的保证数据库一致性,但在高效查询方面显得很无力;Elasticsearch天然具备高效的查询算法,但在数据一致性方面却是先天缺陷;如何将DB与ES的优点结合,是任何一个企业公司业务系统实践都值得探讨的事。
b89578fa-29bc-49c3-a515-837cf1dcf7c3.png
 

Elasticsearch 北京站活动: Elastic{ON} - 2019 年 4 月 10 日

活动medcl 发表了文章 • 5 个评论 • 2651 次浏览 • 2019-03-06 10:26 • 来自相关话题

Elastic 官方将于 4 月 10 日在北京举行为期一天的 Elasticsearch 官方活动 - Elastic{ON} Tour,这是 Elastic{ON} Tour 在中国的第一站,欢迎参加。

活动内容精彩纷呈,您在会上可以深入了解产品路线图,获取专家建议,而且我们还会为您深入剖析从 Machine Learning 到规模扩展等方方面面的内容。

早鸟优惠票,仅限 75 张。

报名及注册地址

直接报名的地址

有小部分优惠码请微信联系:elasticchina

深入了解日志、搜索和安全等内容,精彩无限

了解 Elasticsearch、Kibana、Beats 和 Logstash 的路线图。与专家见面。从其他 Elastic Stack 用户那里学习经验。Elastic{ON} 参会门票价格实惠,您只需从工作中抽出最短的时间,便可获得所需的实用内容、专家建议和实操培训,还能拓宽 自己的人脉。

  • 深入了解 Elastic Stack 的发展路线图。

  • 在 “Ask Me Anything”(有问必答)展台进行咨询,由专家面对面为您答疑解惑。

  • 结识 Elastic 的工程师、专家和用户。

  • 通过演讲和现场演示,了解诸如 APM 和 Elasticsearch SQL 等全新功能。

  • 了解如何确定部署规模并对架构进行优化。

  • 免费参加一场按需提供的日志、指标或 APM 基础知识培训课程,课程原价 200 美元。

日程安排

上午 8:00 - 结束

Ask Me Anything(有问必答) + 演示 全天均可以访问 “Ask Me Anything”(有问必答)展台,面对面获取 Elastic 工程师和架构师提供的专业建议。亲自现场演示诸如 Canvas、APM 等崭新功能,加深自己的了解。

上午 8:00 - 上午 9:00

登记入场,赞助商展示,以及多元化讨论 戴上胸牌,了解我们的赞助商有哪些活动,然后在群组讨论中分享您对多元化以及包容性的看法。

上午 9:00 - 上午 9:30

开场主题演讲 Elastic Stack 的开发人员直接为您奉上关于新产品、功能、解决方案和部署选项的愿景。

上午 9:30 - 上午 10:15

Elastic Stack 最新动态 了解 Elasticsearch、Kibana、Beats 和 Logstash 的产品路线图,而且会有精彩演示和重磅发布,涵盖从 rollup(汇总)到 Elastic SQL 在内的方方面面。

上午 10:15 - 上午 10:45

日志、指标和 APM:运维分析的三连击 集中存储日志和指标,现在还可将 APM 数据也包括在内,助力您在运维可见度方面达到更高水平。了解 Elasticsearch 如何将所有这些类型的数据高效地存储在单一存储库内,查看如何通过 Kibana 来搜索日志、分析指标和利用 APM 功能,以便更好地监测性能并更快速地完成故障排查。

上午 10:45 - 上午 11:00

上午中场休息 上午 11:00 - 上午 11:30 使用 Elastic Stack 进行端对端安全分析 希望在日新月异的安全领域领先竞争对手吗?了解如何按照您需要的速度和规模创建集中式安全分析平台,以便在威胁检测和跟踪活动中进行不定期分析。

上午 11:30 - 中午 12:00

技术讲座 Elastic 专家将会就与您所在社区内用户相关的主题进行分享。

中午 12:00 - 下午 1:00

午餐 和与会的其他人员以及 Elastic 专家共进午餐。

下午 1:00 - 下午 1:30

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 1:30 - 下午 2:00

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 2:00 - 下午 2:20

合作伙伴讲座 了解 Elastic 合作伙伴最新推出的最优产品和服务。

下午 2:20 - 下午 2:40

中场休息 拜访赞助商,亲自完成 Elastic 演示内容,前往 “Ask Me Anything”(有问必答)展台尽情提问并一扫心中疑惑。

下午 2:40 - 下午 3:10

技术讲座 Elastic 专家将会就与您所在社区内用户相关的主题进行分享。

下午 3:10 - 下午 3:40

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 3:40 - 下午 4:10

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 4:10 - 下午 4:15

结束和幸运抽奖 一天活动结束,参加幸运抽奖。

下午 4:15 - 下午 5:15

欢乐时光

报名及注册地址

北京站.png

750x280.png

【线下活动-分享主题征集-武汉】 2019年3月 Elastic&尚德机构技术沙龙

活动medcl 回复了问题 • 3 人关注 • 1 个回复 • 1900 次浏览 • 2019-02-22 15:42 • 来自相关话题

2018 年 Elastic Advent Calendar 分享活动已结束 🎉🎉

Adventmedcl 发表了文章 • 38 个评论 • 4660 次浏览 • 2018-11-20 22:33 • 来自相关话题

活动规则很简单:   活动创意来自于圣诞节倒计时,从12月1号开始到12月25日结束。   每天固定一篇文章分享,内容长短都可。   报名现在开始,留言报名即可,留言格式: Day[日期] -  你的分享标题。 一共25篇,报满即止。   虽然是西方的节日,不过目的是为了大家一起分享,重在参与嘛。   往期活动可参考:https://elasticsearch.cn/topic/advent   活动参与名单:      如何发布? 自己选择发布文章,按你的标题在12月你的这一天发布出来就好了。
1543474748734.jpg
 

【线下活动 - 分享主题征集 - 上海】2018 Elastic & 东方航空大数据技术沙龙

活动kennywu76 发表了文章 • 5 个评论 • 1599 次浏览 • 2018-10-18 11:10 • 来自相关话题

Elastic中文社区联合东方航空公司,将于2018年12月08日,在上海举办一次线下技术交流活动。 本次活动交流内容不限于Elastic Stack,可以是搜索、推荐、机器学习、商业智能、智能运维等任意大数据相关技术的最佳应用实践。 活动分享主题正🔥征集中!    有意参与本次主题分享的同学,请发送邮件至kennywu76@outlook.com,并提供如下信息:
  1. 个人简介
  2. 分享主题
  3. 内容提纲
  为确保本次活动的紧凑,分享主题将控制在5个以内。 部分同学提交的内容可能无法安排进本次活动日程,但我们将保留所有提交的主题,并尽力安排在后续的线下活动进行分享 。   征集截止时间:  2018年11月10日 活动时间:  2018年12月08日(暂定) 活动地址:  东航城(上海市闵行区虹翔三路)   欢迎社区同学踊跃报名,期待你的分享!
Elastic中文社区联合东方航空公司,将于2018年12月08日,在上海举办一次线下技术交流活动。 本次活动交流内容不限于Elastic Stack,可以是搜索、推荐、机器学习、商业智能、智能运维等任意大数据相关技术的最佳应用实践。 活动分享主题正🔥征集中!    有意参与本次主题分享的同学,请发送邮件至kennywu76@outlook.com,并提供如下信息:
  1. 个人简介
  2. 分享主题
  3. 内容提纲
  为确保本次活动的紧凑,分享主题将控制在5个以内。 部分同学提交的内容可能无法安排进本次活动日程,但我们将保留所有提交的主题,并尽力安排在后续的线下活动进行分享 。   征集截止时间:  2018年11月10日 活动时间:  2018年12月08日(暂定) 活动地址:  东航城(上海市闵行区虹翔三路)   欢迎社区同学踊跃报名,期待你的分享!

9月8日 Elastic Meetup 北京线下沙龙报名中

活动medcl 发表了文章 • 15 个评论 • 2832 次浏览 • 2018-08-16 17:57 • 来自相关话题

meetup-beijing.png
 时间:9月8日 地点:北京市海淀区上地西路6号,联想研究院圆楼三层报告厅 活动页面:https://meetup.elasticsearch.cn/2018/beijing.html  议题:征集中,等你来投稿
  • 58到家搜索服务化实践和演进  -- 邢天宇/五八到家
  • Elasticsearch在百度aladdin日志系统的应用  -- 王鹏/百度
  • elasticsearch 在58集团信息安全部的应用 -- 亢伟楠/五八集体
  • Waterdrop:构建在Spark之上的简单高效数据处理系统  -- 霍晨/新浪网
  • 基于 ElasticSearch 构建个性化推荐和高级搜索  -- 周金阳/果壳网/在行
  报名地址:http://elasticsearch.mikecrm.com/fUqiv0T  演讲主题介绍   #1 基于 ElasticSearch 构建个性化推荐和高级搜索 [周金阳]周金阳果壳网/在行 算法工程师 使用 ES 来构建一个简易却行之有效的个性化推荐系统,以及一些高级搜索排序的实践。 搜索排序主要是分享一些机器学习工具与 ES 配合的实践心得。   #2 elasticsearch 在58集团信息安全部的应用 [亢伟楠]亢伟楠58集团 资深开发工程师 全面介绍 ELK Stack 在58集团信息安全部的落地,升级,优化以及应用。 包括如下等方面:接入背景,存储选型,性能挑战,master node以及data node优化,安全实践,高吞吐量以及低延迟搜索优化;kibana 的落地,本地化使其更方便产品、运营使用。   #3 58到家搜索服务化实践和演进 [邢天宇]邢天宇北京五八到家信息技术有限公司 java工程师 介绍58到家搜索服务体系的构建和普及,elasticsearch在到家中的各种应用以及优化等等。   #4 Waterdrop:构建在Spark之上的简单高效数据处理系统 [霍晨]霍晨新浪网,大数据研发工程师 大数据时代,随着Spark等工具的出现,数据处理能力在逐渐提升。 但是Spark本身的开发和运维具有一定的成本,为此我们开源了Waterdrop,通过配置文件的形式配置Spark任务,企图降低Spark的使用门槛,减小开发和运维成本 - 什么是waterdrop - Waterdrop架构介绍 - Waterdrop VS Spark - Waterdrop VS Logstash - Waterdrop的优势 - Waterdrop使用场景 - Roadmap   #5 elasticsearch在百度aladdin日志系统的应用 [王鹏]王鹏百度,研发工程师 背景:aladdin建库问题相关的case追查,日志统计分析,问题需要解决。 方案:使用ES(es版本: 6.0.0)做存储和检索系统,日志以json格式,抽取重要字段建索引,每天一个index,index名字包含时间后缀,保存三天内的数据;建库10个模块,每天有100亿条记录,20T左右数据;使用20个容器做集群。 效果:毫秒级返回查询结果,利用kibana实时分析建库情况,同时能方便按需提供数据给业务方。   报名地址:http://elasticsearch.mikecrm.com/fUqiv0T      Elastic 中国开发者大会 2018,阵容强大,正在火热售票中 🔥 https://conf.elasticsearch.cn/2018/shenzhen.html

7月21日,周六,Elastic 上海 线下 Meetup [活动结束, PPT已上传]

活动medcl 发表了文章 • 34 个评论 • 4608 次浏览 • 2018-06-05 13:37 • 来自相关话题

当当当! 上海的小伙伴们注意啦! 今年的 Elastic 上海 Meetup 活动初步定于 7 月 21 日在 eBay 上海研发中心举行,现在开始征集分享嘉宾,欢迎大家自告奋勇! 活动日程信息:http://meetup.elasticsearch.cn/2018/shanghai.html  分享报名链接:http://elasticsearch.mikecrm.com/A6QbFvU 参会报名链接:http://elasticsearch.mikecrm.com/fUqiv0T    PPT 查看地址:   场地大小有限,大家尽量观看直播, 线上直播注册和【回看】观看入口:  
Snip20180720_25.png
  社区活动,重在参与,欢迎大家报名,一起分享交流!

【线下活动-分享主题征集-武汉】 2019年3月 Elastic&尚德机构技术沙龙

回复

活动medcl 回复了问题 • 3 人关注 • 1 个回复 • 1900 次浏览 • 2019-02-22 15:42 • 来自相关话题

2018 Elastic南京meetup分享主题征集啦!!!

回复

活动swordsmanli 发起了问题 • 4 人关注 • 0 个回复 • 1699 次浏览 • 2018-03-23 22:19 • 来自相关话题

Elasitcsearch中国开发者报告调研 | 获奖名单公布

活动zengcici 发表了文章 • 1 个评论 • 96 次浏览 • 5 天前 • 来自相关话题

2012年 Elasticsearch 首个版本发布,经过6年多的更新迭代,Elastic Stack 生态已经日渐成熟,Elastic 软件在国内拥有越来越多的用户,应用Elasticsearch的开发人群也不断扩大。 为了深入了解 Elasticsearch 开发者群体的现状,2019年11月,Elastic社区、阿里云Elasticsearch技术团队和阿里云开发者社区三方联合发起了Elasticsearch开发者研活动。 在调研过程中,1186位开发者完成了调研问卷,18位技术专家完成了专题访问。参与调研的开发者们从不同角度,分享了个人特征、社会属性、技术能力、从业经历等信息;在Elasticsearch技术的应用、行业实践、职业发展等方面,真实的提供了反馈。 作为首次国内发起的针对 Elasticsearch 开发者群体的行业性调研报告,我们希望能给更多从业者提供关于自身职业、行业以及技术应用的参照,也希望有更多的开发者关注并进入到这一特定技术领域,共同推动 Elastic Stack 相关技术持续向前发展。   以下为本次参与调研的60位幸运者名单,礼品获取信息请关注**短信通知**。
图片1.png
  报告获取时间:2019年12月07日   钉钉扫码,加入《Elasticsearch中文技术交流群》 在2019年12月07日免费获取“Elasticsearch开发者报告”  
阿里云Elasticsearch技术交流群.jpg
 

【深圳ES Meetup】阿里云欧阳楚才:ES实践中最大的业务挑战是保障线上服务稳定

活动nodexy 发表了文章 • 0 个评论 • 260 次浏览 • 2019-11-14 16:23 • 来自相关话题

11月16日 Elastic 中文社区深圳 Meetup 上,欧阳楚才将为大家分享 阿里云Elasticsearch内核优化与应用实践。借此机会,我们邀请到他聊聊选ES在阿里云实践过程中遇到的最大业务挑战和解决方案,以及他在高并发架构设计方面的心得。 分享嘉宾 欧阳楚才 搜索技术专家 @阿里巴巴 在阿里巴巴负责Elasticsearch云服务研发工作,有比较丰富的搜索引擎研发经验,熟悉Lucene、Elasticsearch等开源技术,擅长高并发系统架构设计。 Q1、ES 在阿里云实践中遇到最大的业务挑战是什么?如何解决的? A:阿里云Elasticsearch最大的业务挑战是保障线上服务稳定。通过支持多可用区部署,避免单机房异常导致服务不可用。通过ECS本地盘、ESSD云盘提供高IOPS的存储,避免IO瓶颈导致查询响应慢,使用ECS本地盘也可以降低存储成本。通过ElasticFlow离线构建索引,避免写入和查询争抢资源导致查询响应变慢。通过智能诊断服务Eyou定期检查Elasticsearch服务健康状况,及时发现系统存在的隐患。 Q2、您在高并发系统架构设计方面有哪些心得为大家分享? A:结合业务场景做容量规划,评估系统需要支撑的写入TPS、查询QPS、最大响应延迟时间。对于Elasticsearch而言,通常最大的瓶颈在磁盘IO,尽量使用SSD盘高性能存储设备。为了系统稳定,单个节点Elasticsearch的JVM内存尽量不要超过32G,单节点存储数据量尽量不要超过5TB,高并发搜索场景推荐单节点配置16核CPU、64G内存、2TB SSD盘。Elasticsearch集群节点数不要超过300个,数据量大的集群根据业务拆分多个集群,配置跨集群搜索。系统上线前做全链路压测,找到系统瓶颈。生产环境开启慢查询日志,分析bad case。 Q3、结合您的实践经历,对 ES 目前的生态发展、应用以及未来有什么样的看法? A:Elasticsearch是开源的分布式搜索和分析引擎,开箱即用、弹性扩展方便。从早期的ELK到现在的Elastic技术栈,版本迭代持续加速,Elasticsearch的性能、扩展性、相关性不断优化。Elasticsearch最开始设计用于搜索引擎,后来不断被应用到日志分析、数据库加速、安全风控等领域,通过插件扩展机制可以用于图像、视频等非结构化数据分析。 Q4、您对本次技术沙龙活动的主题分享有什么期待? A:期待能看到更多Elasticsearch应用案例,跟大家一起交流最佳实践。 Q5、您对 Elastic 中文社区发展有什么意见或建议呢? A:Elastic中文社区之前组织过翻译《Elasticsearch权威指南》中文文档,当时的Elasticsearch版本为2.x,现在的Elasticsearch7.x版本在API、功能方面已经有很大变化,建议组织志愿者更新文档。 11月16日 Elastic 中文社区深圳 Meetup 火热报名中 主题分享:《阿里云Elasticsearch内核优化与应用实践》欧阳楚才   主题摘要:Elasticsearch在阿里云上服务了大量的客户,同时也面临着巨大的业务挑战。阿里云ES在内核引擎、中文分词、向量检索、容器化部署等方面做了一系列开发工作,应用于文档、日志、图像、视频的检索与分析。
b89578fa-29bc-49c3-a515-837cf1dcf7c3.png
 

【深圳ES Meetup】字节跳动黄杨锋:从0到1构建 ES 服务平台的挑战

活动nodexy 发表了文章 • 0 个评论 • 436 次浏览 • 2019-11-13 09:07 • 来自相关话题

11月16日 Elastic 中文社区深圳 Meetup 上,黄杨锋将为大家分享基于K8S的ES服务平台在头条的实践。借此机会,我们邀请到他聊聊从0到1构建ES服务平台遇到的痛点、解决方案以及未来的规划。 分享嘉宾 黄杨锋 高级工程师 @字节跳动 目前在头条深圳负责ES服务平台相关的研发工作;此前曾就职于华为、YY、腾讯等企业,在腾讯基于ES做微信支付数据的检索。 Q1、从0到1构建 ES 服务平台的过程中有哪些痛点?分别是如何解决的? A:(1)需要隔离,远离大集群,是通过 k8s来解决。       (2)性能分析方面相对还比较薄弱 ,打算增加metric和trace日志来看看具体耗时。 Q2、在 ES 服务平台方面未来还有什么样的规划? A:相关规划详见下图
CAPTURE_20191113_90835.jpg
Q3、结合您的实践经历,对 ES 目前的生态发展、应用以及未来有什么样的看法? A: ES 发展很快,周边生态也越来越丰富,希望 ES 在快速发展的过程中,更加注重查询性能的优化提升,以及集群的稳定性。 Q4、您对本次技术沙龙活动的主题分享有什么期待? A:期望看到性能优化、机器学习相关的最新进展。 Q5、您对 Elastic 中文社区发展有什么意见或建议呢? A:(1)ES 在中国程序员中的影响力感觉可以加强,希望可以做到像 Google/Amazon 在中国程序员群体上那样有很大的影响力;       (2)希望官方出一些内核相关的书籍或文章;       (3)希望价钱可以再调低点。 11月16日 Elastic 中文社区深圳 Meetup 火热报名中 主题分享:《基于K8S的ES服务平台在头条的实践介绍》黄杨锋 主题摘要:ES 服务平台自上线以来,已经接入了头条、抖音等众多业务。本次分享将介绍 ES 服务平台从 0 到 1 的创建过程中所做的一些工作,包括 K8S 碰到的一些难点、ES 功能的增强、跨机房容灾、全栈监控告警、自动化部署等功能。
b89578fa-29bc-49c3-a515-837cf1dcf7c3.png

【深圳ES Meetup】李猛:DB与ES结合,是业务系统实践值得探讨的事

活动nodexy 发表了文章 • 2 个评论 • 424 次浏览 • 2019-11-09 17:41 • 来自相关话题

1月16日 Elastic 中文社区深圳 Meetup 上,李猛将带来关于ES 实践方面的主题分享。借此机会,我们邀请到他聊聊作为ES深度用户在探索ES过程中的心得以及对ES社区、活动、未来生态发展等方面的看法。   李猛 架构师/Elastic认证工程师 Elastic Stack产品深度用户,2012/2013年接触Elasticsearch,对Elastic Stack开发、架构、运维等方面有深入体验,实践过多种ES项目,最暴力的大数据分析应用,最复杂的业务系统应用等。   Q1、作为深度用户,当初是基于什么样的动机和考量选择使用 ES 产品并持续深入探索的? A:易用性与功能强大,个人平常比较爱好算法研究,选择任何数据产品本质上都是选择算法,算法的本质决定了产品的强大。 架构是个宏观问题,ES的设计是标准的分布式,架构的优秀设计带来的是易用性; 算法是个微观问题,ES集成了很多优秀的算法,这样在很多业务场景下都可满足,而不用更换不同的数据产品,这样也会带来产品运维方面的便利性,保障应用的技术栈不至于过多复杂。 Q2、在探索 DB 与 ES 的互通方面,有遇到什么难题吗?最后是如何解决的呢? A:数据一致性与实时性问题。应用架构思维变化,业务调整变化与技术方案变化。 Q3、结合您的实践经历,对 ES 目前的生态发展、应用以及未来有什么样的看法? A:ES目前主要应用是在单索引条件下查询,附带有简单的聚合分析能力。复杂的分析能力不具备,ES未来会增强复杂的分析能力,比如有条件的支持2个索引的关联分析。 Q4、您对本次技术沙龙活动的主题分享有什么期待? A:期望更多人参加探讨更多的业务应用场景,比如传统应用方面、大数据方面、机器学习方面;帮助大家以后项目实战有更多的案例参考。 Q5、您对 Elastic 中文社区发展有什么意见或建议呢? A:ES目前在国内的热度几乎超过任何数据库,几乎大大小小的公司,都在使用;从开始入门到成熟运用多多少少都会遇到很多问题,  希望社区活动更加多一点,业余的交流更多一点。比如可以办一些,走进某些企业的活动。 11月16日 Elastic 中文社区深圳 Meetup 火热报名中 分享主题:《DB到ES数据实时同步之路》 李猛  主题摘要:关系型数据库天然具备最严格的事务特性,有效的保证数据库一致性,但在高效查询方面显得很无力;Elasticsearch天然具备高效的查询算法,但在数据一致性方面却是先天缺陷;如何将DB与ES的优点结合,是任何一个企业公司业务系统实践都值得探讨的事。
b89578fa-29bc-49c3-a515-837cf1dcf7c3.png
 

深圳 ES Meetup 来啦! 11月16日 阿里中心

活动nodexy 发表了文章 • 1 个评论 • 283 次浏览 • 2019-11-05 10:08 • 来自相关话题

shenzhen-es-201911_(1).png
    活动链接:   https://meetup.elasticsearch.c ... .html    议程   13:00-13:30  签到 13:30-13:40  活动介绍 13:40-14:20 分享主题:基于K8S的ES服务平台在头条的实践介绍 分享嘉宾:黄杨锋 @字节跳动 主题摘要:ES服务平台自上线以来,已经接入了头条、抖音等众多业务。本次分享将介绍ES服务平台从0到1的创建过程中所做的一些工作,包括K8S碰到的一些难点、ES功能的增强、跨机房容灾、全栈监控告警、自动化部署等功能。 14:20-15:00 分享主题:DB到ES数据实时同步之路 分享嘉宾:李猛 主题摘要:关系型数据库天然具备最严格的事务特性,有效的保证数据库一致性,但在高效查询方面显得很无力;Elasticsearch天然具备高效的查询算法,但在数据一致性方面却是先天缺陷; 如何将DB与ES的优点结合,是任何一个企业公司业务系统实践都值得探讨的事。 15:20-16:00 分享主题:Elasticsearch在腾讯的优化实践 分享嘉宾:陈曦 @腾讯云 主题摘要:Elasticsearch在腾讯得到了大规模应用,支撑了后台海量日志分析、腾讯云监控系统、腾讯文档搜索服务等。在服务公司内外部用户的过程中,腾讯ES团队碰到了很多痛点,对ES内核做了大量优化,使其在高性能、高可用性、低成本等方面有了大幅度的提升。本次分享将着重介绍腾讯ES团队对ES的优化实践。 16:00-16:40 分享主题:阿里云Elasticsearch内核优化与应用实践 分享嘉宾:欧阳楚才 @阿里巴巴 主题摘要: Elasticsearch在阿里云上服务了大量的客户,同时也面临着巨大的业务挑战。阿里云ES在内核引擎、中文分词、向量检索、容器化部署等方面做了一系列开发工作,应用于文档、日志、图像、视频的检索与分析。   16:40-17:20 分享主题:码云Gitee的Elasticsearch检索优化实战 分享嘉宾:陈鑫 @码云 主题摘要: 码云(Gitee.com)的Elasticsearch应用实战,以代码仓库搜索为例,讲解Elasticsearch在分词、信息检索模型、排序模型的自定义、重写和优化经验。   17:20-18:00 抽奖 & 交流  

Elastic&滴滴 meetup杭州站 2019年9月7日,抓紧报名哦

活动Allwang 发表了文章 • 5 个评论 • 2620 次浏览 • 2019-07-22 10:38 • 来自相关话题

Elastic中文社区联合滴滴出行,将于2019年9月7日,在杭州举办一次线下技术交流活动。 本次活动交流内容主要围绕Elastic的开源产品(Elasticsearch、Logstash、Kibana 和 Beats)及周边技术,探讨在搜索、数据实时分析、日志分析、安全等领域的实践与应用。 活动分享火热报名中! 报名地址 朱杰 Elastic elastic资深顾问 《卓越运维三连击日志、指标和APM》 主题摘要:讲解将日志、指标和APM融入同一个技术栈的优势,在Elastic Stack中统一管理这三者的挑战和解决方法。分析在同一个技术栈里做三者的关联的优势和意义。相关问题解答和产品演示。 高斌龙 腾讯 Elasticsearch云服务后台开发工程师 《云上Elasticsearch的容灾与数据备份机制》 主题摘要:介绍基于云服务器和云硬盘搭建的ES集群,如何实现跨机房容灾和跨地域容灾;另外介绍云上的ES集群如何进行数据备份和恢复。 朱永清 杭州美创 技术专家 《ES 认证工程师考试经验分享》 主题摘要:如何参加 ES 认证工程师考试,如何做好考前准备并顺利通过考试,和一些经验分享。 钟华 滴滴ES团队 资深软件开发工程师 《基于Hadoop快速构建离线elasticsearch索引》 主题摘要:本主题介绍滴滴内部FastIndex服务,一种利用Hadoop计算能力快速离线构建elasticsearch索引的方式,替代之前使用DataX离线导入方式,在大数据场景下,可将写入时间降低为DataX的十分之一,同时不影响在线ES集群。 活动时间: 2019年9月7日 活动地址: 杭州市西湖区弘德路256号 西溪谷国际商务中心G座8楼(滴滴办公大楼) 报名地址

Elasticsearch 北京站活动: Elastic{ON} - 2019 年 4 月 10 日

活动medcl 发表了文章 • 5 个评论 • 2651 次浏览 • 2019-03-06 10:26 • 来自相关话题

Elastic 官方将于 4 月 10 日在北京举行为期一天的 Elasticsearch 官方活动 - Elastic{ON} Tour,这是 Elastic{ON} Tour 在中国的第一站,欢迎参加。

活动内容精彩纷呈,您在会上可以深入了解产品路线图,获取专家建议,而且我们还会为您深入剖析从 Machine Learning 到规模扩展等方方面面的内容。

早鸟优惠票,仅限 75 张。

报名及注册地址

直接报名的地址

有小部分优惠码请微信联系:elasticchina

深入了解日志、搜索和安全等内容,精彩无限

了解 Elasticsearch、Kibana、Beats 和 Logstash 的路线图。与专家见面。从其他 Elastic Stack 用户那里学习经验。Elastic{ON} 参会门票价格实惠,您只需从工作中抽出最短的时间,便可获得所需的实用内容、专家建议和实操培训,还能拓宽 自己的人脉。

  • 深入了解 Elastic Stack 的发展路线图。

  • 在 “Ask Me Anything”(有问必答)展台进行咨询,由专家面对面为您答疑解惑。

  • 结识 Elastic 的工程师、专家和用户。

  • 通过演讲和现场演示,了解诸如 APM 和 Elasticsearch SQL 等全新功能。

  • 了解如何确定部署规模并对架构进行优化。

  • 免费参加一场按需提供的日志、指标或 APM 基础知识培训课程,课程原价 200 美元。

日程安排

上午 8:00 - 结束

Ask Me Anything(有问必答) + 演示 全天均可以访问 “Ask Me Anything”(有问必答)展台,面对面获取 Elastic 工程师和架构师提供的专业建议。亲自现场演示诸如 Canvas、APM 等崭新功能,加深自己的了解。

上午 8:00 - 上午 9:00

登记入场,赞助商展示,以及多元化讨论 戴上胸牌,了解我们的赞助商有哪些活动,然后在群组讨论中分享您对多元化以及包容性的看法。

上午 9:00 - 上午 9:30

开场主题演讲 Elastic Stack 的开发人员直接为您奉上关于新产品、功能、解决方案和部署选项的愿景。

上午 9:30 - 上午 10:15

Elastic Stack 最新动态 了解 Elasticsearch、Kibana、Beats 和 Logstash 的产品路线图,而且会有精彩演示和重磅发布,涵盖从 rollup(汇总)到 Elastic SQL 在内的方方面面。

上午 10:15 - 上午 10:45

日志、指标和 APM:运维分析的三连击 集中存储日志和指标,现在还可将 APM 数据也包括在内,助力您在运维可见度方面达到更高水平。了解 Elasticsearch 如何将所有这些类型的数据高效地存储在单一存储库内,查看如何通过 Kibana 来搜索日志、分析指标和利用 APM 功能,以便更好地监测性能并更快速地完成故障排查。

上午 10:45 - 上午 11:00

上午中场休息 上午 11:00 - 上午 11:30 使用 Elastic Stack 进行端对端安全分析 希望在日新月异的安全领域领先竞争对手吗?了解如何按照您需要的速度和规模创建集中式安全分析平台,以便在威胁检测和跟踪活动中进行不定期分析。

上午 11:30 - 中午 12:00

技术讲座 Elastic 专家将会就与您所在社区内用户相关的主题进行分享。

中午 12:00 - 下午 1:00

午餐 和与会的其他人员以及 Elastic 专家共进午餐。

下午 1:00 - 下午 1:30

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 1:30 - 下午 2:00

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 2:00 - 下午 2:20

合作伙伴讲座 了解 Elastic 合作伙伴最新推出的最优产品和服务。

下午 2:20 - 下午 2:40

中场休息 拜访赞助商,亲自完成 Elastic 演示内容,前往 “Ask Me Anything”(有问必答)展台尽情提问并一扫心中疑惑。

下午 2:40 - 下午 3:10

技术讲座 Elastic 专家将会就与您所在社区内用户相关的主题进行分享。

下午 3:10 - 下午 3:40

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 3:40 - 下午 4:10

用户案例 了解本地用户如何在业务分析、网络安全和日志等领域应用 Elastic Stack。

下午 4:10 - 下午 4:15

结束和幸运抽奖 一天活动结束,参加幸运抽奖。

下午 4:15 - 下午 5:15

欢乐时光

报名及注册地址

北京站.png

750x280.png

【北京活动】OpenResty x Open Talk 丨北京站

活动suweibei 发表了文章 • 0 个评论 • 495 次浏览 • 2019-03-04 14:47 • 来自相关话题

一、活动介绍

OpenResty 是一个基于 Nginx 与 Lua 的高性能 Web 平台,其内部集成了大量精良的 Lua 库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态 Web 应用、Web 服务和动态网关。目前 OpenResty 是全球占有率排名第五的 Web 服务器,超过 1 万多家商业公司都在使用 OpenResty,包括又拍云、腾讯、奇虎360、京东、12306、Kong 等公司,应用在 CDN、广告系统、搜索、实现业务逻辑、余票查询、网关、ingress controller 等各种不同的场景下。

为促进 OpenResty 在技术圈的发展,增进 OpenResty 使用者的交流与学习,OpenResty 社区联合又拍云,举办 “OpenResty × Open Talk” 全国巡回沙龙,邀请业内资深的 OpenResty 技术专家,分享 OpenResty 实战经验,推动 OpenResty 开源项目的发展,促进互联网技术的教育。

二、报名地址

http://www.huodongxing.com/event/2481310558700

三、活动时间

2019 年 03 月 23 日(周六)

四、活动地址

北京市海淀区中关村大街 11 号E世界财富中心 A 座 B2 PEOPLE²

五、嘉宾与议题

叶靖.jpg

分享嘉宾一:叶靖 / 又拍云平台开发部负责人

目前主要负责又拍云弹性云处理平台以及内部私有云的设计和开发工作,兼部分文件上传接口相关的工作。对 Python / Lua / Go 等语言有较深入的研究,在 ngx_lua 和 OpenResty 模块开发方面有丰富经验,专注于高并发、高可用服务架构设计,对 Docker 容器有较多的实践。平时热衷于参与开源社区分享开源经验。

分享话题:《 OpenResty 在又拍云容器平台中的应用 》

主要介绍 Kong、Ingress-Nginx 等基于 OpenResty 实现的 API 网关和负载均衡器的使用方法和工作原理,以及如何基于 OpenResty 实现高性能的外部负载网关。

王辉.jpg

分享嘉宾二:王辉 / 新浪微博产品部移动高级开发工程师

专注新浪微博后端业务,微博移动应用后端网关负责人,曾负责过视频直播、消息下推等系统。

分享话题:《 OpenResty 构建一站式应用网关实践 》

新浪微博基于 OpenResty 构建了一个包含上行请求和下行推送的一站式应用网关,对外提供TCP、TLS、HTTPS、HTTP、QUIC等众多通道进行传输数据,数据进行私有协议编解码。可以对外提供提供透传式代理服务、多个接口聚合服务以及GraphQL模块。在本次分享,将会介绍基于 OpenResty 构建的完整服务架构,当前所遇到的问题、解决的方式以及调试的线上技巧等。分享提纲:

1、基于 OpenResty 构建一站式网关概述;

2、我们遇到问题以及解决方式;

3、收获总结和问题反思。

刘洋.jpg

分享嘉宾三:刘洋 / Polaristech 技术专家

曾就职于 Redhat、阿里云,10 余年研发经验,近期加入 Polaristech 投入边缘计算领域。作为 RHCA,不仅在 Linux 领域拥有丰富的技术积累,同时在工作中也积累了大量的市场经验。

分享话题:《 基于 OpenResty /Kong 构建边缘计算平台 》

随着移动端和固网宽带等高速网络的普及,计算能力正在向贴近用户的边缘位置迁移。本次分享,将会基于 Polaristech 帮助客户落地的 IOT 项目和银行的开放银行项目经验,介绍如何以 OpenResty 和 Kong 为基础框架构建边缘计算平台,实现就近接入、边缘加速、API 管理、分布式全链路管理等多方面的架构和设计经验。

吴钧泽.jpg

分享嘉宾四:吴钧泽 / 好未来高级工程师

Swoft 开源框架开发者,ServiceMesher 社区成员 ,重度开源爱好者。目前主要负责好未来支付交易系统,对分布式系统架构、高性能应用有着浓厚的兴趣。

分享话题:《 当 OpenResty 遇上教育行业》

本次分享将会介绍 OpenResty 在教育行业的落地实践、性能优化等内容,介绍基于 Openresty  打造高性能的 PassPort 平台  Openresty 性能优化和在教育行业的有趣实践。分享提纲:

1、为什么选择 OpenResty ;

2、基于 Openresty 打造 PassPort  平台;

3、基于 Openresty 开发高性能 API Gateway ;

4、一些有趣的实践;

5、未来的规划。

罗玉杰.jpg

分享嘉宾五:罗玉杰 / 京东云技术专家

10 余年 CDN、流媒体行业从业经验,热衷于开源软件的开发与研究,对 OpenResty、Nginx 模块开发有较深入的研究,熟悉 CDN 架构和主流流媒体协议。

分享话题:《 OpenResty 在直播场景的应用 》

本次分享,将会介绍基于 OpenResty、Redis 实现的 AWS S3 上传服务,将 TS、m3u8 文件上传至云存储,供 HLS 直播、时移、回看、延播下载使用;同时还将介绍直播、时移回看、延播服务等功能的实现。

六、现场礼品

现场礼品.jpg
 

【2019.01.12】OpenResty x Open Talk 丨深圳站

活动suweibei 发表了文章 • 0 个评论 • 442 次浏览 • 2018-12-17 11:03 • 来自相关话题

一、活动介绍

OpenResty 是一个基于 Nginx 与 Lua 的高性能 Web 平台,其内部集成了大量精良的 Lua 库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态 Web 应用、Web 服务和动态网关。目前 OpenResty 是全球占有率排名第五的 Web 服务器,超过 1 万多家商业公司都在使用 OpenResty,比如又拍云、腾讯、奇虎360、京东、12306、Kong 等公司,应用在 CDN、广告系统、搜索、实现业务逻辑、余票查询、网关、ingress controller 等各种不同的场景下。

又拍云 Open Talk 是由又拍云发起的系列主题分享沙龙,秉承又拍云帮助企业提升发展速度的初衷,从 2015 年开启以来,Open Talk 至今已成功举办 45 期,辐射线上线下近十万技术人群,分别在北京、上海、广州、深圳、杭州等 12 座城市举办,覆盖腾讯、华为、网易、京东、唯品会、哔哩哔哩、美团点评、有赞、无码科技等诸多知名企业,往期的活动的讲稿及视频详见:https://opentalk.upyun.com

为促进 OpenResty 在技术圈的发展,增进 OpenResty 使用者的交流与学习,OpenResty 中国社区联合又拍云,举办 “OpenResty × Open Talk” 全国巡回沙龙,邀请业内资深的 OpenResty 技术专家,分享 OpenResty 实战经验,推动 OpenResty 开源项目的发展,促进互联网技术的教育。

二、活动时间

2019 年 01 月 12 日(周六)

三、活动地址

广东省深圳市南山区深圳虚拟大学园 R3-B 栋一楼触梦社区

四、报名地址

http://www.huodongxing.com/event/5470242889300

五、嘉宾及议题介绍

alt

分享嘉宾一:温铭 / OpenResty 软件基金会主席

OpenResty 软件基金会主席,前360开源委员会委员;现为 OpenResty Inc. 合伙人,致力于打造基于 OpenResty、Linux 内核等基础平台的企业级产品和解决方案。创业之前在互联网安全公司工作了 10 年,主要从事服务端的开发和架构,负责开发过木马云查杀、反钓鱼系统和企业安全产品。

分享主题:《 使用 OpenResty 实现 memcached server 》

OpenResty 软件基金会主席,前360开源委员会委员;现为 OpenResty Inc. 合伙人,致力于打造基于 OpenResty、Linux 内核等基础平台的企业级产品和解决方案。创业之前在互联网安全公司工作了 10 年,主要从事服务端的开发和架构,负责开发过木马云查杀、反钓鱼系统和企业安全产品。

alt

分享嘉宾二:张聪 / 又拍云首席架构师

多年 CDN 行业产品设计、技术开发和团队管理相关经验,个人技术方向集中在 Nginx、OpenResty 等高性能 Web 服务器方面,国内 OpenResty 技术早期推广者之一;目前担任又拍云内容加速部技术负责人,主导又拍云 CDN 技术平台的建设和发展。

分享主题:《 OpenResty 动态流控的几种姿势 》

本次分享主要介绍 OpenResty 上几种常用的请求限制和流量整形的方式,特别值得一提的是,详细介绍在又拍云网关层的实际应用案例,以及又拍云贡献的开源 Resty 库。

alt

分享嘉宾三:张波 / 虎牙直播运维研发架构师

目前主要负责虎牙直播运维体系的建设,主要针对 web 和后台类程序的发布、监控、运维自动化相关的运维系统的设计和开发。

分享主题:《 掘金 Nginx 日志 》

Nginx 是现在最流行的负载均衡和反向代理服务器之一,如果你是一位中小微型网站的开发运维人员,可能仅 Nginx 每天就会产生上百 M 甚至数以十 G 的日志文件,Nginx 日志被删除以前,或者我们可以想想,其中是否蕴含着位置的金矿等待挖掘?

alt

分享嘉宾四:陈乾龙 / 京东微信手 Q 业务部

负责微信、手Q抢购后台,以及 OpenResty 入口流量的网关

分享主题:《 基于 OpenResty 流量的防刷及容灾 》

本次分享主要介绍基于 OpenResty 搭建流量网关的实践以及开发过程中碰到的问题及优化。

六、现场礼品

alt

【 报名开启】2018 Elastic & 袋鼠云 & 阿里云技术沙龙(杭州)

ElasticsearchAllwang 发表了文章 • 1 个评论 • 1089 次浏览 • 2018-12-02 20:40 • 来自相关话题

互联网时代,十亿、百亿、千亿的数据日志呈井喷式增长,基于日志搜索分析的需求也越来越强烈。Elasticsearch 作为一个分布式、可扩展、实时的搜索与数据分析引擎, 在大体量的数据处理上,无论实在全文搜索,还是在结构化数据统计中,都有非常大的优势。然而在真正实践过程中海量数据如何高效采集,如何合理优化分配索引,如何规划集群,如何满足业务分析需求都是我们可能会面临的问题。 本次袋鼠云联合阿里云、Elastic 中文社区,共同邀请滴滴、有赞等行业技术专家一同分享和探讨各自领域Elastic的实践。   本次活动时间12月15日 周六人数限制100人,大家抓紧报名哈,报名链接https://meetup.elasticsearch.c ... .html。 参与线下互动还有机会获得技术书籍与精美礼品哦!!! 不出意外,这应该是2018年Elastic在杭州的最后一次沙龙,小伙伴们抓紧今年的尾巴,不放过任何学习的机会哦!!!
互联网时代,十亿、百亿、千亿的数据日志呈井喷式增长,基于日志搜索分析的需求也越来越强烈。Elasticsearch 作为一个分布式、可扩展、实时的搜索与数据分析引擎, 在大体量的数据处理上,无论实在全文搜索,还是在结构化数据统计中,都有非常大的优势。然而在真正实践过程中海量数据如何高效采集,如何合理优化分配索引,如何规划集群,如何满足业务分析需求都是我们可能会面临的问题。 本次袋鼠云联合阿里云、Elastic 中文社区,共同邀请滴滴、有赞等行业技术专家一同分享和探讨各自领域Elastic的实践。   本次活动时间12月15日 周六人数限制100人,大家抓紧报名哈,报名链接https://meetup.elasticsearch.c ... .html。 参与线下互动还有机会获得技术书籍与精美礼品哦!!! 不出意外,这应该是2018年Elastic在杭州的最后一次沙龙,小伙伴们抓紧今年的尾巴,不放过任何学习的机会哦!!!

2018 年 Elastic Advent Calendar 分享活动已结束 🎉🎉

Adventmedcl 发表了文章 • 38 个评论 • 4660 次浏览 • 2018-11-20 22:33 • 来自相关话题

活动规则很简单:   活动创意来自于圣诞节倒计时,从12月1号开始到12月25日结束。   每天固定一篇文章分享,内容长短都可。   报名现在开始,留言报名即可,留言格式: Day[日期] -  你的分享标题。 一共25篇,报满即止。   虽然是西方的节日,不过目的是为了大家一起分享,重在参与嘛。   往期活动可参考:https://elasticsearch.cn/topic/advent   活动参与名单:      如何发布? 自己选择发布文章,按你的标题在12月你的这一天发布出来就好了。
1543474748734.jpg
 

【 报名已结束】2018 Elastic & 东方航空大数据技术沙龙

Elasticsearchkennywu76 发表了文章 • 0 个评论 • 1015 次浏览 • 2018-11-14 15:21 • 来自相关话题

本次活动报名已截止,因为名额限制无法报名成功的小伙伴也不用着急,届时会议将采用zoom进行直播,在 PC、Mac、iPhone/iPad、安卓手机/平板上,点击https://www.zoomus.cn/j/1524425455 即可轻松加入观看。
本次活动报名已截止,因为名额限制无法报名成功的小伙伴也不用着急,届时会议将采用zoom进行直播,在 PC、Mac、iPhone/iPad、安卓手机/平板上,点击https://www.zoomus.cn/j/1524425455 即可轻松加入观看。

【线下活动 - 分享主题征集 - 上海】2018 Elastic & 东方航空大数据技术沙龙

活动kennywu76 发表了文章 • 5 个评论 • 1599 次浏览 • 2018-10-18 11:10 • 来自相关话题

Elastic中文社区联合东方航空公司,将于2018年12月08日,在上海举办一次线下技术交流活动。 本次活动交流内容不限于Elastic Stack,可以是搜索、推荐、机器学习、商业智能、智能运维等任意大数据相关技术的最佳应用实践。 活动分享主题正🔥征集中!    有意参与本次主题分享的同学,请发送邮件至kennywu76@outlook.com,并提供如下信息:
  1. 个人简介
  2. 分享主题
  3. 内容提纲
  为确保本次活动的紧凑,分享主题将控制在5个以内。 部分同学提交的内容可能无法安排进本次活动日程,但我们将保留所有提交的主题,并尽力安排在后续的线下活动进行分享 。   征集截止时间:  2018年11月10日 活动时间:  2018年12月08日(暂定) 活动地址:  东航城(上海市闵行区虹翔三路)   欢迎社区同学踊跃报名,期待你的分享!
Elastic中文社区联合东方航空公司,将于2018年12月08日,在上海举办一次线下技术交流活动。 本次活动交流内容不限于Elastic Stack,可以是搜索、推荐、机器学习、商业智能、智能运维等任意大数据相关技术的最佳应用实践。 活动分享主题正🔥征集中!    有意参与本次主题分享的同学,请发送邮件至kennywu76@outlook.com,并提供如下信息:
  1. 个人简介
  2. 分享主题
  3. 内容提纲
  为确保本次活动的紧凑,分享主题将控制在5个以内。 部分同学提交的内容可能无法安排进本次活动日程,但我们将保留所有提交的主题,并尽力安排在后续的线下活动进行分享 。   征集截止时间:  2018年11月10日 活动时间:  2018年12月08日(暂定) 活动地址:  东航城(上海市闵行区虹翔三路)   欢迎社区同学踊跃报名,期待你的分享!

9月8日 Elastic Meetup 北京线下沙龙报名中

活动medcl 发表了文章 • 15 个评论 • 2832 次浏览 • 2018-08-16 17:57 • 来自相关话题

meetup-beijing.png
 时间:9月8日 地点:北京市海淀区上地西路6号,联想研究院圆楼三层报告厅 活动页面:https://meetup.elasticsearch.cn/2018/beijing.html  议题:征集中,等你来投稿
  • 58到家搜索服务化实践和演进  -- 邢天宇/五八到家
  • Elasticsearch在百度aladdin日志系统的应用  -- 王鹏/百度
  • elasticsearch 在58集团信息安全部的应用 -- 亢伟楠/五八集体
  • Waterdrop:构建在Spark之上的简单高效数据处理系统  -- 霍晨/新浪网
  • 基于 ElasticSearch 构建个性化推荐和高级搜索  -- 周金阳/果壳网/在行
  报名地址:http://elasticsearch.mikecrm.com/fUqiv0T  演讲主题介绍   #1 基于 ElasticSearch 构建个性化推荐和高级搜索 [周金阳]周金阳果壳网/在行 算法工程师 使用 ES 来构建一个简易却行之有效的个性化推荐系统,以及一些高级搜索排序的实践。 搜索排序主要是分享一些机器学习工具与 ES 配合的实践心得。   #2 elasticsearch 在58集团信息安全部的应用 [亢伟楠]亢伟楠58集团 资深开发工程师 全面介绍 ELK Stack 在58集团信息安全部的落地,升级,优化以及应用。 包括如下等方面:接入背景,存储选型,性能挑战,master node以及data node优化,安全实践,高吞吐量以及低延迟搜索优化;kibana 的落地,本地化使其更方便产品、运营使用。   #3 58到家搜索服务化实践和演进 [邢天宇]邢天宇北京五八到家信息技术有限公司 java工程师 介绍58到家搜索服务体系的构建和普及,elasticsearch在到家中的各种应用以及优化等等。   #4 Waterdrop:构建在Spark之上的简单高效数据处理系统 [霍晨]霍晨新浪网,大数据研发工程师 大数据时代,随着Spark等工具的出现,数据处理能力在逐渐提升。 但是Spark本身的开发和运维具有一定的成本,为此我们开源了Waterdrop,通过配置文件的形式配置Spark任务,企图降低Spark的使用门槛,减小开发和运维成本 - 什么是waterdrop - Waterdrop架构介绍 - Waterdrop VS Spark - Waterdrop VS Logstash - Waterdrop的优势 - Waterdrop使用场景 - Roadmap   #5 elasticsearch在百度aladdin日志系统的应用 [王鹏]王鹏百度,研发工程师 背景:aladdin建库问题相关的case追查,日志统计分析,问题需要解决。 方案:使用ES(es版本: 6.0.0)做存储和检索系统,日志以json格式,抽取重要字段建索引,每天一个index,index名字包含时间后缀,保存三天内的数据;建库10个模块,每天有100亿条记录,20T左右数据;使用20个容器做集群。 效果:毫秒级返回查询结果,利用kibana实时分析建库情况,同时能方便按需提供数据给业务方。   报名地址:http://elasticsearch.mikecrm.com/fUqiv0T      Elastic 中国开发者大会 2018,阵容强大,正在火热售票中 🔥 https://conf.elasticsearch.cn/2018/shenzhen.html

【线下活动】【袋鼠云技术团队】2018-06-30-杭州-Devops运维沙龙

活动moyu 发表了文章 • 1 个评论 • 646 次浏览 • 2018-06-25 16:32 • 来自相关话题

Devops运维沙龙.png
 活动简介: 互联网时代,创新、高效、速度是企业保持核心竞争力的必要条件。DevOps被描述为“开发团队与运营团队之间更具协作性、更高效的关系”。本次活动邀请到阿里云Docker团队,ES团队、袋鼠云日志团队的同学从各个方面向大家介绍Devops的实践经验,帮助企业更敏捷、更自动化、更高效地实现持续交付。   主办方:袋鼠云 特别支持:养码场、高效运维社区、DBAPLUS、Elastic中文社区、阿里云、跨星、杭州创业大街 报名平台:活动行 直播支持:IT大咖说 活动时间:2018年6月30日13:00-17:00 活动地点:杭州市滨江区阡陌路459号聚光中心内 杭州创业大街C1-105室跨星空间   分享嘉宾:
赵汉青圆形.jpg
赵汉青 阿里巴巴集团搜索事业部 高级工程师 Elasticsearch运维实践分享 简介:2014年硕士毕业于中国科学技术大学 曾就职于思科系统(中国)研发有限公司云服务部,本次主题针对Elasticsearch集群运维:监控,诊断,优化,升级进行详细的介绍,并向大家分享阿里云Elasticsearch服务。
30943092626455172.jpg
南方   袋鼠云日志产品经理 企业日志中心建设思路   简介:企业日志中心建设是一个整体和复杂的过程,本次主题向大家分享袋鼠云日志产品在迭代过程踩过的坑,并通过什么样的方案去解决这些问题,同时向大家分享我们在天弘基金、新网银行中建设企业日志中心中的几个实践案例。
朱延生圆形.jpg
朱延生   阿里云Docker团队专家 ​Kubernetes日志实践 简介:从第一代PaaS平台cloudfoundry到现在的kubernetes容器编排平台,一直从事关于容器云平台研发及解决方案相关工作。容器时代越来越多的传统应用将会逐渐容器化,那么如何在应用容器化过程中方便快捷地自动发现和采集应用日志、如何与日志存储系统协同来高效存储和搜索应用日志将会是关键;本次分享主要介绍容器原生日志输出到容器日志的自动发现与采集,以及高性能容器日志采集部署架构及性能测试。
30363093978132308.png
直播报名
30963093980632463.jpeg
​线下报名 欢迎关注“袋鼠云技术团队”微信公众号,获取最新线下及线上活动信息。
qrcode_for_gh_cd7aa4cb729b_258.jpg
Devops运维沙龙.png