使用 shuf 来打乱一个文件中的行或是选择文件中一个随机的行。

社区日报 第1271期 (2021-07-5）

1.更强大的消息队列：Apache Pulsar 在日志场景的最佳实践
https://www.bilibili.com/video/BV1iK4y1g7fs
2. Apache Pulsar 基于Log4j2+Kafka+ELK 实现日志的快速检索
https://mp.weixin.qq.com/s/lxrkJ_MgfIW-p6C6LyWWEQ
 
3.使用Heartbeat进行Uptime监控
https://www.cnblogs.com/sanduz ... .html
 
编辑：cyberdak
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
继续阅读 »
1.更强大的消息队列：Apache Pulsar 在日志场景的最佳实践
https://www.bilibili.com/video/BV1iK4y1g7fs
2. Apache Pulsar 基于Log4j2+Kafka+ELK 实现日志的快速检索
https://mp.weixin.qq.com/s/lxrkJ_MgfIW-p6C6LyWWEQ
 
3.使用Heartbeat进行Uptime监控
https://www.cnblogs.com/sanduz ... .html
 
编辑：cyberdak
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup 收起阅读 »
 社区日报
cyberdak 发表于 : 2021-07-05 19:56 评论 (0)

社区日报 第1270期 (2021-07-02）

1、Elasticsearch Python客户端实操指南
https://towardsdatascience.com ... 18380
2、Elasticsearch 性能优化实战
https://www.scalyr.com/blog/im ... mance
3、Elasticsearch 写入性能优化
https://aws.amazon.com/cn/prem ... ance/
 
编辑：铭毅天下
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
 
继续阅读 »
1、Elasticsearch Python客户端实操指南
https://towardsdatascience.com ... 18380
2、Elasticsearch 性能优化实战
https://www.scalyr.com/blog/im ... mance
3、Elasticsearch 写入性能优化
https://aws.amazon.com/cn/prem ... ance/
 
编辑：铭毅天下
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
  收起阅读 »
 社区日报
laoyang360 发表于 : 2021-07-02 21:34 评论 (0)

社区日报 第1270期 (2021-07-01）

1.如何平滑切换线上Elasticsearch索引
https://mp.weixin.qq.com/s/vAnjpBdb7d54QlwcUP9Dww
2.使用Prometheus和Fluentd摄取指标和日志并存储到ES监控Kubernetes
https://www.elastic.co/blog/mo ... uentd
3.如何让用户匿名访问 Kibana 中的 Dashboard
https://elasticstack.blog.csdn ... 52293

编辑：金桥
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
继续阅读 »
1.如何平滑切换线上Elasticsearch索引
https://mp.weixin.qq.com/s/vAnjpBdb7d54QlwcUP9Dww
2.使用Prometheus和Fluentd摄取指标和日志并存储到ES监控Kubernetes
https://www.elastic.co/blog/mo ... uentd
3.如何让用户匿名访问 Kibana 中的 Dashboard
https://elasticstack.blog.csdn ... 52293

编辑：金桥
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup 收起阅读 »
 社区日报
白衬衣 发表于 : 2021-07-01 16:04 评论 (0)

社区日报 第1258期 (2021-05-231）

1.手把手教你构建一个生产环境适用的es集群
https://www.cncf.io/blog/2021/ ... tion/

2.基于Filebeat的日志采集服务设计与实践
https://dun.163.com/news/p/f59 ... b06c2

3.云原生架构下的日志平台方案
https://cloud.tencent.com/deve ... 58278

编辑：cyberdak
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup


杭州meetup活动开始拉
微信图片_20210531141815.jpg



 
继续阅读 »
1.手把手教你构建一个生产环境适用的es集群
https://www.cncf.io/blog/2021/ ... tion/

2.基于Filebeat的日志采集服务设计与实践
https://dun.163.com/news/p/f59 ... b06c2

3.云原生架构下的日志平台方案
https://cloud.tencent.com/deve ... 58278

编辑：cyberdak
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup


杭州meetup活动开始拉
微信图片_20210531141815.jpg



  收起阅读 »
 社区日报
cyberdak 发表于 : 2021-07-01 16:04 评论 (0)

社区日报 第1256期 (2021-05-24）

1.基于腾讯云 Elasticsearch 搭建 QQ 邮箱全文检索
https://www.infoq.cn/article/uybdhohjdkj8tezdqhlx

2.酒店o2o搜索案例以及搜索指定区域内的酒店
https://blog.csdn.net/qq_27384 ... 22647

3.携程基于 ElasticSearch 构建的CrateDb在机票BI的实践
https://www.infoq.cn/article/pym3fdyeoz0ovbpfhjed




编辑：cyberdak
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
继续阅读 »
1.基于腾讯云 Elasticsearch 搭建 QQ 邮箱全文检索
https://www.infoq.cn/article/uybdhohjdkj8tezdqhlx

2.酒店o2o搜索案例以及搜索指定区域内的酒店
https://blog.csdn.net/qq_27384 ... 22647

3.携程基于 ElasticSearch 构建的CrateDb在机票BI的实践
https://www.infoq.cn/article/pym3fdyeoz0ovbpfhjed




编辑：cyberdak
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup 收起阅读 »
 社区日报
cyberdak 发表于 : 2021-07-01 16:04 评论 (0)

社区日报 第1269期 (2021-06-29）

1. 使用ElasticSearch构建一个完整的搜索引擎
https://nladuo.github.io/2018/ ... 258E/
2. 使用 Elasticsearch 实现博客站内搜索
https://imququ.com/post/elasticsearch.html
3. FastAPI 完成对 Elasticsearch 的异步数据插入
https://blog.csdn.net/qq_45668 ... 29750

编辑：wt
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
继续阅读 »
1. 使用ElasticSearch构建一个完整的搜索引擎
https://nladuo.github.io/2018/ ... 258E/
2. 使用 Elasticsearch 实现博客站内搜索
https://imququ.com/post/elasticsearch.html
3. FastAPI 完成对 Elasticsearch 的异步数据插入
https://blog.csdn.net/qq_45668 ... 29750

编辑：wt
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup 收起阅读 »
 社区日报
elk123 发表于 : 2021-06-29 20:41 评论 (0)

社区日报 第1268期 (2021-06-26）

1. 适配elasticsearch的HanLP分词器
https://github.com/KennFalcon/ ... hanlp
2. Elasticsearch地理位置查询
https://juejin.cn/post/6953547277172473892
3. 字节跳动联邦学习
https://www.infoq.cn/article/5RmeSy204ddvof0pMHyJ

编辑：wt
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
继续阅读 »
1. 适配elasticsearch的HanLP分词器
https://github.com/KennFalcon/ ... hanlp
2. Elasticsearch地理位置查询
https://juejin.cn/post/6953547277172473892
3. 字节跳动联邦学习
https://www.infoq.cn/article/5RmeSy204ddvof0pMHyJ

编辑：wt
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup 收起阅读 »
 社区日报
elk123 发表于 : 2021-06-26 21:17 评论 (0)

【北京站】Elastic中文社区 & 阿里云 Meetup 2021-07-10

banner 

活动介绍

本次Meetup北京站由阿里云和Elastic联合举办，邀请多位资深技术专家探讨在搜索、安全、内核优化等方向的实践与创新，共同分享 Elasticsearch技术大咖的一线经验与深度思考。

报名方式

链接：https://www.bagevent.com/event/7567032

活动时间

2021年07月10日 13:00-18:00

活动地址

北京朝阳区望京阿里中心A座5F-14岳麓书院

活动流程

13:00，观众入场签到
13:15 - 13:30，Elasticsearch百人大作战二期正式启动
13:30 - 14:10，Elastic Stack on Kubernetes 实践方案
        吴斌
        Elastic中文社区副主席
14:10 - 14:50，Elasticsearch 在字节跳动的内核优化实践
        张超
        字节跳动，负责 Elasticsearch 的内核优化工作
14:50 - 15:30，云原生下的超大规模es集群运维
        吴迪
        阿里巴巴集团高级技术专家

15:30 - 16:00，茶歇
16:00 - 16:40，基于canal和debezium的企业级数据实时同步
        王明亚
        阿里云DataWorks数据集成技术专家
16:40 - 17:20，Delta Lake 数据湖和 Lakehouse 架构介绍以及在 ES 中的应用
        刘林宏
        先后在 Intel, Baidu, Databricks 从事 Spark 相关研发工作
17:20 - 17:40，抽奖，合影
17:40，活动结束
继续阅读 »

banner 

活动介绍

本次Meetup北京站由阿里云和Elastic联合举办，邀请多位资深技术专家探讨在搜索、安全、内核优化等方向的实践与创新，共同分享 Elasticsearch技术大咖的一线经验与深度思考。

报名方式

链接：https://www.bagevent.com/event/7567032

活动时间

2021年07月10日 13:00-18:00

活动地址

北京朝阳区望京阿里中心A座5F-14岳麓书院

活动流程

13:00，观众入场签到
13:15 - 13:30，Elasticsearch百人大作战二期正式启动
13:30 - 14:10，Elastic Stack on Kubernetes 实践方案
        吴斌
        Elastic中文社区副主席
14:10 - 14:50，Elasticsearch 在字节跳动的内核优化实践
        张超
        字节跳动，负责 Elasticsearch 的内核优化工作
14:50 - 15:30，云原生下的超大规模es集群运维
        吴迪
        阿里巴巴集团高级技术专家

15:30 - 16:00，茶歇
16:00 - 16:40，基于canal和debezium的企业级数据实时同步
        王明亚
        阿里云DataWorks数据集成技术专家
16:40 - 17:20，Delta Lake 数据湖和 Lakehouse 架构介绍以及在 ES 中的应用
        刘林宏
        先后在 Intel, Baidu, Databricks 从事 Spark 相关研发工作
17:20 - 17:40，抽奖，合影
17:40，活动结束
收起阅读 »
liaosy 发表于 : 2021-06-26 15:03 评论 (3)

社区日报 第1268期 (2021-06-25）

1.结合 Elasticsearch 词干分析器和同义词来提高搜索相关性
https://www.elastic.co/blog/im ... onyms
2.ElastricSearch存储原理
https://mp.weixin.qq.com/s/0Roq7Xyh6jJ6I8atnKBXfw
3.运用 Filebeat 来对微服务 API 进行分析
https://elasticstack.blog.csdn ... 45104

编辑：金桥
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
继续阅读 »
1.结合 Elasticsearch 词干分析器和同义词来提高搜索相关性
https://www.elastic.co/blog/im ... onyms
2.ElastricSearch存储原理
https://mp.weixin.qq.com/s/0Roq7Xyh6jJ6I8atnKBXfw
3.运用 Filebeat 来对微服务 API 进行分析
https://elasticstack.blog.csdn ... 45104

编辑：金桥
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup 收起阅读 »
 社区日报
白衬衣 发表于 : 2021-06-25 14:32 评论 (0)

户匿名访问 Kibana 中的 Dashboard

在我之前的文章 “如何让匿名的用户访问受限的资源” 中，我介绍了如何让开发者在不输入用户名和密码的情况下访问 Elasticsearch 集群中的索引（ES 集群配置有用户名及密码）。在很多的场合这个是非常有用的。针对 Kibana，我们可能也会遇到同样的情况。比如我们有一个很好的 Dashboard，我们想分析这个 Dashboard 给没有访问权限的人进行查看。当然这种也使用大屏幕 Canvas。我们可以让一个实时动态的 Canvas 给大众访问。在这种情况下，我们必须使用一种匿名的访问方式才能完成。在今天的文章中，我来介绍如何完成这个。

原文链接：https://blog.csdn.net/UbuntuTo ... 52293
继续阅读 »
在我之前的文章 “如何让匿名的用户访问受限的资源” 中，我介绍了如何让开发者在不输入用户名和密码的情况下访问 Elasticsearch 集群中的索引（ES 集群配置有用户名及密码）。在很多的场合这个是非常有用的。针对 Kibana，我们可能也会遇到同样的情况。比如我们有一个很好的 Dashboard，我们想分析这个 Dashboard 给没有访问权限的人进行查看。当然这种也使用大屏幕 Canvas。我们可以让一个实时动态的 Canvas 给大众访问。在这种情况下，我们必须使用一种匿名的访问方式才能完成。在今天的文章中，我来介绍如何完成这个。

原文链接：https://blog.csdn.net/UbuntuTo ... 52293 收起阅读 »
liuxg 发表于 : 2021-06-23 17:34 评论 (0)

Beats：运用 Filebeat 来对微服务 API 进行分析

在之前的文章 “Logstash：使用 ELK 堆栈进行 API 分析”，我展示了如何使用 Logstash 的 http_poller input plugin 来对微服务的 API 数据进行分析。如果我们只是为了对微服务的数据采集使用 Logstash，感觉有些 Logstash 有些大材小用了，比较 Logstash 的部署还是蛮耗资源的。相比较而言，我们可以使用 Filebeat 的 HTTP JSON input 来对微服务的数据进行采集。我们知道 Beats 的架构是属于一种轻量级的部署。可以直接运用于客户端，或者需要采集的服务器中。


原文链接：https://blog.csdn.net/UbuntuTo ... 45104
继续阅读 »
在之前的文章 “Logstash：使用 ELK 堆栈进行 API 分析”，我展示了如何使用 Logstash 的 http_poller input plugin 来对微服务的 API 数据进行分析。如果我们只是为了对微服务的数据采集使用 Logstash，感觉有些 Logstash 有些大材小用了，比较 Logstash 的部署还是蛮耗资源的。相比较而言，我们可以使用 Filebeat 的 HTTP JSON input 来对微服务的数据进行采集。我们知道 Beats 的架构是属于一种轻量级的部署。可以直接运用于客户端，或者需要采集的服务器中。


原文链接：https://blog.csdn.net/UbuntuTo ... 45104 收起阅读 »
liuxg 发表于 : 2021-06-23 13:52 评论 (0)

Elasticsearch：Ingest Pipeline 实践

相比较 Logstash 而言，由于其丰富的 processors 而受到越来越多人的喜欢。最重要的一个优点就是它基于 Elasticsearch 极具可拓展性和维护性而受到开发者的喜欢。我在之前创建了很多关于 Ingest Pipeline 的文章。你可以参阅文章 “Elastic：菜鸟上手指南” 中的 Ingest pipeline 章节。

在今天的文章中，我想同一个一个例子来展示两种创建 Ingest Pipeline 的方法尽管在我之前的文章中都有介绍：

通过 API 的方法来创建
通过 Kibana 的界面来进行创建
————————————————
原文链接：https://blog.csdn.net/UbuntuTo ... 33366
继续阅读 »
相比较 Logstash 而言，由于其丰富的 processors 而受到越来越多人的喜欢。最重要的一个优点就是它基于 Elasticsearch 极具可拓展性和维护性而受到开发者的喜欢。我在之前创建了很多关于 Ingest Pipeline 的文章。你可以参阅文章 “Elastic：菜鸟上手指南” 中的 Ingest pipeline 章节。

在今天的文章中，我想同一个一个例子来展示两种创建 Ingest Pipeline 的方法尽管在我之前的文章中都有介绍：

通过 API 的方法来创建
通过 Kibana 的界面来进行创建
————————————————
原文链接：https://blog.csdn.net/UbuntuTo ... 33366 收起阅读 »
liuxg 发表于 : 2021-06-22 21:29 评论 (0)

社区日报 第1267期 (2021-06-21）

1.使用FAISS搭配elasticsearch增加向量搜索
https://zhuanlan.zhihu.com/p/260023678

2. 基于ElasticSearch 实现 join 查询
https://segmentfault.com/a/1190000004468130

3.ElasticSearch 和 LSM 树的写入模型
https://www.cnblogs.com/luxiaoxun/p/13025019.html

编辑：cyberdak
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
继续阅读 »
1.使用FAISS搭配elasticsearch增加向量搜索
https://zhuanlan.zhihu.com/p/260023678

2. 基于ElasticSearch 实现 join 查询
https://segmentfault.com/a/1190000004468130

3.ElasticSearch 和 LSM 树的写入模型
https://www.cnblogs.com/luxiaoxun/p/13025019.html

编辑：cyberdak
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup 收起阅读 »
 社区日报
cyberdak 发表于 : 2021-06-21 20:47 评论 (0)

社区日报 第1266期 (2021-6-20)

1.全文搜索 PostgreSQL 或 ElasticSearch。
https://fueled.com/the-cache/p ... arch/
2.在树莓派上部署 Elasticsearch。
https://schneefux.xyz/tech/ela ... rypi/
3.种树最好的时间是20年前。 建半导体代工厂最好的时间是5年前。
https://www.theregister.com/20 ... _may/
 
编辑：至尊宝
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
继续阅读 »
1.全文搜索 PostgreSQL 或 ElasticSearch。
https://fueled.com/the-cache/p ... arch/
2.在树莓派上部署 Elasticsearch。
https://schneefux.xyz/tech/ela ... rypi/
3.种树最好的时间是20年前。 建半导体代工厂最好的时间是5年前。
https://www.theregister.com/20 ... _may/
 
编辑：至尊宝
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup 收起阅读 »
 社区日报
至尊宝 发表于 : 2021-06-21 09:47 评论 (0)

社区日报 第1264期 (2021-06-18）

1、如何设置分片数更为合理？
https://blog.trifork.com/2014/ ... ards/
2、Elasticsearch 如何与关系型数据库同步数据？
https://dzone.com/articles/how ... ional
3、Elasticsearch 同义词插件
https://github.com/bells/elast ... nonym
 
编辑：铭毅天下
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup
继续阅读 »
1、如何设置分片数更为合理？
https://blog.trifork.com/2014/ ... ards/
2、Elasticsearch 如何与关系型数据库同步数据？
https://dzone.com/articles/how ... ional
3、Elasticsearch 同义词插件
https://github.com/bells/elast ... nonym
 
编辑：铭毅天下
归档：https://ela.st/cn-daily-all
订阅：https://ela.st/cn-daily-sub
沙龙：https://ela.st/cn-meetup 收起阅读 »
 社区日报
laoyang360 发表于 : 2021-06-18 22:06 评论 (0)
Copyright © 2024 · CC BY-NC-SA 3.0

本站服务器及带宽由 提供赞助