搜索客社区日报 第1780期 (2024-01-24)
社区日报 • kin122 发表了文章 • 0 个评论 • 3559 次浏览 • 2024-01-24 16:01
https://zhuanlan.zhihu.com/p/678234806
2.ClickHouse、Doris及ElasticSearch性能压测
https://zhuanlan.zhihu.com/p/678885098
3.日志解析神器——Logstash中的Grok过滤器使用详解
https://mp.weixin.qq.com/s/-wHeZ6NvXr8syccvKqz4OQ
编辑:kin122
更多资讯:http://news.searchkit.cn
【搜索客社区日报】 第1777期 (2024-01-22)
社区日报 • yuebancanghai 发表了文章 • 0 个评论 • 3903 次浏览 • 2024-01-22 13:33
https://blog.csdn.net/laoyang3 ... 12946
2、Elasticsearch 对数据进行预处理
https://blog.csdn.net/cr7258/a ... 59631
3、阿里巴巴长文档推荐系统在企业数字化中的应用
https://zhuanlan.zhihu.com/p/677525998
编辑:yuebancanghai
更多资讯:http://news.searchkit.cn
【搜索客社区日报】第1776期 (2024-01-19)
社区日报 • laoyang360 发表了文章 • 0 个评论 • 2512 次浏览 • 2024-01-19 13:37
https://medium.com/searchblox/ ... 313d6
2、使用routing.allocation.same_shard.host时Elasticsearch黄色健康状态处理方案探讨
https://toughcoding.net/elasti ... -host
3、关于重建索引 API 使用和故障排查的 3 个最佳实践
https://www.elastic.co/cn/blog ... x-api
编辑:铭毅天下
更多资讯:http://news.searchkit.cn
【搜索客社区日报】第1775期 (2024-01-18)
社区日报 • Se7en 发表了文章 • 0 个评论 • 2181 次浏览 • 2024-01-18 08:18
https://www.youtube.com/watch?v=c2ytcVh1kb8
2.将 LlamaIndex 与 Elasticsearch 结合使用以实现 RAG(需要梯子)
https://medium.com/%40zhaozhim ... daeef
3.Elastic Observability ES|QL Demo(需要梯子)
https://www.youtube.com/watch?v=vm0pBWI2l9c
4.Elasticsearch 写操作剖析
https://www.cnblogs.com/hapjin/p/9821073.html
编辑:Se7en
更多资讯:http://news.searchkit.cn
对于update操作多,更新频繁的es索引,有没有什么可以性能调优的参数?
Elasticsearch • kin122 回复了问题 • 3 人关注 • 1 个回复 • 2602 次浏览 • 2024-01-17 14:20
搜索客社区日报 第1774期 (2024-01-17)
社区日报 • kin122 发表了文章 • 0 个评论 • 2247 次浏览 • 2024-01-17 14:17
https://mp.weixin.qq.com/s/7Ccflrl_AJoExAVTIc5r0A
2.Langchain 与 Elasticsearch:创新数据检索的融合实战
https://mp.weixin.qq.com/s/km4qRRuG65aieArB2s27iA
3.Elasticsearch:是时候离开了! - 在 Elasticsearch 文档上使用 TTL
https://blog.csdn.net/UbuntuTo ... 52898
编辑:kin122
更多资讯:http://news.searchkit.cn
请问基于es数组进行query_string查询时,如何在highlight中返回最佳匹配的数据?
Elasticsearch • Ombres 回复了问题 • 2 人关注 • 2 个回复 • 2297 次浏览 • 2024-01-17 13:37
【搜索客社区日报】第1773期 (2024-01-16)
社区日报 • God_lockin 发表了文章 • 0 个评论 • 2239 次浏览 • 2024-01-16 16:43
https://github.com/practical-t ... rning
2. 一个可以突破ChatGPT一些限制使用的工程(需要梯子)
https://github.com/pandora-next/deploy
3. 阿里出的AI换脸工具,理论上妙鸭就是以它做核心的(需要梯子)
https://github.com/modelscope/facechain
编辑:斯蒂文
更多资讯:http://news.searchkit.cn
星球:https://t.zsxq.com/16RgqrvdZ
【INFINI 动手实战训练营-北京站】海量数据不再头疼,使用 Easysearch 来实现降本增效,硬件直接减半
Easysearch • liaosy 发表了文章 • 0 个评论 • 2260 次浏览 • 2024-01-16 00:44
您是否遇到过以下问题?
- 当前部分原始日志压缩归档存放到 HDFS,但不能直接灵活查询;
- 使用 Elasticsearch 存储日志,开销较大,硬件资源投入较高;
- 当前日志集群不断增长,存储接近 PB 量级,且还在不断接入新的数据;
- 希望降低日志保留成本,同时满足按需查询的需求,平衡性能和成本;
- 集群规模大,分片过多,管理存在挑战,希望降低维护成本等。
针对使用 Elasticsearch 来作为日志存储的以上痛点,INFINI Labs 推出的 Easysearch 提供了若干存储优化的解决方案:
- 优化措施一:集成高效压缩算法
Easysearch 采用业界最先进的 Zstd 压缩算法,高压缩率,低 CPU 消耗,针对 Doc Values、Store 字段进行高度无缝压缩,不影响正常的使用体验,可以降低 50% 的存储开销。 - 优化措施二:无缝去除 Source 字段
Easysearch 利用 DocValues 和 BKD Tree 来重建 Source,合并冗余存储,不影响日志的正常检索和查看,可以大幅降低存储需求,在一些指标场景,甚至可以降低 80% 的存储开销。 - 优化措施三:归档数据直接检索
您是否还在通过关闭索引来降低海量数据带来的集群压力,或者您是否已经将快照备份直接放到 S3 或者 HDFS 中了,现在通过 Easysearch 提供的归档数据的直接检索能力,可以进一步释放本地节点的磁盘空间,进而释放物理机器资源,并根据需要按需查询归档索引,而不需要恢复归档再查询,简单方便。
通过以上优化举措,我们可以用不到一半的机器即可承载原有的数据,并且结合 Easysearch 内置其它的内核优化,索引和查询性能也将大幅提升,同时集群更加稳定可靠。
快来与 INFINI Labs 的技术专家面对面,第一时间了解极限实验室的发布最新产品和功能特性,通过动手实战,快速掌握最前沿的搜索技术,并用于实际项目中。活动免费,欢迎报名参加。
活动时间:2024 年 1 月 18 日 13:30~17:30
活动地点:北京市海淀区 Wework 辉煌时代大厦 3 楼 3E 会议室
分享议题
- Easysearch 总体介绍及搭建实战
- Easysearch 存储优化原理与实践
- Elasticsearch -> Easysearch 在线迁移实操
- Console、Gateway、Loadgen 及 INFINI Labs 其他工具介绍与使用
参会提示
- 请务必自备电脑(Windows 系统环境请提前安装好 Linux 虚拟机)
- 请提前在 INFINI Labs 官网下载对应平台最新安装包(INFINI Easysearch、INFINI Gateway、INFINI Console)
- 下载地址:[https://www.infinilabs.com/download](https://www.infinilabs.com/download)
- 如有任何疑问可添加 INFINI Labs 小助手(微信号: INFINI-Labs)进行联系
![微信号: INFINI-Labs](https://www.infinilabs.com/img ... de.png)
活动报名
名额有限,对 Easysearch 搜索引擎感兴趣的朋友们速度报名(扫描海报中二维码或点击此处 [链接](https://www.huodongxing.com/event/6733634533000) 即可免费报名)。
ElasticSearch如何搜索数组?
Elasticsearch • martindu 回复了问题 • 5 人关注 • 2 个回复 • 23349 次浏览 • 2024-01-15 11:30
【搜索客社区日报】 第1772期 (2024-01-15)
社区日报 • yuebancanghai 发表了文章 • 0 个评论 • 1694 次浏览 • 2024-01-15 09:59
https://mp.weixin.qq.com/s/SszyZ2Pjs6nuw0bpPyJRhA
2、Elasticsearch 读写原理、分片设计和性能优化
https://blog.csdn.net/huaxinzh ... 72294
3、Elasticsearch 跨集群数据迁移
https://blog.csdn.net/weixin_3 ... 68168
4、Elasticsearch 中实现自动完成功能 ngram
https://zhuanlan.zhihu.com/p/666108050
5、Langchain 与 Elasticsearch:创新数据检索的融合实战
https://mp.weixin.qq.com/s/km4qRRuG65aieArB2s27iA
编辑:yuebancanghai
更多资讯:http://news.searchkit.cn
【搜索客社区日报】第1771期 (2024-01-11)
社区日报 • Se7en 发表了文章 • 0 个评论 • 2579 次浏览 • 2024-01-11 09:12
https://juejin.cn/post/7286508785104732194
2.Elasticsearch 大型集群状态 – 如何发现、解决和预防
https://opster.com/guides/elas ... rtem/
3.ElasticON EMEA:基于eBPF开箱即用的实时全栈分析(需要梯子)
https://www.youtube.com/watch?v=RCDARiYJMDQ
编辑:Se7en
更多资讯:http://news.searchkit.cn
【搜索客社区日报】第1770期 (2024-01-09)
社区日报 • God_lockin 发表了文章 • 2 个评论 • 2074 次浏览 • 2024-01-10 23:31
https://medium.com/simform-eng ... 8174f
2. 用ELK alert让你的系统监控更猴赛雷(需要梯子)
https://medium.com/%40aspirin4 ... 94461
3. 官方的GPT store还没出之前,可以用这个先凑合一下(需要梯子)
https://gptstore.ai/gpts
编辑:斯蒂文
更多资讯:http://news.searchkit.cn
filebeat采集mysql的slowlog时, 缺少 use [schema] 行时, 怎么从历史行中继承字段值?
回复Beats • tithonus 发起了问题 • 1 人关注 • 0 个回复 • 2505 次浏览 • 2024-01-10 12:14