使用 shuf 来打乱一个文件中的行或是选择文件中一个随机的行。

es集群下ik 词库热更新时一致性

Elasticsearch | 作者 jasonDepp | 发布于2021年05月20日 | 阅读数:2221

es集群配置的ik 在热更新的时候出现了问题,我使用的是etag作为更新标记,多节点读取更新标的的时候,会出现只有其中一个节点的ik词库加载了最新的分词,所以想问问在增量更新时如何保证每个节点的ik词库是一致?
已邀请:

laoyang360 - 《一本书讲透Elasticsearch》作者,Elastic认证工程师 [死磕Elasitcsearch]知识星球地址:http://t.cn/RmwM3N9;微信公众号:铭毅天下; 博客:https://elastic.blog.csdn.net

赞同来自:

这里的最佳实践包括各个节点都需要配置ik分制器。
尤其是数据节点。
同时我们推荐修改Ik分词源码的方式。借助数据库来更新词典这种方式 验证是效率还是可以的。

God_lockin

赞同来自:

是否考虑外置的中心分词器?只要中心分词器的词库更新 + 负载能支持,所有数据的存/取分词结果都有保证了

要回复问题请先登录注册