设置参数 `node.name` 可以自定义 Elasticsearch 节点的名字。 此条 Tips 由 medcl 贡献。

将ES索引从一个集群迁移到另一个集群的python脚本

发表了文章 • 2 个评论 • 1848 次浏览 • 2021-08-25 17:20 • 来自相关话题

将索引从一个集群(ip:192.168.0.1)迁移到另一个集群(ip:192.168.0.2),新集群需要配置白名单:

```yml

elasticsearch.yml

reindex.remote.whitelist: ['192.168.0.1:9200']
<br /> <br /> python
import json

import requests

import base64

迁移索引数据

def reindex(index):
print("{0} 索引正在迁移中".format(index))
jsonData = {
"source": {
"remote": {
"host": "<a href="http://192.168.0.1:9200"" rel="nofollow" target="_blank">http://192.168.0.1:9200",
"socket_timeout": "30s",
"connect_timeout": "30s",
"username": "elastic",
"password": "123456"
},
"index": index
},
"dest": {
"index": index
}
}
res = requests.post("<a href="http://192.168.0.2:9200/_reindex"" rel="nofollow" target="_blank">http://192.168.0.2:9200/_reindex", json=jsonData)
print(res.status_code)
print(res.content)

获取创建索引的语句

def getIndexDslJson(index):

username = "elastic"
password = "123456"
user_info_str = username + ":" + password
user_info = base64.b64encode(user_info_str.encode()) # 这个得到是个字节类型的数据
headers = {
"Authorization": "Basic {0}".format(user_info.decode()) # 这个就是需要验证的信息
}

res = requests.get("http://192.168.0.1:9200/{0}".format(index),
headers=headers)
print(res.status_code)
jsonIndex = json.loads(res.content)
print(jsonIndex[index])
del jsonIndex[index]['settings']['index']['creation_date']
del jsonIndex[index]['settings']['index']['provided_name']
del jsonIndex[index]['settings']['index']['uuid']
del jsonIndex[index]['settings']['index']['version']
jsonIndex[index]['settings']['index']['number_of_shards'] = 1
jsonIndex[index]['settings']['index']['number_of_replicas'] = 0
return jsonIndex[index]

创建索引

def createIndex(index, dslJson):
res = requests.put("http://192.168.0.2:9200/{0}".format(index), json=dslJson)
print(res.status_code)
print(res.content)


if name == 'main':

需要创建的索引

indexList = [
"index1_v1", "index2_v1"
]
for index in indexList:
dslJson = getIndexDslJson(index) # 获取原索引的结构
createIndex(index, dslJson) # 根据原索引结构,在新集群创建索引
reindex(index) # 将原集群索引迁移到新集群

```

使用docker安装es环境

发表了文章 • 0 个评论 • 3488 次浏览 • 2021-08-25 16:31 • 来自相关话题

创建es账号并授权


```

创建账号

adduser es

修改密码

passwd es

授权

chmod -v u+w /etc/sudoers
vim /etc/sudoers

新增

es ALL=(ALL) ALL

wq保存退出,这时候要记得将写权限收回

chmod -v u-w /etc/sudoers

```

创建docker网络

<br /> docker network create tx<br />


安装Elasticsearch


<br /> docker pull elasticsearch:6.7.1<br />

<br /> 在/home/es 中创建 config,data,plugins目录<br /> 在plugins目录中下载es相关插件,如:ik,pinyin等<br /> 在config中创建elasticsearch.yml配置,创建analysis\synonym.txt 同义词<br /> 给data配置权限 sudo chmod 777 /home/es/data/<br /> 将/home/es 目录及其子目录的用户改为es:chown -R es:root /home/es/<br />

```yml

elasticsearch.yml

cluster.name: "my-docker-cluster"
node.name: "es-node1"
network.host: 0.0.0.0
http.port: 9200
http.cors.enabled: true
http.cors.allow-origin: "*"
http.cors.allow-headers: "Authorization,X-Requested-With,Content-Length,Content-Type"
node.master: true
reindex.remote.whitelist: ['other:9200']


xpack.security.enabled: true
xpack.security.authc.api_key.enabled: true

xpack.security.transport.ssl.enabled: true

xpack.security.transport.ssl.verification_mode: certificate

xpack.security.transport.ssl.keystore.path: elastic-certificates.p12

xpack.security.transport.ssl.truststore.path: elastic-certificates.p12

<br /> <br /> <br /> <br />
docker run -d --net tx --name my_elasticsearch -p 9201:9200 -p 9301:9300 -v /home/es/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml -v /home/es/config/analysis:/usr/share/elasticsearch/config/analysis -v /home/es/config/elastic-certificates.p12:/usr/share/elasticsearch/config/elastic-certificates.p12 -v /home/es/data:/usr/share/elasticsearch/data -v /home/es/plugins:/usr/share/elasticsearch/plugins -e "discovery.type=single-node" -i -t --privileged=true elasticsearch:6.7.1
```





安装kibana


<br /> docker pull kibana:6.7.1<br />

```yml

kibana.yml配置文件

server.name: kibana
server.host: 0.0.0.0
elasticsearch.hosts: ["<a href="http://my_elasticsearch:9200"" rel="nofollow" target="_blank">http://my_elasticsearch:9200"]
i18n.locale: "zh-CN"
elasticsearch.username: "elastic"
elasticsearch.password: "123456"
xpack.graph.enabled : true
xpack.ml.enabled : true
xpack.monitoring.enabled : true
xpack.reporting.enabled : true
xpack.security.enabled : true
xpack.watcher.enabled : true
<br /> <br />
docker run -d --name kibana --net tx -p 5601:5601 -v /home/kibana/kibana.yml:/usr/share/kibana/config/kibana.yml kibana:6.7.1
```

ES 上传时跟已存在的文档进行替换或去重

Tsukiand 回复了问题 • 3 人关注 • 2 个回复 • 1338 次浏览 • 2021-08-24 20:48 • 来自相关话题

es如何先distinct某些字段再group其中的部分字段?

lijianghu 回复了问题 • 2 人关注 • 1 个回复 • 2071 次浏览 • 2021-08-23 18:04 • 来自相关话题

elasticsearch threadpool 每天定时出现load高

Charele 回复了问题 • 2 人关注 • 1 个回复 • 1293 次浏览 • 2021-08-21 13:51 • 来自相关话题

Elastic:如何使用 Elasticsearch PHP 客户端创建简单的搜索引擎

liuxg 发表了文章 • 0 个评论 • 1186 次浏览 • 2021-08-20 11:32 • 来自相关话题

如果你正在寻找快速、强大的搜索功能,Elasticsearch 是合乎逻辑的选择。 这种可扩展的搜索引擎可以执行快速、高效的全文搜索和其他复杂查询。 你可以使用 PHP 创建一个简单的搜索引擎来演示 Elasticsearch 的功能。 在本教程中,我们将通过使用 Elasticsearch 构建一个简单的搜索引擎,向你展示如何使用 PHP 创建和索引文档。

原文链接:https://blog.csdn.net/UbuntuTo ... 02174
如果你正在寻找快速、强大的搜索功能,Elasticsearch 是合乎逻辑的选择。 这种可扩展的搜索引擎可以执行快速、高效的全文搜索和其他复杂查询。 你可以使用 PHP 创建一个简单的搜索引擎来演示 Elasticsearch 的功能。 在本教程中,我们将通过使用 Elasticsearch 构建一个简单的搜索引擎,向你展示如何使用 PHP 创建和索引文档。

原文链接:https://blog.csdn.net/UbuntuTo ... 02174

关于nested多层嵌套,如何让子nested搜索按分组来搜

star_xu 回复了问题 • 2 人关注 • 5 个回复 • 1332 次浏览 • 2021-09-10 09:26 • 来自相关话题

es7.6.2 排序时间过长问题

xieqiao 回复了问题 • 3 人关注 • 2 个回复 • 1667 次浏览 • 2021-08-19 20:53 • 来自相关话题

关于elasticsearch 5.4版本高亮查询不生效的问题

tongchuan1992 回复了问题 • 2 人关注 • 1 个回复 • 2072 次浏览 • 2021-08-22 14:51 • 来自相关话题

关于使用elasticsearch nested类型查询多个重复匹配的问题

BetterLevi 回复了问题 • 2 人关注 • 3 个回复 • 2231 次浏览 • 2021-08-20 19:15 • 来自相关话题

关于term query查询的问题

BetterLevi 回复了问题 • 2 人关注 • 1 个回复 • 1458 次浏览 • 2021-08-17 16:03 • 来自相关话题

Elastic:Elastic Stack 8.0.0-alpha1 发布

liuxg 发表了文章 • 0 个评论 • 1220 次浏览 • 2021-08-17 00:03 • 来自相关话题

虽然 7.x 次要版本继续提供一个又一个功能,但我们很高兴地宣布 8.0.0 的第一个公开 alpha。

在我们继续这个令人兴奋的消息之前,我们想提醒你这是一个 alpha 版本。 我们建议你与生产保持一定的距离。 不保证 8.0.0-alpha1 将与其他预览版本或 8.0.0 通用版 (GA) 兼容。

此外,8.0.0-alpha1 将不会在 Elastic Cloud 上可用。 但是,我们希望在未来几个月内提供预览版。
https://elasticstack.blog.csdn ... 31726
虽然 7.x 次要版本继续提供一个又一个功能,但我们很高兴地宣布 8.0.0 的第一个公开 alpha。

在我们继续这个令人兴奋的消息之前,我们想提醒你这是一个 alpha 版本。 我们建议你与生产保持一定的距离。 不保证 8.0.0-alpha1 将与其他预览版本或 8.0.0 通用版 (GA) 兼容。

此外,8.0.0-alpha1 将不会在 Elastic Cloud 上可用。 但是,我们希望在未来几个月内提供预览版。
https://elasticstack.blog.csdn ... 31726

es单机节点服务自动被kill掉

just_finy 回复了问题 • 3 人关注 • 2 个回复 • 2722 次浏览 • 2021-08-17 11:58 • 来自相关话题

为啥每次查看pending tasks时,executing为true的只有一个?

回复

a593700624 回复了问题 • 2 人关注 • 1 个回复 • 1421 次浏览 • 2021-08-16 11:36 • 来自相关话题

es 低峰期间大量慢查询

liujiacheng 回复了问题 • 3 人关注 • 2 个回复 • 1151 次浏览 • 2021-08-17 09:40 • 来自相关话题