Q:非洲食人族的酋长吃什么?

社区日报 第687期 (2019-08-01)

1.使用canal有序同步MySQL数据到ES
http://t.cn/AiYA5DfC
2.深入分析Elastic Search的写入过程
http://t.cn/AiY7Z1uB
3.怎么解决Skywalking对应的ES的CPU高的问题
http://t.cn/AiYA5rNW

编辑:金桥
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.使用canal有序同步MySQL数据到ES
http://t.cn/AiYA5DfC
2.深入分析Elastic Search的写入过程
http://t.cn/AiY7Z1uB
3.怎么解决Skywalking对应的ES的CPU高的问题
http://t.cn/AiYA5rNW

编辑:金桥
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第686期 (2019-07-31)

1.倒排索引,正排索引与 Lucene
http://t.cn/AiYZgtrN
2.基于 MySQL Binlog 的 Elasticsearch 数据同步实践
http://t.cn/AilL7Q05
3.Elasticsearch 集群优化 之 海量时序数据处理
http://t.cn/AiYZe8bE
 
编辑:江水
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.倒排索引,正排索引与 Lucene
http://t.cn/AiYZgtrN
2.基于 MySQL Binlog 的 Elasticsearch 数据同步实践
http://t.cn/AilL7Q05
3.Elasticsearch 集群优化 之 海量时序数据处理
http://t.cn/AiYZe8bE
 
编辑:江水
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

ES6.8权限使用配置


概述
ES的权限控制一直ES使用中的一个问题,因为官方之前一直未免费安全性功能。公司要不选择使用其他插件来解决,要不就是只在内网使用。现在在ES6.8及以后版本ES将部分安全性功能免费开放了, 现在我们就6.8版本的【基于角色的访问控制】进行操作、验证。
1、下载安装ELK6.8版本(此处省略)
ES在6.8以后发布的版本才有(7.0是发布在6.8之前的)
2、修改ES配置文件 elasticsearch.yml
在配置文件中添加:
xpack.security.enabled: true
基础版本的安全性功能是默认关闭的。
然后启动ES
./elasticsearch -d
3、设置内置用户密码
参考:内置用户
./bin/elasticsearch-setup-passwords interactive
这里设置的密码要记住,后面会使用到。我们设置简单的密码:123456(密码不能少于6位)
如果是Windows请使用CMD命令行执行
按照提示设置内置用户密码
4、设置kibana用户名密码
在kibana的配置文件kibana.yml里面添加
elasticsearch.username: "kibana"
elasticsearch.password: "123456"
5、然后启动kibana
启动kibana就可以使用用户名与密码进行访问。

Image.png


6、设置logstash用户名和密码
打开配置文件conf,在output中的elasticsearch中添加user、password
例:
output {
elasticsearch {
hosts => ["10.68.24.136:9200","10.68.24.137:9200"]
index => "%{[indexName]}-%{+YYYY.MM.dd}"
user => "logstash_system"
password => "123456"
}
继续阅读 »

概述
ES的权限控制一直ES使用中的一个问题,因为官方之前一直未免费安全性功能。公司要不选择使用其他插件来解决,要不就是只在内网使用。现在在ES6.8及以后版本ES将部分安全性功能免费开放了, 现在我们就6.8版本的【基于角色的访问控制】进行操作、验证。
1、下载安装ELK6.8版本(此处省略)
ES在6.8以后发布的版本才有(7.0是发布在6.8之前的)
2、修改ES配置文件 elasticsearch.yml
在配置文件中添加:
xpack.security.enabled: true
基础版本的安全性功能是默认关闭的。
然后启动ES
./elasticsearch -d
3、设置内置用户密码
参考:内置用户
./bin/elasticsearch-setup-passwords interactive
这里设置的密码要记住,后面会使用到。我们设置简单的密码:123456(密码不能少于6位)
如果是Windows请使用CMD命令行执行
按照提示设置内置用户密码
4、设置kibana用户名密码
在kibana的配置文件kibana.yml里面添加
elasticsearch.username: "kibana"
elasticsearch.password: "123456"
5、然后启动kibana
启动kibana就可以使用用户名与密码进行访问。

Image.png


6、设置logstash用户名和密码
打开配置文件conf,在output中的elasticsearch中添加user、password
例:
output {
elasticsearch {
hosts => ["10.68.24.136:9200","10.68.24.137:9200"]
index => "%{[indexName]}-%{+YYYY.MM.dd}"
user => "logstash_system"
password => "123456"
}
收起阅读 »

社区日报 第685期 (2019-07-30)

1.如果你对于 elasticsearch 中 date 类型的使用有疑惑,不妨看看这篇文章(自行准备梯子)
http://t.cn/AiYvpm0g
2.Elasticsearch SIEM 官方介绍视频
http://t.cn/AiYv0T4F
3.ECE 2.3 版本发布,新增 RBAC 权限管理机制,快来看看吧
http://t.cn/AiYvWX17

编辑:rockybean
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.如果你对于 elasticsearch 中 date 类型的使用有疑惑,不妨看看这篇文章(自行准备梯子)
http://t.cn/AiYvpm0g
2.Elasticsearch SIEM 官方介绍视频
http://t.cn/AiYv0T4F
3.ECE 2.3 版本发布,新增 RBAC 权限管理机制,快来看看吧
http://t.cn/AiYvWX17

编辑:rockybean
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第684期 (2019-07-29)

1.不停服务 ElasticSearch 集群物理拆分
http://t.cn/Aij1b0yW
2.Elasticsearch 集群在QQ阅读评论服务的实践
http://t.cn/Aij1tGUf
3.聊聊Elasticsearch的CachedSupplier
http://t.cn/Aij1cSbG
 
编辑:cyberdak
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
 
 
继续阅读 »
1.不停服务 ElasticSearch 集群物理拆分
http://t.cn/Aij1b0yW
2.Elasticsearch 集群在QQ阅读评论服务的实践
http://t.cn/Aij1tGUf
3.聊聊Elasticsearch的CachedSupplier
http://t.cn/Aij1cSbG
 
编辑:cyberdak
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
 
  收起阅读 »

社区日报 第683期 (2019-07-28)

1.使用ELK和Logz.io记录Istio。
http://t.cn/AijlJa8t
2.ElasticSearch聚合简介。
http://t.cn/Aijl6gPy
3.(自备梯子)你的手机给你带来了头痛吗? OLED屏幕可能会受到责备。
http://t.cn/AijlSt8J

编辑:至尊宝
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.使用ELK和Logz.io记录Istio。
http://t.cn/AijlJa8t
2.ElasticSearch聚合简介。
http://t.cn/Aijl6gPy
3.(自备梯子)你的手机给你带来了头痛吗? OLED屏幕可能会受到责备。
http://t.cn/AijlSt8J

编辑:至尊宝
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第682期 (2019-07-27)

1.5个es优化的tips http://t.cn/AijNklla

2.用于调试es或solr查询结果的沙盒工具 http://t.cn/Aijp7c2o

3.jcseg:集成常用NLP功能的分词器 http://t.cn/R5iirZ2

继续阅读 »

1.5个es优化的tips http://t.cn/AijNklla

2.用于调试es或solr查询结果的沙盒工具 http://t.cn/Aijp7c2o

3.jcseg:集成常用NLP功能的分词器 http://t.cn/R5iirZ2

收起阅读 »

社区日报 第681期 (2019-07-26)

1、Rally实战Elasticsearch性能测试
https://tinyurl.com/y64bpgha
2、Elasticsearch企业级实战
https://tinyurl.com/y47c4lfq
3、Elasticsearch 7 处理syslog-ng日志
https://tinyurl.com/y2uqvmbv

编辑:铭毅天下
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
 
继续阅读 »
1、Rally实战Elasticsearch性能测试
https://tinyurl.com/y64bpgha
2、Elasticsearch企业级实战
https://tinyurl.com/y47c4lfq
3、Elasticsearch 7 处理syslog-ng日志
https://tinyurl.com/y2uqvmbv

编辑:铭毅天下
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
  收起阅读 »

社区日报 第680期 (2019-07-25)

1.阿里云10PB+/天的日志系统设计和实现
http://t.cn/Ai0WgRo5
2.使用Logstash集成JMS与ES搜索服务
http://t.cn/AijqBB4l
3.吃透Elasticsearch堆内存
http://t.cn/AijqBB4C

编辑:金桥
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.阿里云10PB+/天的日志系统设计和实现
http://t.cn/Ai0WgRo5
2.使用Logstash集成JMS与ES搜索服务
http://t.cn/AijqBB4l
3.吃透Elasticsearch堆内存
http://t.cn/AijqBB4C

编辑:金桥
归档:https://ela.st/cn-daily-all 
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第679期 (2019-07-24)

1、看完这篇还不会 Elasticsearch,我跪搓衣板!
http://t.cn/AileIeIq
2、Elasticsearch SQL 用法详解
http://t.cn/AijPgMVl
3、ELK 7.0部署与架构分析
http://t.cn/AijPDV5L
 
编辑:江水
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1、看完这篇还不会 Elasticsearch,我跪搓衣板!
http://t.cn/AileIeIq
2、Elasticsearch SQL 用法详解
http://t.cn/AijPgMVl
3、ELK 7.0部署与架构分析
http://t.cn/AijPDV5L
 
编辑:江水
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第678期 (2019-07-23)

1、gitlab使用ElasticSearch的挑战。
http://tinyurl.com/y6eoo2zy
2、Kibana进阶篇之如何可视化你的数据。
http://tinyurl.com/y2b26qnj
3、看Ubser如何使用ELK进行实时预测。
http://tinyurl.com/yyw5kn44

北京 Elastic Meetup 2019-08-24 开放报名了
https://www.bagevent.com/event/5520974

编辑:叮咚光军

归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1、gitlab使用ElasticSearch的挑战。
http://tinyurl.com/y6eoo2zy
2、Kibana进阶篇之如何可视化你的数据。
http://tinyurl.com/y2b26qnj
3、看Ubser如何使用ELK进行实时预测。
http://tinyurl.com/yyw5kn44

北京 Elastic Meetup 2019-08-24 开放报名了
https://www.bagevent.com/event/5520974

编辑:叮咚光军

归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第677期 (2019-07-22)

1、ElasticSearch在高并发复杂查询业务场景的应用
http://t.cn/AilTUc8N

2、谈一谈es的优势和限制
http://t.cn/AilT4JZD

3、使用elasticsearch实现十亿级数据的查询性能优化
http://t.cn/AilT6Bb4

编辑:cyberdak
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1、ElasticSearch在高并发复杂查询业务场景的应用
http://t.cn/AilTUc8N

2、谈一谈es的优势和限制
http://t.cn/AilT4JZD

3、使用elasticsearch实现十亿级数据的查询性能优化
http://t.cn/AilT6Bb4

编辑:cyberdak
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

Elastic&滴滴 meetup杭州站 2019年9月7日,抓紧报名哦

Elastic中文社区联合滴滴出行,将于2019年9月7日,在杭州举办一次线下技术交流活动。 本次活动交流内容主要围绕Elastic的开源产品(Elasticsearch、Logstash、Kibana 和 Beats)及周边技术,探讨在搜索、数据实时分析、日志分析、安全等领域的实践与应用。 活动分享火热报名中!
报名地址

朱杰 Elastic elastic资深顾问 《卓越运维三连击日志、指标和APM》
主题摘要:讲解将日志、指标和APM融入同一个技术栈的优势,在Elastic Stack中统一管理这三者的挑战和解决方法。分析在同一个技术栈里做三者的关联的优势和意义。相关问题解答和产品演示。

高斌龙 腾讯 Elasticsearch云服务后台开发工程师 《云上Elasticsearch的容灾与数据备份机制》
主题摘要:介绍基于云服务器和云硬盘搭建的ES集群,如何实现跨机房容灾和跨地域容灾;另外介绍云上的ES集群如何进行数据备份和恢复。

朱永清 杭州美创 技术专家 《ES 认证工程师考试经验分享》
主题摘要:如何参加 ES 认证工程师考试,如何做好考前准备并顺利通过考试,和一些经验分享。

钟华 滴滴ES团队 资深软件开发工程师 《基于Hadoop快速构建离线elasticsearch索引》
主题摘要:本主题介绍滴滴内部FastIndex服务,一种利用Hadoop计算能力快速离线构建elasticsearch索引的方式,替代之前使用DataX离线导入方式,在大数据场景下,可将写入时间降低为DataX的十分之一,同时不影响在线ES集群。

活动时间: 2019年9月7日
活动地址: 杭州市西湖区弘德路256号 西溪谷国际商务中心G座8楼(滴滴办公大楼)
报名地址
继续阅读 »
Elastic中文社区联合滴滴出行,将于2019年9月7日,在杭州举办一次线下技术交流活动。 本次活动交流内容主要围绕Elastic的开源产品(Elasticsearch、Logstash、Kibana 和 Beats)及周边技术,探讨在搜索、数据实时分析、日志分析、安全等领域的实践与应用。 活动分享火热报名中!
报名地址

朱杰 Elastic elastic资深顾问 《卓越运维三连击日志、指标和APM》
主题摘要:讲解将日志、指标和APM融入同一个技术栈的优势,在Elastic Stack中统一管理这三者的挑战和解决方法。分析在同一个技术栈里做三者的关联的优势和意义。相关问题解答和产品演示。

高斌龙 腾讯 Elasticsearch云服务后台开发工程师 《云上Elasticsearch的容灾与数据备份机制》
主题摘要:介绍基于云服务器和云硬盘搭建的ES集群,如何实现跨机房容灾和跨地域容灾;另外介绍云上的ES集群如何进行数据备份和恢复。

朱永清 杭州美创 技术专家 《ES 认证工程师考试经验分享》
主题摘要:如何参加 ES 认证工程师考试,如何做好考前准备并顺利通过考试,和一些经验分享。

钟华 滴滴ES团队 资深软件开发工程师 《基于Hadoop快速构建离线elasticsearch索引》
主题摘要:本主题介绍滴滴内部FastIndex服务,一种利用Hadoop计算能力快速离线构建elasticsearch索引的方式,替代之前使用DataX离线导入方式,在大数据场景下,可将写入时间降低为DataX的十分之一,同时不影响在线ES集群。

活动时间: 2019年9月7日
活动地址: 杭州市西湖区弘德路256号 西溪谷国际商务中心G座8楼(滴滴办公大楼)
报名地址 收起阅读 »

社区日报 第676期 (2019-07-21)

1.用于集成测试的Elasticsearch实例。
http://t.cn/AilNuhqS
2.搜索成熟度指数。
http://t.cn/AilN1DwW
3.(自备梯子)大数据 -  Apache NiFi和Kafka示例。
http://t.cn/AilNdvHK

编辑:至尊宝
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
继续阅读 »
1.用于集成测试的Elasticsearch实例。
http://t.cn/AilNuhqS
2.搜索成熟度指数。
http://t.cn/AilN1DwW
3.(自备梯子)大数据 -  Apache NiFi和Kafka示例。
http://t.cn/AilNdvHK

编辑:至尊宝
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup 收起阅读 »

社区日报 第675期 (2019-07-20)

1.es常用api备忘录 http://t.cn/AilXMABc

2.Logstash详解之filter模块 http://t.cn/AilXm9R9

3.手把手教你构建推荐系统 http://t.cn/EwTb6zy

继续阅读 »

1.es常用api备忘录 http://t.cn/AilXMABc

2.Logstash详解之filter模块 http://t.cn/AilXm9R9

3.手把手教你构建推荐系统 http://t.cn/EwTb6zy

收起阅读 »