请教下大家几个问题。
1. 我看到很多都是用ELK套件来做日志分析,如果使用ES来做业务数据的多维度分析,可行性如何?因为日志数据与业务数据不太一样。
2. 业务数据都存储在MySQL,加起来数据量不到1TB,日变更记录总数200w左右(insert、update),本身因为数据量不够大,不适合使用Hadoop那套生态
我理解的ES是一个搜索引擎,着重点在搜索。在分析领域,应用还是少了点。了解ES不多,请大家指教。有无对应的案例分享下。
1. 我看到很多都是用ELK套件来做日志分析,如果使用ES来做业务数据的多维度分析,可行性如何?因为日志数据与业务数据不太一样。
2. 业务数据都存储在MySQL,加起来数据量不到1TB,日变更记录总数200w左右(insert、update),本身因为数据量不够大,不适合使用Hadoop那套生态
我理解的ES是一个搜索引擎,着重点在搜索。在分析领域,应用还是少了点。了解ES不多,请大家指教。有无对应的案例分享下。
4 个回复
bindiego - be cool
赞同来自: laoyang360
laoyang360 - 《一本书讲透Elasticsearch》作者,Elastic认证工程师 [死磕Elasitcsearch]知识星球地址:http://t.cn/RmwM3N9;微信公众号:铭毅天下; 博客:https://elastic.blog.csdn.net
赞同来自:
注意一点,es是近实时,不是准严格实时。es不支持mysql curd 。选型注意下。
基本业务场景没有问题。
everything - 80后IT
赞同来自:
es 可以做多维度分析计算,但是 需要非常昂贵的硬件环境。
一般多维度分析计算,都是用流框架,比如flink 实时计算,或者离线框架计算。
最主要还是数据量。 抛开数据量谈框架,技术,都是不应该的。
xxxli
赞同来自: