即使是不成熟的尝试,也胜于胎死腹中的策略。

logstash多表(主子表)采集数据同步到ES的问题.

Logstash | 作者 SnowMan | 发布于2020年03月03日 | 阅读数:1916

子表如果数据有变动,logstash如何配置? docid对应的是MySQL主表的主键.
当前是SQL脚本去增量采集.实时性太低了. index更新响应时间3s以上. 大家有没有其他logstash采集方案.
已邀请:

s60514

赞同来自:

首先ES数据库的设计就是准实时而不是实时数据库,在平均性能和使用情况下一遍都秒级返回,logstash更新可以做到秒级同步,ES刷新的话默认是3s可以设置成微秒级别但是对性能消耗很大,官方不建议     

要回复问题请先登录注册