使用 shuf 来打乱一个文件中的行或是选择文件中一个随机的行。

如何搭建logstash集群

Logstash | 作者 zcx | 发布于2018年10月08日 | 阅读数:9698

如题,解决logstash单点问题,谢谢
已邀请:

rochy - rochy_he

赞同来自:

推荐 logstash 消费 kafka 消息
多个 logstash 订阅同一个主题,使用同一个 group 
这样一条消息只可能被一个 logstash 节点消费
当某一个节点挂了,并不影响其他节点对该 topic 消息的消费
这样即可解决 logstash 单点问题

novia - 1&0

赞同来自:

如果是filebeat-logstash这种使用场景,filebeat里面配置多个logstash的IP即可

zqc0512 - andy zhou

赞同来自:

logstash目前版本没有集群这一概念,flume有,可以在系统层面搞个软负载,keepalive haproxy。

要回复问题请先登录注册