居然是你

logstash output http产生的问题

Logstash | 作者 grrrrr112 | 发布于2020年03月12日 | 阅读数:2880

logstash版本:6.2.4
 
问题:output有三个:kafka、es、http。当http的接口出现问题的时候,logstash不断的重试连接,1毫秒5次左右。导致其他的output失效、数据丢失。
 
疑惑:http的重试机制是否有问题?一晚上nohup写了15G timeout日志和拒绝连接日志。在哪里可以修改这个重连时间?怎么优化这个机制?
 
谢谢
已邀请:

liuxg - Elastic

赞同来自:

https://www.elastic.co/guide/e ... meout 有一个connect_timeout,不知道这个能否帮助到你。
 
另外这里还有一个https://www.elastic.co/guide/e ... meout。你可以调整这个试试看

trycatchfinal

赞同来自:

感觉三个output不太合理。
是否可以试试:
data->logstash->kafka;
kafka->logstash->es
kafka->logstash->http

要回复问题请先登录注册