不要急,总有办法的
yang4210

yang4210

威望 : 2 积分 : 1965 赞同 : 1 感谢 : 0

更多 »回复

0

“我通过python的客户端尝试消费,发现在缺少一个kafka节点的情况下消费是正常,说明问题应该是在logstash上”  ,那么你怎么不直接用python代替 consumer logstash呢?  python写的消费者,速度比logstash快了好几...

1

logstash是出了名的低效率。不如自己用其它语言写一个消费者。普通笔记本开个CentOS虚拟机(4G内存,所有软件在这虚拟机运行),单线程都可以每秒消费50K,并导入ES。多线程轻松上100K。就算用python把日志 json格式化之后,写日志到文件里,...

0

正则 [a-z]*   就是0或者多个,比如abcd,或者空没有 [a-z]+   就是1或者多,比如bbb,a,dd [ ]+   就是一个或者多个空格   *或者+就可以区分有时候有值和无值字段

0

message例子:2020-02-02 12:12:12  (www.qq.com)10.10.10.10       grok {                match => {             "message" =...

0

正则re可以直接生成 [attach]4711[/attach]    

更多 »发问

没有内容

发问

回复

文章

最新动态

详细资料

个人成就:

威望: 2 积分: 1965 赞同: 1 感谢: 0

最后活跃:
2020-03-27 17:16
更多 » 关注 0
更多 » 0 人关注
关注 0 话题
主页访问量 : 152 次访问