在 Mapping 里面,将 dynamic 参数设置成 strict 可以拒绝索引包含未知字段的文档。 此条 Tips 由 medcl 贡献。

logstash file input,大量文件的报错

Logstash | 作者 auroracxy | 发布于2016年07月07日 | 阅读数:5936

logstash的日志:
IdentityMapCodec has reached 80% capacity {:current_size=>16427, :upper_limit=>20000, :level=>:warn}

系统的文件限制已经设置过了

$ ulimit -a
core file size (blocks, -c) 0
data seg size (kbytes, -d) unlimited
scheduling priority (-e) 0
file size (blocks, -f) unlimited
pending signals (-i) 63474
max locked memory (kbytes, -l) 65535
max memory size (kbytes, -m) unlimited
open files (-n) 655350
pipe size (512 bytes, -p) 8
POSIX message queues (bytes, -q) 819200
real-time priority (-r) 0
stack size (kbytes, -s) 8192
cpu time (seconds, -t) unlimited
max user processes (-u) 4096
virtual memory (kbytes, -v) unlimited
file locks (-x) unlimited
已邀请:

ycboy

赞同来自:

我也碰到了这个问题,请问你当时是怎么解决的

要回复问题请先登录注册