每个json对象大约1~50MB,用Logstash file input plugin 无法将大的json对象写入到Elasticsearch。但是小型的json对象测试的时候可以成功写入到Elasticsearch。
如何配置Logstash或者Elasticsearch才能够将大型的json对象写入到Elasticsearch?
json对象说明:
1、每个json对象的schema不完全一样。
2、json对象包含很多的field。
如何配置Logstash或者Elasticsearch才能够将大型的json对象写入到Elasticsearch?
json对象说明:
1、每个json对象的schema不完全一样。
2、json对象包含很多的field。
2 个回复
gfswsry - 80后IT
赞同来自: leighton_buaa
http.max_content_length: 1024mb
leighton_buaa
赞同来自:
看看你的json对象能否打印到标准输出