filebeat数据直接输出elasticsearch,index可以动态定义,能否定义动态的type和id值?
Beats | 作者 Aruen | 发布于2018年12月29日 | 阅读数:3172filebeat.prospectors:
- input_type: log
paths:
- /var/log/test/*.dat
document_type: "test"
json.overwrite_keys: true
json.keys_under_root: true
processors:
- drop_fields:
fields: ["@timestamp","sort","beat","input_type","offset","source"]
output.elasticsearch:
hosts: ["47.105.162.69:9200"]
index: "test-%{[date]}"
type: "%{[type]}"
id: "%{[id]}"
template.path: "/usr/template/test.json"
template.name: "test"
template.overwrite: true
2 个回复
Aruen - 算法工程师
赞同来自:
rochy - rochy_he
赞同来自:
你可以通过配置 pipeline 来对数据做后续处理