流利地介绍如何解析日志并根据键值创建字段

Question

在流利的情况下，我如何使用 grok 模式或 JSON 解析此日志并获取 ip、方法和严重性等字段

{"log":"2019-08-09 06:54:36,774 INFO 10.2.1.200 [09/Aug/2019:06:54:36 +0000] "GET / HTTP/1.1" 200 205 "-" "HCELB/2.0"n","stream":"stderr","time":"2019-08-09T06:54:36.77499244Z"}

Answer 1

感谢您@gehbiszumeis宝贵的帮助，我自己做了修复它。为了将来需要任何人

@type tail
path /var/log/containers/container-name-*.log
tag tag_name
read_from_head true
<parse>
@type multi_format
<pattern>
format json
</pattern>
</parse>
</source>
<filter tag_name>
@type parser
key_name log
reserve_data true
time_key time
time_format %Y-%m-%dT%H:%M:%S.%NZ
<parse>
@type grok
grok_failure_key grokfailure
<grok>
pattern %{TIMESTAMP_ISO8601:time} %{WORD:severity} %{GREEDYDATA:message}
</grok>
</parse>
</filter>
<filter tag_name>
@type record_transformer
remove_keys log,stream
<record>
type tag_name
</record>
</filter>
```