IT 面试题库

Logstash 的 pipeline(input/filter/output)如何工作?grok 过滤器如何把非结构化日志解析成字段?

中级简答题DevOps工程师后端开发工程师SRE站点可靠性工程师ELKLogstashgrokpipeline日志解析

题目

Logstash 的 pipeline(input/filter/output)如何工作?grok 过滤器如何把非结构化日志解析成字段?

参考答案

内容深度:适中 · 含示例/代码 · 来源:外部链接 · 未复核 · 23 天前更新

要点:

filter {
  grok {
    match => { "message" => "%{COMBINEDAPACHELOG}" }
  }
  date { match => [ "timestamp", "dd/MMM/yyyy:HH:mm:ss Z" ] }
}

执行后 message 会被拆出 clientip、request、response、bytes 等字段,并可由 date 把时间字符串转成真正的 @timestamp。

补充:grok 对不匹配的行会打 _grokparsefailure tag,调试时务必先在本地用 stdout { codec => rubydebug } 输出,确认正则覆盖所有日志格式再上生产。

练这道题

同分类 · 高频题

题目与答案就在本页;收藏、批注和错题重练在应用内

这道题看完了?连刷同类题,趁热打铁效果最好 进入刷题