如何在 Promtail 中解析嵌套的 json

Posted 2023-02-15

【中文标题】如何在 Promtail 中解析嵌套的 json

【英文标题】：How to parse nested json in Promtail

【发布时间】：2021-10-06 03:20:42

【问题描述】：

我有以下嵌套 JSON 格式的日志

"level":30,"time":1627625600625,"pid":15676,"hostname":"admin-hp-elitebook-840-g2","reqId":"req-2","req":"method":"POST","url":"/v1/login","hostname":"127.0.0.1:3000","remoteAddress":"127.0.0.1","remotePort":55884,"msg":"incoming request"

由此，我想为方法、URL、主机创建标签解析promtail中的嵌套

scrape_configs:
- job_name: plainlog
  pipeline_stages:
  - json:
      expressions:
        req: req
  - labels:
      req:
  - output:
      source: req
  static_configs:
  - targets:
      - localhost
    labels:
      job: plainlog
      __path__: /home/nidhin/Desktop/plainlog/*log

【参考方案1】：

您需要添加另一个 json 阶段。对于嵌套 json 的每一层，您都添加了一个阶段来解析从上一层提取的数据中的数据。 例如：

  - json:
      expressions:
        req: 
  - json:
      expressions:
        method: 
      source: req

更多信息在这里：https://grafana.com/docs/loki/latest/clients/promtail/stages/json/#using-extracted-data