（十三）：如何用 Loki 收集查看 Kubernetes Events

Posted 2023-02-10 east4ming

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了（十三）：如何用 Loki 收集查看 Kubernetes Events相关的知识，希望对你有一定的参考价值。

前情提要

概述

在分析 K8S 集群问题时，Kubernetes Events 是超级有用的。

Kubernetes Events 可以被当做是日志来处理，格式也和日志很像，都包括：

时间
组件
原因
...

但是，Kubernetes 默认只持久化了一个小时的事件，以减少 etcd 的负载。所以，考虑利用 Loki 存储和查询这些 Events。

实现

看过我之前的文章的可以知道，kubernetes-event-exporter 可以实现对 Kubernetes Events 的收集。

那我们就利用 kubernetes-event-exporter, 通过最简单的 stdout 方式来输出 json 格式的 event.

另外，再利用 Promtail 的管道配置，将 NameSpace 作为附加标签添加到导出到 Loki 的日志中。

kubernetes-event-exporter 配置

如下：

logLevel: error
logFormat: json
trottlePeriod: 5
route:
  routes:
    - match:
        - receiver: "dump"
receivers:
  - name: "dump"
    stdout:

Promtail 配置

如下：

...
scrape_configs:
- job_name: kubernetes-pods-app
  pipeline_stages:
    - cri: 
    - match:
        selector: \'app="event-exporter"\'
        stages:
        - json:
            expressions:
              namespace: involvedObject.namespace
        - labels:
            namespace: ""  
...

上面的配置会从 Events 的 JSONPath involvedObject.namespace 中获取 NameSpace ，并将其作为一个标签 - namespace 添加。

至此，我可以只查看特定 NameSpace（如emqx) 的 Events, 如下图：

以上是关于（十三）：如何用 Loki 收集查看 Kubernetes Events的主要内容，如果未能解决你的问题，请参考以下文章