Kubernetes 自动扩展的可能指标在哪里定义

Posted

技术标签:

【中文标题】Kubernetes 自动扩展的可能指标在哪里定义【英文标题】:Where are the possible metrics for kubernetes autoscaling defined 【发布时间】:2019-12-11 07:52:59 【问题描述】:

我正在尝试使用自动缩放场景(目前使用 microk8s 单节点个人集群)。

基本的 CPU 缩放工作正常。

对于更复杂的场景,我正在尝试遵循https://kubernetes.io/docs/tasks/run-application/horizontal-pod-autoscale-walkthrough/#autoscaling-on-multiple-metrics-and-custom-metrics 的指南,但我无法弄清楚可能的 pod 指标/对象指标是如何/在何处定义/记录的。例如,.. "packets-per-second" 记录在哪里。

我可以通过 kubectl 导航或手动执行 REST API,但必须有更好的方法。

谢谢

apiVersion: autoscaling/v2beta1
kind: HorizontalPodAutoscaler
metadata:
  name: php-apache
  namespace: default
spec:
  scaleTargetRef:
    apiVersion: apps/v1
    kind: Deployment
    name: php-apache
  minReplicas: 1
  maxReplicas: 10
  metrics:
  - type: Resource
    resource:
      name: cpu
      target:
        type: AverageUtilization
        averageUtilization: 50
  - type: Pods
    pods:
      metric:
        name: packets-per-second ====> where is this name defined/documented ?
      targetAverageValue: 1k
  - type: Object
    object:
      metric:
        name: requests-per-second ====> where is this name defined/documented ?
      describedObject:
        apiVersion: networking.k8s.io/v1beta1
        kind: Ingress
        name: main-route
      target:
        kind: Value
        value: 10k

【问题讨论】:

对于它的价值,这大约是我在 k8s 文档中所能获得的深度,但我仍然无法弄清楚确定监控 kubernetes.io/docs/reference/generated/kubernetes-api/v1.15/… 的可能指标的逻辑。我想一个例子可以帮助我理解。 【参考方案1】:

ResourceMetric 中的 CPU 或内存使用情况为 provided by kubelet 并由 metric-server 收集

但是对于packets-per-secondrequests-per-second,没有官方提供者,所以这个字段实际上可以是任何值,取决于你部署的非官方自定义指标API。

https://github.com/kubernetes/metrics/blob/master/IMPLEMENTATIONS.md 列出了一些流行的自定义指标 API

【讨论】:

谢谢..我通过文档发现了同样的情况。确实应该更明确地提及。也许我会尝试改进 k8s 的自动缩放文档部分【参考方案2】:

下面的 GitHub 项目提供了大量有关使用 Prometheus 提供的自定义指标在 Kubernetes 中自动扩展 Pod 的信息。

https://github.com/stefanprodan/k8s-prom-hpa

【讨论】:

以上是关于Kubernetes 自动扩展的可能指标在哪里定义的主要内容,如果未能解决你的问题,请参考以下文章

如何在 GKE 自动驾驶仪中基于自定义指标实现水平自动缩放

Kubernetes AWS Cloudwatch 适配器未获取 EKS HPA 自动缩放的自定义指标值

Kubernetes 高阶玩法-自动扩缩容

Kubernetes 高阶玩法-自动扩缩容

Kubernetes 高阶玩法-自动扩缩容

根据自定义指标扩展部署