Kubernetes AWS Cloudwatch适配器未获取EKS HPA自动伸缩的自定义度量值

Question

我试图通过Kubernetes Cloudwatch适配器，基于自定义的Cloudwatch度量来启用AWS EKS自动伸缩。我已经将自定义指标推送到AWS Cloudwatch，并验证了它们会出现在Cloudwatch控制台中，并且可以使用boto3客户机get_metric_data进行检索。这是我用来将自定义度量发布到CloudWatch的代码：

import boto3
from datetime import datetime

client = boto3.client('cloudwatch')

cloudwatch_response = client.put_metric_data(
    Namespace='TestMetricNS',
    MetricData=[
        {
            'MetricName': 'TotalUnprocessed',
            'Timestamp': datetime.now(),
            'Value': 40,
            'Unit': 'Megabytes',
        }
    ]
)

我有以下yaml文件，用于在Kubernetes中建立外部度量和hpa自动缩放器：

extMetricCustom.yaml：

apiVersion: metrics.aws/v1alpha1
kind: ExternalMetric
metadata:
  name: test-custom-metric
spec:
  name: test-custom-metric
  resource:
    resource: "deployment"
  queries:
    - id: sqs_test
      metricStat:
        metric:
          namespace: "TestMetricNS"
          metricName: "TotalUnprocessed"
        period: 60
        stat: Average
        unit: Megabytes
      returnData: true

kind: HorizontalPodAutoscaler
apiVersion: autoscaling/v2beta1
metadata:
  name: test-scaler
spec:
  scaleTargetRef:
    apiVersion: apps/v1beta1
    kind: Deployment
    name: sqs-consumer
  minReplicas: 1
  maxReplicas: 4
  metrics:
  - type: External
    external:
      metricName: test-custom-metric
      targetAverageValue: 2

NAME          REFERENCE                 TARGETS     MINPODS   MAXPODS   REPLICAS   AGE
test-scaler   Deployment/sqs-consumer   0/2 (avg)   1         4         1          161m

Answer 1

与OP一起处理这个带外的问题，并在当天晚些时候打开了这个问题的标签，所以在这里为后代发布结果，供任何偶然发现它的人使用。

问题的根本原因是时区冲突。metrics monitor基于“current”metrics，但是metrics generator脚本中的下面一行生成了没有指定时区的时间戳，并且在本地时区中。

            'Timestamp': datetime.now(),

由于当前时区“没有数据”（由于A-X UTC偏移量，只有过去X小时的数据），系统没有启动缩放，因为实际上值为“0”/nil/null。相反，可以指定一个UTC时间字符串来确保生成的度量是及时的：

            'Timestamp': datetime.utcnow(),

{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": [
                "cloudwatch:GetMetricData"
            ],
            "Resource": "*"
        }
    ]
}