Prometheus适配器-无法从外部度量获取数据

Question

无法通过运行以下命令获取项目:kubectl get--raw“/apis/external.metrics.k8s.io/v1beta1/namespaces/default/rabbitmq_queue_messages_ready”jq

正如您在下面的输出项中所看到的，是一个空数组：

{
  "kind": "ExternalMetricValueList",
  "apiVersion": "external.metrics.k8s.io/v1beta1",
  "metadata": {
    "selfLink": "/apis/external.metrics.k8s.io/v1beta1/namespaces/default/rabbitmq_queue_messages_ready"
  },
  "items": []
}

但是，我在prometheus终结点中获取了正确的数据：prometheus URL:http:// :9090/API/V1/Series？匹配%5b%5d=%7b__name__%3d~%22%5erabbitmq_queue_.%2a%22%7d&start=1597255421.51响应：

{
"status":"success",
"data":[
    {
        "__name__":"rabbitmq_queue_messages_ready",
        "app":"prometheus-rabbitmq-exporter",
        "durable":"true",
        "instance":"10.2.0.73:9419",
        "job":"kubernetes-pods",
        "namespace":"default",
        "pod_name":"rabbitmq-exporter-prometheus-rabbitmq-exporter-754c845847-gzlrq",
        "pod_template_hash":"754c845847",
        "queue":"test",
        "release":"rabbitmq-exporter",
        "vhost":"/"
    },
    {
        "__name__":"rabbitmq_queue_messages_ready",
        "app":"prometheus-rabbitmq-exporter",
        "durable":"true",
        "instance":"10.2.0.73:9419",
        "job":"kubernetes-pods",
        "namespace":"default",
        "pod_name":"rabbitmq-exporter-prometheus-rabbitmq-exporter-754c845847-gzlrq",
        "pod_template_hash":"754c845847",
        "queue":"test1",
        "release":"rabbitmq-exporter",
        "vhost":"/"
    }
]
}

我使用以下helm值安装了stable/prometheus-adapter:

rules:
  default: false
  external:
    - seriesQuery: '{__name__=~"^rabbitmq_queue_.*"}'
      resources:
        #template: <<.Resource>>
        overrides:
          namespace:
            resource: namespace
          service:
            resource: service
          pod:
            resource: pod
      name:
        matches: ""
        as: "rabbitmq_queue_messages_ready"
      metricsQuery: 'rate(<<.Series>>{<<.LabelMatchers>>}[1m])'

客户端:&version.version{semver：“v2.16.9”,GITCOMMIT：“8AD7037828E5A0FCA1009DABE290130DA6368E39”,GITTREESTECT：“CLEAN”}服务器:&version.version{semver：“v2.16.7”,GITCOMMIT：“5F2584FD3D35552C4AF26036F0C464191287986B”,GITTREESTECT：“CLEAN”}

客户端版本：Version.info{Major：“1”,Minor：“16”,GitVersion：“V1.16.1”,GitCommit：“D647DDBD755FAF07169599A625FAF302FFC34458”,GitTreEstate：“Clean”,BuildDate：“2019-10-02T17:01:15Z”,GoVersion：“Go1.12.10”,编译器：“GC”,平台：“Darwin/AMD64”}服务器版本：Version.info{Major：“1”,Minor：“15”,GitVersion：“V1.15.11”,GitCommit：“EC831747A3A5896DBDF53F259EAFE A2A2595217C”,GitTreeState：“Clean”,BuildDate：“2020-05-29T19:56:10Z”,GoVersion：“Go1.12.17”,编译器：“GC”,平台：“Linux/AMD64”}

预期结果：它应该从Prometheus获取度量

如何重现：使用上述配置安装stable/prometheus-rabbitmq-exporter和stable/prometheus-adapter头盔图。

我正在遵循以下指南:https://nuvalence.io/building-a-k8s-autocaler-with-custom-metrics/

Answer 1

为了进一步解决问题，首先，我将检查prom-adapter设置中的几个内容：

1. 使用“kubectl get--raw...”命令直接获取度量值时，在Prometheus适配器日志中是否看到任何错误？
2. 您已将Prometheus-Adapter安装到哪个命名空间？（问是因为我以前在部署到“kube-system”以外的其他ns时在适配器日志中观察到与RBAC相关的错误）
3. 请粘贴最终“prom-adapter”/etc/adapter/config.yaml配置的内容（来自prom-adapter的Pod）

我在适配器中公开了相同的外部rabbitmq度量，没有任何问题，请检查相同命令的输出：

{
  "kind": "ExternalMetricValueList",
  "apiVersion": "external.metrics.k8s.io/v1beta1",
  "metadata": {
    "selfLink": "/apis/external.metrics.k8s.io/v1beta1/namespaces/default/rabbitmq_queue_messages_ready"
  },
  "items": [
    {
      "metricName": "rabbitmq_queue_messages_ready",
      "metricLabels": {
        "endpoint": "metrics",
        "instance": "10.64.1.97:9419",
        "job": "rabbitmq",
        "namespace": "default",
        "pod": "rabbitmq-0",
        "service": "rabbitmq"
      },
      "timestamp": "2020-08-13T23:50:29Z",
      "value": "174160m"
    }
  ]
}

已用prom-adapter版本:DirectXMAN12/K8S-PROMETHEUS-Adapter-AMD64:v0.6.0

//使用Community wiki post以获得更好的清晰度（代码段格式等）