如何查看为Pushgateway生成数据的实例的主机名

Question

我有普罗米修斯服务器，正在运行WMI导出器的Azure VM使用自我发现。在Grafana中，我使用仪表板变量进行过滤（见屏幕截图）。

在VM上，我创建了一个自定义导出器，该导出器为每个服务器输出值为1的度量值，并且每个服务器将这些值发送到在etc/prometheus/prometheus.yaml中配置的单个Push网关

- job_name: 'push-gateway'
  static_configs:
  - targets: ['localhost:9091']

当我查看刮取的度量时，我总是看到实例：localhost:9091和作业：推送网关，而不管度量来自哪个服务器。如果我手动添加这些标签，我会看到“导出”前缀（见截图）。

我感到困惑的是，我如何确保自定义创建的指标的“作业”和“实例”具有与生成指标的服务器匹配的相同的“作业”和“实例”值，以便我可以使用仪表板变量来提取正确的所选服务器的数据？

Answer 1

您可以使用metric_relabel_configs在抓取后重写标签。例如：

- job_name: pushgateway
  # This is necessary if metrics in pushgateway have "job" or "instance" labels.
  # With "honor_labels: true" Prometheus will save those as "exported_job" and "exported_instance" respectively.
  honor_labels: true
  static_configs:
  - targets:
    - my-pushgateway.com:9091
  metric_relabel_configs:
  # copy pushgateway address from "instance" to "source" label
  - source_labels: [instance]
    target_label: source

  # replace "instance" label value with one from "exported_instance" label
  - source_labels: [exported_instance]
    target_label: instance

  # remove "exported_instance" label
  - source_labels: [exported_instance]
    action: labeldrop

如果您以前有这样的指标：

my_metric{job="pushgateway", instance="my-pushgateway.com:9091", exported_instance="example.com"}

然后，使用上面示例中的配置，它们将如下所示：

my_metric{job="pushgateway", instance="example.com", source="my-pushgateway.com:9091"}