如何使用Prometheus存储Grafana可视化的数据

Question

在Pythonrequest.get和json.loads函数的帮助下，我能够从URL中获取数据。数据包含一个实例列表，其中每个实例都有instance_id、状态等指标。

我的问题是，我有没有办法将这些指标上传到普罗米修斯？我查看了pushgateway功能，但不确定这是否是进行数据推送和存储的正确方法。

我目前向普罗米修斯推送数据的工作如下：

from prometheus_client import CollectorRegistry, Gauge, push_to_gateway
from prometheus_client import Summary

registry1 = CollectorRegistry()
registry2 = CollectorRegistry()

s = Summary('request_latency_seconds', 'Description of summary', registry=registry1)
s.observe(4.7)

g = Gauge('job_last_success_unixtime', 'Last time a batch job successfully finished', registry=registry2)
g.set_to_current_time()

push_to_gateway('localhost:9091', job='batch_summary', registry=registry1)
push_to_gateway('localhost:9091', job='batch_gauge', registry=registry2)

但是，我不确定我应该推动什么公制类型（仪表，摘要或其他东西？）

下面是我希望推送的实例数据示例：

{'url': 'https://example.com', 
'created': '2017-09-17-time', 
'status_code': 200, 
'instance_start': '2018-09-17-time', }

我之所以把这些数据推给普罗米修斯，是因为我想用格拉法纳来获取这些数据并将其可视化。

Grafana图形的一个示例是：时间作为x轴，状态代码为200的实例数作为y轴。

任何想法或帮助都将不胜感激。非常感谢。

Answer 1

既然我做了类似的事情，我可以给你一些建议。正如github页面上所说，您可以使用pushgateway进行“临时和批处理作业，以向Prometheus公开其度量”。

我认为您需要汇总指标，但为了确保这一点，请阅读普罗米修斯文档页面上关于指标类型的文档。

您完成了第一部分，通过pushgateway公开了您想要的指标，您可以始终通过web浏览器或使用curl检查它是否正常工作：

你的IP:9091

如果您能在该端口上看到一些数据，您必须在prometheus服务器上设置您的配置。

您需要告诉prometheus服务器，该服务器应该获取网关的指标。您要查找的文件是“prometheus.yml”，其位置取决于您安装prometheus服务器的位置。

当你打开它时，你应该这样写：

  - job_name: 'SomeJob-Name'
    static_configs:
      - targets: ['YourIPADDRESS:9091']
        labels:
          environment: 'prod'

然后重新启动prometheus服务器，节点中的数据应该在PrometheusIP:9090/targets路径上可见。