查询通过prometheus节点导出器textfile收集器公开的自定义度量失败

Question

我是新来的普罗米修斯/警报经理。

我创建了一个cron作业，它每分钟执行一次shell脚本。此shell脚本在分配给--textfile的同一目录中生成“test.prom”文件（其中包含仪表度量）。收藏家。目录参数（到节点导出器）。我验证了（使用curl）http://localhost:9100/metrics)节点导出器是否正确公开该自定义度量。

当我试图在prometheus仪表板中针对该自定义指标运行查询时，它不会显示任何结果（它表示未找到数据）。

我无法理解为什么通过node exporter textfile collector公开的度量查询失败。我错过了什么线索？另外，请让我知道如何检查并确保普罗米修斯擦伤了我的自定义度量“test\u metric”？

我在prometheus仪表板中的查询是test\u metric！=0（在普罗米修斯仪表板中），未给出任何结果。但是我通过节点导出器文本文件暴露了test\u metric。

感谢您的帮助！！

顺便说一句，节点导出器在Kubernetes环境中作为docker容器运行。




Answer 1

发生此问题是因为过时的度量标准。假设您在13分钟后在文件中写入了度量值，在5min之后，普罗米修斯将考虑您的度量过时，并且在您进行查询时可能会从中消失。

Answer 2

这是我的错。我没有包括普罗米修斯节点导出器的刮擦说明。yaml文件。包括他们之后，它起了作用。

Answer 3

我也遇到过类似的情况，但这不是配置问题。

相反，我的数据包括时间戳：

# HELP network_connectivity_rtt Round Trip Time to each node
# TYPE network_connectivity_rtt gauge
network_connectivity_rtt{host="home"} 53.87 1541426242
network_connectivity_rtt{host="hop_1"} 58.8 1541426242
network_connectivity_rtt{host="hop_2"} 21.93 1541426242
network_connectivity_rtt{host="hop_3"} 71.69 1541426242

一旦我重新加载，PNE就会毫无问题地把它们捡起来。由于prometheus是在system d下运行的，我必须这样检查日志：

journalctl --system -u prometheus.service --follow

我在那里读到这一行：

msg="Error on ingesting samples that are too old or are too far into the future"

一旦我删除了时间戳，值就开始出现。这让我阅读了更多关于时间戳的详细信息，我发现它们必须以毫秒为单位。因此，这种格式现在可以了：

# HELP network_connectivity_rtt Round Trip Time to each node
# TYPE network_connectivity_rtt gauge
network_connectivity_rtt{host="home"} 50.47 1541429581376
network_connectivity_rtt{host="hop_1"} 3.38 1541429581376
network_connectivity_rtt{host="hop_2"} 11.2 1541429581376
network_connectivity_rtt{host="hop_3"} 20.72 1541429581376

我希望它能帮助别人。