普罗米修斯在重负载下监控应用程序时的数据缺口

Question

spring boot spring integration应用程序由普罗米修斯通过内置测微计进行监控。io。spring boot应用程序将显示locahost:8080/致动器/普罗米修斯。监测数据到达普罗米修斯，并可显示为图形。这很好用。

我的问题是我在普罗米修斯数据中得到了一些间隙。这些间隙发生在应用程序负载较重时。当应用程序非常繁忙时，locahost的响应时间：8080/执行器/prometheus变得更长是正常的。在我的情况下，没有负载不到1秒，但有负载时大约1分钟。目标显示在prometheus状态中-

我的问题是：这种情况有解决方案吗？（将优先级设置为监视url？，将临时信息存储在spring boot应用程序中并稍后发送）

更新：我正在尝试监控Spring集成指标，但对于这个问题来说，哪个指标并不重要。可能是类似jvm堆的任何东西。

Answer 1

在正常情况下，使用查询度量endpoint的速度非常快。

我想到了三种情况，这可能是它变慢的原因：

a） 您的应用程序负载过重，以至于需要花费太多时间才能接受http请求。这意味着你的应用程序服务的请求太多，无法处理。在这种情况下，给它更多的资源、线程或任何瓶颈。（参见此处）

b）您注册了自定义仪表，需要大量时间来计算或获取值。例如，在Gauge getter函数中进行数据库查询是一个杀手，因为每次查询指标endpoint时，您的应用程序都需要查询数据库，只有这样它才能呈现指标。如果您有多个这样的指标（按顺序处理）并且它们的性能取决于您的应用程序负载，情况会更糟（例如，当您的应用程序负载较重时，DB服务器变得更慢，这会使情况变得更糟）

c）您的指标标签基数取决于您的应用程序使用情况（这是一种不好的做法）。例如，当您的应用程序被大量使用时，为每个用户或每个会话拥有一个标签会增加指标的数量。这不仅会给您的应用程序带来压力（因为每个指标都需要一些内存），而且还会给您的Prometheus服务器带来压力，因为它为每个唯一的标签值组合创建文件。

您可以做什么，但这并不能解决问题的原因是增加了scrape\u timeout的值（请参见此处）。