从集群收集度量

Question

有人能建议从节点集群收集指标的最佳模式吗（每个节点都是带有Java应用程序的Tomcat Docker容器）？

我们计划使用ELK堆栈（ElasticSearch、Logstash、Kibana）作为可视化工具，但我们的问题是如何将指标交付给Kibana？

我们使用DropWizard度量库，它提供每个实例的度量(量表、计时器、直方图)。

显然，应该收集每个实例的一些指标(例如，cpu、内存等..)-按集群聚合它们没有任何意义。

但对于平均API响应时间、数据库调用持续时间等指标，我们需要一个清晰的全局图-即不是每个具体实例。

这就是我们犹豫的地方。我们应该：

1. 只需将普通量值发送到ElasticSearch，并允许Kibana计算平均值、百分位数等。在这种方法中，所有聚合都发生在Kibana。
2. 使用每个实例的计时器和直方图，然后发送它们-但是由于这些数据已经按实例聚合（即计时器已经提供百分位数以及1分钟、5分钟和15分钟的速率）-Kibana应该如何处理它来显示全局图像？聚合已经聚合的数据有很大意义吗？

提前感谢，

Answer 1

你会想要使用Metricbeat。它支持系统级、Docker API和Dropwizard的模块。这将为您收集事件(没有任何预聚合)。

对于聚合和可视化，我会使用时序可视化构建器，在这里您可以聚合每个容器、节点、服务等所有内容，...获得适合您的数据粒度应该非常灵活。