被杀死的Kubernetes吊舱中的jvm堆使用历史记录

Question

我在kubernetes部署了一个基于play框架的java应用程序。其中一个吊舱因内存不足/内存泄漏而死亡。在本地，可以使用一些实用程序并监视jvm堆的使用情况。我是库伯内特斯的新手。

如果您告诉我如何在一个被杀死的Kubernetes吊舱中检查我的应用程序的堆使用历史记录，我将不胜感激。kubectl get events on this killed pod将提供事件历史记录，但我想检查该死pod上的对象级堆使用历史记录。非常感谢

Answer 1

您可以安装插件或外部工具，如Prometheus或metrics server。

Prometheus是一个开源系统监控和警报工具包，最初由SoundCloud构建。

您可以定义查询：对于CPU百分比

avg((sum (rate (container_cpu_usage_seconds_total {container_name!="" ,pod="<Pod name>" } [5m])) by (namespace , pod, container ) / on (container , pod , namespace) ((kube_pod_container_resource_limits_cpu_cores >0)*300))*100)

对于内存百分比

avg((avg (container_memory_working_set_bytes{pod="<pod name>"}) by (container_name , pod ))/ on (container_name , pod)(avg (container_spec_memory_limit_bytes>0 ) by (container_name, pod))*100)

看看：普罗米修斯吊舱内存使用情况。

您可以使用Grafana可视化这些指标-看看如何使用Prometheus-Grafana Prometheus设置进行设置。

Metrics server是Kubernetes内置自动缩放管道的一个可扩展、高效的容器资源度量源。

Metrics Server从Kubelets收集资源指标，并通过Metrics API在Kubernetes apiserver中公开这些指标，以供水平Pod Autoscaler和垂直Pod Autoscaler使用。kubectl top也可以访问Metrics API，从而更容易调试自动缩放管道。

您可以执行：

$ kubectl top pod <your-pod-name> --namespace=your-namespace --containers

以下命令将为您提供给定pod及其容器的CPU使用率和内存使用率。

请参阅如何首先安装metrics server：metrics server Installation。

否则，如果您想在不安装任何第三方工具的情况下检查cpu/内存使用情况，则可以从cgroup获取pod的内存和cpu使用情况。

1. 转到正在运行的容器的外壳

请记住，内存使用量以字节为单位。

看看：库伯内特斯的内存使用情况。