Java堆转储：如何找到占用内存1的对象/类。伊奥。内蒂。缓冲器Bytebuutil 2。字节[]数组

Question

我发现我的一个spring boot项目的内存（RAM消耗）正在日益增加。当我把jar文件上传到AWS服务器时，它占用了582MB的内存（分配的最大内存是1500MB），但每天，内存都在以50MB的速度增加到100MB，而今天，5天后，它占用了835MB。目前，该项目有100-150个用户，并且正常使用Rest API。

由于RAM的增加，应用程序多次出现以下错误（从日志中发现错误）：

Exception in thread "http-nio-3384-ClientPoller" java.lang.OutOfMemoryError: Java heap space

所以为了解决这个问题，我发现通过使用JAVA堆转储，我可以找到占用内存的对象/类。所以通过在命令行中使用Jmap，我创建了一个堆转储，并将其上传到堆英雄和Eclipse内存分析器工具。在它们中，我发现了以下内容：

1.总浪费内存为：64.69MB（73%）（查看下面的屏幕截图）

2.在这些中，34.06MB是由Byte[]数组和LinkedHashmap[]拍摄的（检查下面的截图），这是我在整个项目中从未使用过的。我在我的项目中搜索过，但没有找到。

1. Java Static io.netty.buffer.ByteBufUtil.DEFAULT_ALLOCATOR

2. Java Static com.mysql.cj.jdbc.AbandonedConnectionCleanupThread.connectionFinalizerPhantomRefs` 

所以我试图在我的项目中找到这个netty.buffer.，但是我没有找到任何与netty或缓冲区匹配的东西。

现在我的问题是如何减少内存泄漏，或者如何找到确切的内存消耗对象/类/变量，以便减少堆大小。

我知道很少有专家会要求提供源代码或类似的东西，但我相信，从堆转储中，我们可以找到内存泄漏或内存中可用的活动对象。我正在寻找那个选项或任何能减少堆转储的东西！

在过去的三周里，我一直在研究这个问题。任何帮助都将不胜感激。非常感谢。

Answer 1

堆转储不足以检测内存泄漏。您需要查看调用GC后两个连续堆快照的差异。或者，您需要一个分析工具，可以为每个类提供生成计数。然后，您应该只查看在GC中幸存下来并从旧快照传递到新快照的域对象（而不是字节或字符串等通用对象）。或者，如果使用分析工具，可以查找仍然存在并在多代人中不断增长的旧域对象。

对象已经存在了很多代，并且不断增长，这意味着这些对象仍然被引用，GC无法回收它们。然而，单独生活几代并不足以导致泄漏，因为缓存或静态对象可能会停留几代。另一个重要因素是它们不断增长。

在检测到哪个对象被泄露后，您可以使用堆哑来分析这些对象并获取引用。

Answer 2

首先，通过添加标志-XX:NativeMemoryTracking=summary，使JVM本机内存跟踪器能够了解内存的哪个部分在增加。根据文档，有一些性能开销（5-10%），但如果这不是问题，我建议运行JVM时启用此标志，即使在生产环境中也是如此。

然后可以使用jcmd检查这些值

如果确实分配了一大块本机内存，那么很可能是Netty分配的。

您如何在AWS中运行您的应用程序？如果它在Docker映像中运行，您可能会偶然发现这个问题：什么会导致java进程大大超过Xmx或Xss限制？如果是这种情况，如果您的应用程序使用本地内存（Netty就是这样做的）并在具有大量内核的服务器上运行，您可能需要设置环境变量MALLOC_ARENA_MAX。JVM完全有可能为Netty分配这个内存，但看不出有任何理由释放它，所以它看起来只会继续增长。

如果您想控制Netty可以分配多少本机内存，可以使用JVM标志-XX:MaxDirectMemorySize（我认为默认值与Xmx）并降低它，以防应用程序不需要那么多内存。

JVM内存优化是一个复杂的过程，当涉及本机内存时，它会变得更加复杂——正如链接的答案所示，它不像简单地设置Xms和Xmx标志并期望不再使用内存那么容易。