java OOM创建2个10亿整数的数组

Question

我用java写了一个简单的程序来创建2个10亿大小的整型数组。我用-Xms10G，也就是10GB的内存运行这个程序，但还是出现了OOM错误。下面是片段。

public class TestBigIntArraySize {
  public static int arraySize = 1000_000_000;
  public static int [] firstArray = new int[arraySize];
  public static int [] secondArray = new int[arraySize];

  public static void main(String[] args) {
    System.out.println(1000_000_000 * Integer.SIZE);
  }
}

就我所能想到的10亿int数组使用的内存应该是system . out . println(1000 _ 000 _ 000 * Integer。尺寸)；它返回小于2GB的1，935，228，928。所以我的程序的总需求是最大4GB。

即使在方法调用中创建数组并返回数组或static（如下所示）或main（）内部，也会出现错误。它工作所需的内存是12G，这是我预期的3倍。我正在使用oracle java:jdk1.8.0_201

我尝试了选项——xms 10g-XX:new ratio = 1——这很有效。

但我想进一步减少内存占用。

我尝试通过-Xms9G-XX:NewRatio=0.5为eden提供更多内存，但java抱怨参数非法。

我尝试了通过-Xms9G-XX： NewRatio=1-XX： PREenureSizeThreshold=10000直接将数组分配给旧gen的选项。但这也给了OOM。

这只是一个实验项目，我只是操纵阵列的位置。我想在尽可能短的时间内完成。有人能建议如何去做吗？有哪些java选项，为什么？

Answer 1

和这里一样的问题。

在默认使用并行GC的JDK 8中，10 GB堆被分成6.67 GB旧代3.33 GB年轻代。因此，没有空间容纳两个连续的3.72 GB块（10亿四字节整数）。

解决这个问题最简单的方法是打开G1 GC，完全避免复杂的世代规模。然后，您的示例将使用8 GB堆:

java -XX:+UseG1GC -Xmx8g TestBigIntArraySize

Answer 2

因此，假设倍数位长度可能不是获取字节计数的最佳方法。正如@mayamar提到的，您的实际内存使用量约为2 * 4 GB。

无论如何，让我们进入实际的调谐短语。4GB可能太大了，将直接存储在老一代中。因此，您需要增加旧的基因大小。更改新的世代设置可能会起作用，但这是...好吧，你实际上是在关闭老一代。它可能会损害测试用例的其他部分。

您尝试< code>NewRatio=1使新旧gen比率为1:1，而不是更好的比率，例如1:100。然而，如果这个比率太大，JVM可能无法启动(在VM初始化期间进行GC)。最好用< code>MaxNewSize来指定它。

最后，运行与此类似的程序将非常接近您的“最小化内存占用”要求。

java -Xmx8400000000 -XX:MaxNewSize=30M -XX:OldSize=8300000000 TestBigIntArraySize 

注意：最好节省几十兆字节，因为JVM本身需要内存才能运行。如果您的程序不像您的MVCE那么小，如果您不希望GC不时地启动，则需要留出更多的空间。