AWS JVM CPU限制上的Docker

Question

我在AWS Fargate服务上的docker容器中启动我们的Spring Boot应用程序，因此一旦CPU消耗达到100%以上，容器就会停止docker OOM--错误杀手

原因：OutofMemoryError：由于内存使用，容器被杀死

在指标上，我们可以看到CPU变得超过100%。似乎经过一段时间的分析，我们发现CPU消耗代码，但我的问题是，CPU如何能超过100%？

是否可以说JVM只使用100%？

这将为堆分配1/2的docker内存。我应该使用类似的CPU吗？我读过一篇文章https://blogs.oracle.com/java-platform-group/java-se-support-for-docker-cpu-and-memory-limits，但它告诉我们

在Java SE8U131和JDK9中，JVM对于Docker CPU限制是透明的Docker感知的。这意味着，如果-xx：paralllelgcthreads或-xx：cicompilercount未指定为命令行选项，JVM将应用Docker CPU限制作为JVM在系统上看到的CPU数量。然后，JVM将调整GC线程和JIT编译器线程的数量，就像它在裸机系统上运行一样，将CPU数量设置为Docker CPU限制。

Docker命令用于启动

docker run -d .... -e JAVA_OPTS='-XX:+UnlockExperimentalVMOptions -XX:+UseCGroupMemoryLimitForHeap -XX:+PrintFlagsFinal -XshowSettings:vm' -m=512 -c=256 ...

openjdk version "1.8.0_181"
OpenJDK Runtime Environment (build 1.8.0_181-8u181-b13-1~deb9u1-b13)
OpenJDK 64-Bit Server VM (build 25.181-b13, mixed mode)

启动过程中应用程序的一些附加信息

VM settings:
    Max. Heap Size (Estimated): 123.75M
    Ergonomics Machine Class: client
    Using VM: OpenJDK 64-Bit Server VM

ParallelGCThreads                         = 0   
CICompilerCount                          := 2
CICompilerCountPerCPU                     = true

Answer 1

我找到了我问题的答案。在https://bugs.openjdk.java.net/browse/jdk-8146115中修正了标识要使用的处理器数量的行为

CPU数量

使用number_of_cpus()和cpu_sets()的组合来确定进程可用的处理器数量，并适当地调整JVMs OS::active_processor_count。number_of_cpus()将根据cpu_quota()和cpu_perio()计算，使用以下公式:number_of_cpus()=cpu_quota()/cpu_perio()。如果已经为容器设置了cpu_shares，则将根据cpu_shares()/1024计算number_of_cpus()。1024是在基于云的容器管理软件中计算相对cpu使用量的默认和标准单位。

还要添加一个新的VM标志(-xx:ActiveProcessorCount=xx)，它允许重写CPU的数量。即使未启用UseContainerSupport,此标志也将被启用。

因此，在AWS上，通常在任务定义级别设置cpu_shares。在jvm修复之前，它的计算是错误的。

在java8版本<191:cpu_shares()/1024=256/1024=被标识为2

val version = System.getProperty("java.version")
val runtime = Runtime.getRuntime()
val processors = runtime.availableProcessors()
logger.info("========================== JVM Info ==========================")
logger.info("Java version is: {}", version)
logger.info("Available processors: {}", processors)

示例输出

"Java version is: 1.8.0_212"
"Available processors: 1"

我希望它能帮助别人，因为我在任何地方都找不到答案（spring-issues-tracker、AWS支持等）