Tomcat 6.0.28在浸泡测试期间由于线程阻塞而无响应

Question

我们对运行在Tomcat 6.0.28和OpenJDK运行时环境（IcedTea6 1.11.11）上的JavaEE Web应用程序的新版本进行了几次浸泡测试。问题发生在Web层。

一段时间后——第一次50分钟，第二次1小时，第三次2.5小时——集群Web层中的一个随机Tomcat停止响应。查看线程转储，我们看到大量线程突然阻塞。

当问题发生时，线程数从93增加到437。437个线程中的341个在WebappClassLoader上被阻止，如下所示：

"TP-Processor400" daemon prio=10 tid=0x00007f1ee432e800 nid=0x44d9 waiting for monitor entry [0x00007f1ec47c5000]
   java.lang.Thread.State: BLOCKED (on object monitor)
        at org.apache.catalina.loader.WebappClassLoader.loadClass(WebappClassLoader.java)
        - waiting to lock <0x00000006f561a758> (a org.apache.catalina.loader.WebappClassLoader)
        at org.apache.catalina.loader.WebappClassLoader.loadClass(WebappClassLoader.java:1329)

一个线程持有锁：

"TP-Processor53" daemon prio=10 tid=0x00007f1ee406f800 nid=0x7cbf runnable [0x00007f1f4545b000]
   java.lang.Thread.State: RUNNABLE
        at java.lang.ClassLoader.findLoadedClass0(Native Method)
        at java.lang.ClassLoader.findLoadedClass(ClassLoader.java:923)
        at org.apache.catalina.loader.WebappClassLoader.loadClass(WebappClassLoader.java:1386)
        - locked <0x00000006f561a758> (a org.apache.catalina.loader.WebappClassLoader)
        at org.apache.catalina.loader.WebappClassLoader.loadClass(WebappClassLoader.java:1329)

一分钟间隔内的后续线程转储表明锁正在被释放，然后由其他线程获得。2分钟后，所有被阻止的线程都被解除阻止，服务器再次正常运行。

Tomcat bug tracker报告了WebappClassLoader的死锁问题，应用程序使用自己的类加载器(https://issues.apache.org/bugzilla/show_bug.cgi?id=48694，是https://issues.apache.org/bugzilla/show_bug.cgi?的翻版id=48903)，对我们来说也是如此:我们的应用程序嵌入在一个集群化的OpenCMS安装中，该安装使用org . open CMS . ocee . base . cmsrelaodingclass loader来加载类。

当发生阻塞时，我们还看到CPU时间的GC活动从10%增加到50%,即使内存和堆在那个时候没有增加。

问题是，这种阻塞可能是由什么引起的，我们能做些什么来解决它？

Answer 1

显然，死锁的原因和修复都在错误本身的注释中。查看https://bz.apache.org/bugzilla/show_bug.cgi?id=48694的评论