`

Tomcat Context reload 与 OutOfMemory(PermSpace)

 
阅读更多

转自:http://ayufox.iteye.com/blog/646125 

我们知道,Sun JVM分代垃圾回收器把堆空间分成3块:

  • Young Gen:年轻代,包括1个Eden区和2个Suvivor区,新创建的对象(大部分为短周期的对象)将进入这个区,虚拟机会频繁地对这个区进行垃圾回收。
  • Old Gen:年老代,当对象在Young Gen呆地足够久(经过几次的垃圾回收仍然存在)或Young Gen空间不足时,对象将进入Old Gen,由于一般是生命周期比较长的对象,因此虚拟机对这块内存的回收频度会比较低,一旦回收,使用的将是一个耗时的Full GC,另外,一旦堆空间不足时,虚拟机也会尝试去回收这个区。
  • Perm Gen:持久代,一些常量定义和类、方法声明及其bytecode都会放在这个区

      问题在于,Perm Gen又是什么样的回收策略呢?

      一直,我都以为Sun JVM对Perm Gen使用的是不垃圾回收的策略,这个观点起源于我之前的一个测试,使用Tomcat Context的reloadabled=”true”,而且项目的jar包比较多,则只要修改几次(事实上是3次)的类定义,然后Tomcat Reload之后,WOW,抛出OutOfMemory(PermSpace)的异常。
      最近,有个同事在做一个项目的时候也碰到这个问题,他是需要应用到IDC环境下的,动态根据配置生成一些新的jar包,在不重新Tomcat的情况下,利用Context的reload属性,自动把新生成的jar加载进来。我当时给他的答案是:

  • 可以使用JVMTI技术,JDK 6新引入的启动后Instrutment,在生成jar包之后,启动Attach到当前JVM,将旧的class卸栽掉(本来也可以使用JVM的debug模式——也是利用这种技术——但debug模式对性能影响会更大)。但限制比较大,类声明不允许发生变更(譬如不能新增属性、方法或者修改方法声明),事实上也不符合他当前的需求。
  • 学过ClassLoader的同学都知道,类定义一旦加载,即使你修改ClassLoader的加载方式,强制再加载一次,也是不行的,因为加载的类定义会被JVM Cache,是不允许重新再加载的。那么Tomcat reloadable是怎么做的呢?因为JVM识别两个类定义是否一致的方法是根据加载的ClassLoader和类全名(即包括package名和类名),那么Tomcat reloadable可以重新加载同一个类定义方法是,将context旧的WebappClassLoader丢弃,创建一个新的WebappClassLoader来达到加载新的类定义的。其实就是将context stop再start,所以代价非常昂贵。这种方式相当于在PermSpace又存放了一份jar定义,所以会导致PermSpace猛增。出现OutOfMemory(PermSpace),说明对旧的class没有回收,建议可以看看JVM的启动参数,有没有对PermSpace垃圾回收的选项。

        由于我之前错误的观点,我以为Sun JVM的PermSpace是不垃圾回收的,为了证明这一点,我查了一些资料;

JVM参考规范 写道
The method area is created on virtual machine start-up. Although the method area is logically part of the heap, simple implementations may choose not to either garbage collect or compact it. This version of the Java virtual machine specification does not mandate the location of the method area or the policies used to manage compiled code. The method area may be of a fixed size or may be expanded as required by the computation and may be contracted if a larger method area becomes unnecessary. The memory for the method area does not need to be contiguous.


       JVM规范并没有规定实现对方法区(PermSpace)一定要垃圾回收,“simple implementations may choose not to either garbage collect or compact it”。很不爽的”may”,当然不能作为问题的答案。
       重新猜想,也许JVM的启动参数是可以指定的,确实如此,然而确是很明确地指出我的想法是错误的:

-Xnoclassgc
Disable class garbage collection. Use of this option will prevent memory recovery from loaded classes thus increasing overall memory usage. This could cause OutOfMemoryError to be thrown in some applications.

 

      也就是说,默认情况下,JVM是会对这块区域进行垃圾回收的。难道是由于Tomcat的策略导致的?我们一步一步地来进行验证
      准备工作:建立测试项目test2(引用的jar包不要太大也不能太小,我建立的项目启动后JVM的PermSpace占用大概20M),在tomcat下配置该应用的reloadabled=”true”。
       猜测1:Tomcat废弃WebappClassLoader没有被置null,导致相应的引用类都没有非卸载。验证步骤如下(Tomcat测试版本是6.0.14):
       步骤1:启动Tomcat,并启动JConsole,监控,并dump下堆内存。
       步骤2:多次修改测试代码,引起Tomcat的reload生效,每次强制在JConsole上进行GC,并dump下堆内存。
       结果如下(JConsole监控图):
 
       可以看到,PermSpace在reload的时候,内存会有一个陡增,第一个陡增没有下降下来,第二个陡增后都可以通过GC下降下来,猜测是Tomcat对一个Context,在reload后会维持两个WebappClassLoader,一个当前的WebappClassLoader和一个历史的WebappClassLoader。我们通过jhat分析dump出来的堆文件证实了有2个WebapClassLoader这种猜测

2 instances of class org.apache.catalina.deploy.NamingResources
2 instances of class org.apache.catalina.loader.WebappClassLoader
2 instances of class org.apache.catalina.mbeans.MBeanFactory

      注意:用其他的tomcat版本做了相同的测试,6.0.20版本与此版本测试结果一致,6.0.26版本结果会比较好,只维持一个WebappClassLoader,即上面的JConsole曲线第一次上升之后也可以通过GC降下来。
      猜测2:Tomcat在新的WebappClassLoader把其他类加载进来之前,不会将旧的WebappClassLoader置null。验证步骤如下(Tomcat测试版本是6.0.14):
      我们先看一下Tomcat中context reload方法,可以看到reload其实就是一次stop和一次start

Java代码  收藏代码
  1. public synchronized void reload() {  
  2.     // Validate our current component state  
  3.     if (!started)  
  4.         throw new IllegalStateException  
  5.             (sm.getString("containerBase.notStarted", logName()));  
  6.     setPaused(true);  
  7.     try {  
  8.         stop();  
  9.     } catch (LifecycleException e) {  
  10.         log.error(sm.getString("standardContext.stoppingContext"), e);  
  11.     }  
  12.     try {  
  13.         start();  
  14.     } catch (LifecycleException e) {  
  15.         log.error(sm.getString("standardContext.startingContext"), e);  
  16.     }  
  17.     setPaused(false);  
  18. }  

 

       步骤1:将tomcat的JVM启动参数中设置调试模式,在StanardContext的reload的start那里设一个断点,确保start之前会停住,我们将观察这种时候进行垃圾回收能否将PermSpace空间回收
       步骤2:启动JConsole,attach到Tomcat进程上
       步骤3:修改测试代码,引起Tomcat的reload生效,在第二次reload  start停止的时候,使用JConsole强行做一个垃圾回收(注意,如果是6.0.26版本,应该在第一次reload的时候观察)
        可以看到JConsole的图如下
 
       可以看到,在start停住的时候,我们进行一个GC后,PermSpace会有一个陡降,说明在stop的时候,已经会把WebappClassLoader中的内存释放掉
       猜测3:JVM在PermSpace空间不足的时候,并不会试图先去回收PermSpace
       一般情况下,我们当然无法在start之前停住,即使在这个阶段强行做一个System.gc(),然而gc的调用无法预料的,假设在start之前PermSpace内存没有被释放,而start的时候又会在PermSpace分配大量的内存,如果此时PermSpace空间不足,是否会引起JVM对PermSpace进行垃圾回收呢?
       验证步骤如下(Tomcat测试版本是6.0.14):
       步骤1:从上面我们可以看到,2个WebappClassLoader及其他classloader加载的类占用的PermSpace空间大概是25M,因此我们在启动参数中设置PermSpace最大的空间值为26M(-XX:MaxPermSize=26MB)
       步骤2:修改测试代码,引起reload,在第2次reload的时候。WOW,OutOfMemory

Caused by: java.lang.OutOfMemoryError: PermGen space
at java.lang.ClassLoader.defineClass1(Native Method)
at java.lang.ClassLoader.defineClass(ClassLoader.java:620)
at java.security.SecureClassLoader.defineClass(SecureClassLoader.java:124)

       可以看到,非常遗憾,JVM在PermSpace空间不足的时候,并不会先主动去释放PermSpace空间。
       我们可以得出如下结果:

  • 对于Tomcat6.0.20及以下版本,要保证reload的时候不出现OutOfMemory的错误,必须维持PermSpace空间为:其他loader加载的类定义占的空间+3 * 应用类占的空间(WebappClassLoader加载)
  • 对于Tomcat6.0.26及以下版本,要保证reload的时候不出现OutOfMemory的错误,必须维持PermSpace空间为:其他loader加载的类定义占的空间+2 * 应用类占的空间(WebappClassLoader加载)
分享到:
评论
2 楼 mwxx 2014-12-10  
1 楼 keiki 2013-09-24  

相关推荐

    让MyEclipse里的Tomcat自动Reload

    让MyEclipse里的Tomcat自动Reload

    解决Tomcat在修改代码后不会自动reload的问题

    1.找到使用的Tomcat安装目录conf配置文件夹下context.xml文件 2.找到<Context>节点,改为<Context reloadable=”true”>,如下图所示 3.重启Tomcat,任意修改一个类文件内容,即会自动reload。 注意:如果是用...

    tomcat之Linux版

    【标题】"Tomcat在Linux环境下的部署与配置" 【正文】 Tomcat是Apache软件基金会的Jakarta项目中的一个核心项目,它是一个开源的、免费的Web应用服务器,主要用于Servlet和JSP的运行。在Linux操作系统上部署和管理...

    Linux(CentOS7)安装Tomcat与设置Tomcat为开机启动项(tomcat8为例)

    如果看到与示例类似的输出,说明Tomcat已经运行。 ``` ps -ef | grep tomcat ``` 5. **访问Tomcat**:使用浏览器访问服务器的IP地址加端口号(默认为8080),如`http://your_ip:8080`,若能正常显示Tomcat的欢迎...

    spring boot项目和vue一起放在tomcat部署

    在上面的配置中,我们添加了一个名为 "/bbsb" 的 Context,该 Context 的部署路径是 "D:\\apache-tomcat-8.5.32\webapps\bbsb",并且该 Context 是可 reload 的。 访问日志的配置 在 Tomcat 服务器中,我们可以...

    linux环境下tomcat的启动、关闭及常见问题

    4. **内存不足**:如果出现`Out of Memory`错误,可能需要调整JVM的内存设置。在`bin/catalina.sh`文件中,找到`CATALINA_OPTS`行,添加或修改内存参数,如`-Xms1024m -Xmx2048m`。 5. **日志分析**:通过查看`...

    apache-tomcat7 linux

    Apache Tomcat7是一款广泛应用的开源Java Servlet容器,用于部署和运行Java Web应用程序。在Linux操作系统上安装Apache Tomcat7是一个常见的任务,对于那些需要在服务器上构建基于Java的Web服务的人来说至关重要。...

    apache-tomcat-6.0.44-windows-x64

    2. `conf`目录:存放Tomcat的配置文件,如`server.xml`(定义了服务器的配置)、`web.xml`(全局Web应用程序配置)、`context.xml`(用于配置特定的应用上下文)等。 3. `lib`目录:包含运行Tomcat所需的各种库文件...

    centOS7设置Tomcat8开机启动

    在Linux系统中,尤其是CentOS 7,配置Apache Tomcat 8作为开机启动服务是确保服务器启动时自动运行Web应用程序的关键步骤。这个过程对于软件实施工程师来说非常重要,因为它可以简化维护工作,避免每次系统重启后...

    Tomcat 6 Linux版

    【标题】:Tomcat 6在Linux环境下的安装与配置 Tomcat 6是一款流行的开源Java Servlet容器,用于运行Web应用程序,尤其是基于Java的Web应用。Linux作为一款稳定性极强的操作系统,是许多服务器的首选平台。在Linux...

    apache-tomcat-8.5.55.tar.gz

    Apache Tomcat是一款开源的Java Servlet容器,用于部署和运行Java Web应用程序。在Linux系统中安装`apache-tomcat-8.5.55.tar.gz`文件的过程涉及多个步骤,包括下载、解压、配置和启动服务。以下是详细的安装和配置...

    最新版linux apache-tomcat-9.0.37.tar.gz

    9. **监控与日志**:Tomcat的日志文件位于 `$CATALINA_HOME/logs` 目录下,可以通过查看这些日志来诊断和解决问题。 10. **应用部署**:将Java Web应用(WAR文件)放入 `$CATALINA_HOME/webapps` 目录下,Tomcat会...

    apache-tomcat-8.5.69.zip

    2. **conf**:这是Tomcat的配置目录,包含所有必要的配置文件,如`server.xml`(定义服务器的全局配置)、`web.xml`(默认的Web应用程序部署描述符)以及`context.xml`(用于特定应用的配置)。 3. **lib**:包含...

    tomcat-7.0服务器

    - **内存配置**:合理分配JVM堆内存,避免Out of Memory错误。 - **启用GZIP压缩**:减少网络传输数据量,提高响应速度。 - **日志管理**:限制日志级别,避免不必要的性能消耗。 4. **安全性** - **SSL/TLS...

    centos设置tomcat开机自启动

    ### CentOS 设置 Tomcat 开机自启动 #### 一、前言 在生产环境中,为了确保应用服务器能够稳定运行,我们通常需要配置应用服务器在系统重启后自动启动。本篇文章将详细介绍如何在CentOS环境下配置Tomcat服务器实现...

    tomcat 7.0源码

    2. **Context reload**:使用管理工具或API触发应用的重新加载,实现热部署。 通过深入学习Tomcat 7.0的源码,开发者不仅可以理解Web服务器的工作原理,还能掌握如何优化服务器性能,提升应用的运行效率,同时对...

    tomcat 6.0

    【Tomcat 6.0详解】 Tomcat 6.0是Apache软件基金会的Jakarta项目下的一个开源Java Servlet容器,它是实现Java Servlet和JavaServer Pages(JSP)规范的主要工具。Tomcat以其轻量级、高效能和易用性而闻名,是许多...

    tomcat-7.0.52.tar.gz 【linux】

    安装tomcat 1.下载tomcat 2.上传到linux 3.新建一个文件夹 mkdir /usr/local/tomcat 4.移动或者复制 tomcat...tar.gz 到 /usr/local/tomcat mv apache-tomcat-7.0.52.tar.gz /usr/local/tomcat/ 5.进入/usr/...

    LiveReload.rar

    在现代前端开发中,实时预览(LiveReload)是一个非常重要的功能,它允许开发者在代码保存后立即看到页面更新,极大地提高了工作效率。本资源“LiveReload.rar”是针对使用Visual Studio Code(简称VS Code)进行...

Global site tag (gtag.js) - Google Analytics