【J2EE性能分析篇】JVM参数对J2EE性能优化的影响【转】
一切J2EE应用都是基于JVM的,那么对于JVM的设置和监控,成为J2EE应用程序性能分析和性能优化的必然手段。今天Sincky和大家交流该话题。这里以Tomcat环境为例,其它WEB服务器如Jboss、Weblogic、Websphere完全一致。
【认识JVM】
首先我们来看一张图,这是目前JDK1.6版本自带的JVM性能监控工具VisualVM的一个插件VisualGC的显示情况。让我们先来了解JVM的内存堆Heap管理模式,要调整JVM,自然要知道它的内部结构和运作,此乃“知己知彼,百战不殆”!
JVM的Heap包括三部分,分别是Permanent Generation(简称PermGen)、New Generation和Tenured Generation(又叫Old )。
PermGen是JVM自用的区域,是内存的永久保存区,用于存放反射代理和Class,Class在被装载时就会被放到PermGen中;所以如果WEB服务器里应用的Class相当多时,就可以考虑将这一块区域放大一些。
New和Old是Java应用的Heap区,用来存放类的实例Instance的;其中New Generation的目标就是尽可能快速的收集掉那些生命周期短的对象;New Generation又分为Eden Space,From Space和To Space三块,Eden Space用于存放新创建的对象,From区和To区都是救助空间Survivor Space(图中的S0和S1);当Eden区满时,JVM执行垃圾回收GC(Garbage Collection),垃圾收集器暂停应用程序,并会将Eden Space还存活的对象复制到当前的From救助空间,一旦当前的From救助空间充满,此区的存活对象将被复制到另外一个To区,当To区也满了的时候,从From区复制过来并且依然存活的对象复制到Old区,从而From和To救助空间互换角色,维持活动的对象将在救助空间不断复制,直到最终转入Old域。需要注意,Survivor的两个区是对称的,没先后关系,所以同一个区中可能同时存在从Eden复制过来对象,和从前一个Survivor复制过来的对象,而且,Survivor区总有一个是空的。同时,根据程序需要,Survivor区是可以配置为多个的(多于两个),这样可以增加对象在年轻代中的存在时间,减少被放到年老代的可能。每一次垃圾回收后,Eden Space都会被清空。
Old区用于存放长寿的对象,在New区中经历了N次垃圾回收后仍然存活的对象,就会被放到Old区中;如那些与业务信息相关的对象,包括Http请求中的Session对象、线程、Socket连接,这类对象跟业务直接挂钩,因此生命周期比较长。当任何一个空间不够用时,都会促使JVM执行垃圾回收,而垃圾回收也需要消耗一定的时间,从而造成应用程序卡住;因此,合理的设置各个区的大小,可以进行快速GC即Mimor GC,避免频繁的Full GC。
所谓Minor GC,一般情况下,当新对象生成,并且在Eden申请空间失败时,就会触发Minor GC,对Eden区域进行GC,清除非存活对象,并且把尚且存活的对象移动到Survivor区,然后整理Survivor的两个区。这种方式的GC是对New区的Eden区进行,不会影响到Old区。因为大部分对象都是从Eden区开始的,同时Eden区不会分配的很大,所以Eden区的Minor GC会频繁进行。因而,一般在这里需要使用速度快、效率高的算法,使Eden去能尽快空闲出来。
而Full GC要对整个Heap区进行回收,包括New、Old和PermGen,所以比Minor GC要慢,因此应该尽可能减少Full GC的次数。在对JVM性能调优的过程中,很大一部分工作就是对于Full GC的调节。有如下原因可能导致Full GC:
·Tenured区被写满
·PermGen区被写满
·System.gc()被显示调用
·上一次GC之后Heap的各域分配策略动态变化
【JVM参数实例一】JVM PermGen溢出:
java.lang.OutOfMemoryError PermGen space
由于GC不会在主程序运行期对PermGen进行清理,所以如果你的应用中有很多CLASS的话,就很可能出现PermGen space错误,这种错误常见在WEB服务器对JSP进行预编译的时候发生。如果你的WEB APP下都用了大量的第三方JAR包, 其大小超过了JVM默认的大小(4M)那么就会产生此错误信息了。
解决方法: 手动设置MaxPermSize大小。修改TOMCAT_HOME/bin/catalina.bat,在echo Using CATALINA_base:%CATALINA_base%上面加入以下行:
JAVA_OPTS=%JAVA_OPTS% -server -XX:PermSize=64M -XX:MaxPermSize=128m
建议:将相同的第三方jar文件移置到tomcat/shared/lib目录下,这样可以达到减少jar 文档重复占用内存的目的。
【JVM参数实例二】JVM Heap溢出:
java.lang.OutOfMemoryError: Java heap space
JVM Heap堆的设置是指java程序运行过程中JVM可以调配使用的内存空间。JVM在启动的时候会自动设置Heap size的值,其初始空间(即-Xms)是物理内存的1/64,最大空间(-Xmx)是物理内存的1/4。可以利用JVM提供的-Xmn -Xms -Xmx等选项可进行设置。提示:在JVM中如果98%的时间是用于GC且可用的Heap大小不足2%的时候将抛出此异常信息。Heap最大不要超过可用物理内存的80%,一般的要将-Xms和-Xmx选项设置为相同,而-Xmn为1/4的-Xmx值。
解决方法:手动设置Heap size,例如:
JAVA_OPTS=%JAVA_OPTS% -server -Xms800m -Xmx800m
但是有的时候可能这样的设置还会不生效,例如当JVM加载大量Class类时,永久域中的对象急剧增加,从而
使JVM不断调整永久域大小。为了避免自动调整,可以使用前面的参数结合设置,如:
JAVA_OPTS=%JAVA_OPTS% -server -Xms800m -Xmx800m -XX:PermSize=64m -XX:MaxPermSize=128m
基于Sun 的Java的垃圾回收机制,允许分隔内存池以包含不同时效的对象,垃圾回收循环根据时效收集与其他对象彼此独立的对象。使用其他参数,您可以单独设置内存池的大小。为了实现更好的性能,可以对包含短期存活对象的池的大小进行设置,以使该池中的对象的存活时间不会超过一个垃圾回收循环。新生成的池的大小由 NewSize和MaxNewSize参数确定。如:
JAVA_OPTS=%JAVA_OPTS% -server -Xms800m -Xmx800m -XX:PermSize=64m -XX:MaxPermSize=128m -XX:NewSize=8m -XX:MaxNewSize=16m
【JVM参数实例三】垃圾回收时promotion failed:
这个问题一般由两种原因引起,第一个原因是Survivor空间不够,里面的对象还不应该被移动到Old区,但New区又有很多对象需要放入Survivor;第二个原因是Old区没有足够的空间接纳来自New区的对象;这两种情况都会转向Full GC,造成系统卡住时间较长。第一个原因可以通过去掉救助空间解决,设置-XX:SurvivorRatio=65536 -XX:MaxTenuringThreshold=0即可,第二个原因可以设置CMSInitiatingOccupancyFraction为某个值(假设70),这样Old区的70%时就开始执行CMS,Old区有足够的空间接纳来自New的对象。但是不管怎样,PermGen还是会逐渐变满,所以隔三差五重起java服务器是必要的。需要注意的是,Old区用的是并发回收,可以设置New区小一点,Old区大些,可以减少系统的卡住。
解决方法:
$JAVA_ARGS .= " -Dresin.home=$SERVER_ROOT -server -Xms6000M -Xmx6000M -Xmn500M -XX:PermSize=500M -XX:MaxPermSize=500M -XX:SurvivorRatio=65536 -XX:MaxTenuringThreshold=0 -Xnoclassgc -XX:+DisableExplicitGC -XX:+UseParNewGC -XX:+UseConcMarkSweepGC -XX:+UseCMSCompactAtFullCollection -XX:CMSFullGCsBeforeCompaction=0 -XX:+CMSClassUnloadingEnabled -XX:-CMSParallelRemarkEnabled -XX:CMSInitiatingOccupancyFraction=90 -XX:SoftRefLRUPolicyMSPerMB=0 -XX:+PrintClassHistogram -XX:+PrintGCDetails -XX:+PrintGCTimeStamps -XX:+PrintHeapAtGC -Xloggc:log/gc.log"
-XX:SurvivorRatio=65536 -XX:MaxTenuringThreshold=0 就是去掉了救助空间
-Xnoclassgc 禁用类垃圾回收,性能会高一点
-XX:+DisableExplicitGC 禁止System.gc(),免得程序员误调用gc方法影响性能
-XX:+UseParNewGC 对New采用多线程并行回收,这样收得快
带CMS参数的都是和并发回收相关的:
CMSInitiatingOccupancyFraction,这个参数设置有很大技巧,基本上满足(Xmx-Xmn)*(100-CMSInitiatingOccupancyFraction)/100>=Xmn 就不会出现promotion failed。在这里Xmx是6000,Xmn是500,那么Xmx-Xmn是5500m,也就是Old有5500m,CMSInitiatingOccupancyFraction=90说明Old到90%满的时候开始执行对Old区的并发垃圾回收(CMS),这时还剩10%的空间是5500*10%=550m,所以即使Xmn(也就是New共500m)里所有对象都搬到Old里,550兆的空间也足够了,所以只要满足上面的公式,就不会出现垃圾回收时的promotion failed。
SoftRefLRUPolicyMSPerMB这个参数是softly reachable objects will remain alive for some amount of time after the last time they were referenced. The default value is one second of lifetime per free megabyte in the heap。
但是,这种设置方法因为没有用到Survivor,所以Old区容易满,CMS执行会比较频繁。建议还是用Survivor并把加大,这样也不会有promotion failed错误。配置上32位和64位不一样,64位系统只要配置MaxTenuringThreshold参数,CMS还是有暂停。为了解决暂停问题和promotion failed问题,最后我设置-XX:SurvivorRatio=1 ,并把MaxTenuringThreshold去掉,这样即没有暂停又不会有promotoin failed,而且更重要的是,Old区和PermGen上升非常慢(因为好多对象到不了年老代就被回收了),所以CMS执行频率非常低,好几个小时才执行一次,这样,服务器都不用重启了。下面是64位的配置,系统8G内存。
-Xmx4000M -Xms4000M -Xmn600M -XX:PermSize=500M -XX:MaxPermSize=500M -Xss256K -XX:+DisableExplicitGC -XX:SurvivorRatio=1 -XX:+UseConcMarkSweepGC -XX:+UseParNewGC -XX:+CMSParallelRemarkEnabled -XX:+UseCMSCompactAtFullCollection -XX:CMSFullGCsBeforeCompaction=0 -XX:+CMSClassUnloadingEnabled -XX:LargePageSizeInBytes=128M -XX:+UseFastAccessorMethods -XX:+UseCMSInitiatingOccupancyOnly -XX:CMSInitiatingOccupancyFraction=80 -XX:SoftRefLRUPolicyMSPerMB=0 -XX:+PrintClassHistogram -XX:+PrintGCDetails -XX:+PrintGCTimeStamps -XX:+PrintHeapAtGC -Xloggc:log/gc.log
【JVM启动参数介绍】
-Xmn -Eden Generation的Heap大小,一般设置为Xmx的1/3或1/4
-Xmx -设置JVM Heap大小最大值,这里的heap = New Generation + Old Generation,但不包括PermGen
-Xms -设置JVM Heap大小初始值
-XX:NewRatio -New/Old的大小比率
-XX:NewSize -New Generation Heap的大小
-XX:MaxNewSize -可以通过NewRatio和-Xmx计算得到
-XX:SurvivorRatio -Eden/Survivor Space大小比率
-XX:PermSize -PermGen的初始值
-XX:MaxPermSize -PermGen最大值
-Xss: -设置每个线程的Stack大小
-XX:+UseParNewGC -表示多CPU下缩短Minor GC的时间
-XX:+UseParallelGC -设置后可以使用并行清除收集器【多CPU】
-XX:+ParallelGCThreads -可用来增加并行度【多CPU】
-XX:+AggressiveOpts -是否激活最近的试验性性能调整
-XX:-Xnoclassgc -是否允许类垃圾收集,默认设置是允许类 GC
-XX:+UseLargePages -
是否支持大页面堆
-XX:+UseFastAccessorMethods -在指定了这个参数后,JDK会将所有的get/set方法都转为本地代码
-XX:+UseConcMarkSweepGC -缩短major收集的时间,此选项在Heap比较大而且Full GC时间较长的情况下使用更合适
另外,JVM的一些参数可以输出有效的日志文件:
-verbose:gc -输出一些gc信息
-XX:+PrintGCDetails -输出gc详细信息
-XX:+PrintGCTimeStamps -包含时间戳信息
-XX:+PrintHeapAtGC -包括gc前后Heap状况
-XX:+PrintTenuringDistribution -输出对象存活时间和Tenured Generation的其他信息
-XX:+PrintHeapUsageOverTime -以时间戳输出heap利用率和容量信息
-Xloggc:filename -输出gc信息到日志文件
例如:
set JAVA_OPTS=%JAVA_OPTS% -verbose:gc -Xloggc:gc.log -XX:+PrintGCDetails -XX:+PrintGCTimeStamps -XX:+PrintHeapAtGC
如果输出的日志文件非常大,可以后续采用其它工具分析;或者干脆使用Jstat或Jconsole这些成熟的工具直接监控JVM的GC问题。当然,前边图示的VisualVM更是一款漂亮的、即时监控JVM GC的工具。
下面的命令把整个堆设置成128m,New/Old比率设置成3,即New与Old比例为1:3,New Space为Heap的1/4即32M, 缺省值为NewSize=2m MaxNewSize=32m SurvivorRatio=2
java –Xms128m –Xmx128m –XX:NewRatio=3
但是,如果JVM的堆Heap大小大于1GB,则应该使用值:-XX:newSize=640m -XX:MaxNewSize=640m -XX:SurvivorRatio=16,或者将堆的总大小的50%到60%分配给新生成的池。
【JVM性能瓶颈】
在JAVA应用程序中,虽然不太容易出现内存泄漏的问题,因为JVM会不定期的进行垃圾回收。但是因为程序的不合理写法,也会导致一些数据不能被收集。典型的状况是在HashMap中放置大量不用的数据,而没有及时的清理。在web应用中,很多人喜欢在Session放放置状态数据,而没有清理,也是内存泄漏的一个原因。在Session中存放数据还好,因为Session终究会有过期时间,但是如果在Class的Static变量中放置数据,那就怎么样也没办法了。诊断应用中是否存在内存泄漏也有一些方法,通过分析JVM GC Log就是一个直观的方式。通过分析GC After Heap的变化趋势,如果GC After Heap稳步上升,立刻进行Full GC后,仍然不能降下来,通常就意味着存在内存泄漏了。当然也有情况是,的确有一些数据是应用程序的需求,我们要确认除了这些数据,是否还存在一些异常数据一直占据内存。可以通过JProbe的Memory Views来观察Class的对象数,在一段请求过后,如果还存在一些Class的Instance数目相当多,就可以判断这个Class可能会是问题的根源。
相关推荐
5.1 组织知识收集的主要途径、方法: 主要是通过会议、工作总结、网络、报纸杂志刊物、调研考察、电话、传真、工作检查、意见箱、合理化建议、信件、交谈、咨询等方面搜集。 5.1.1 搜集相关方组织知识重点: 主要...
6. 知识更新与维护:随着时间推移,知识会不断变化,模型需要定期更新以保持其时效性。 在"第二讲 知识表示和知识建模"的课程中,你可能学习了如何选择合适的知识表示技术,如何设计和实施知识建模项目,以及如何...
2.1 数据收集:根据需求选择合适的数据源,进行大规模数据的抓取和清洗,确保数据质量。 2.2 知识抽取:利用NLP(自然语言处理)技术,从文本中识别出实体和关系,如命名实体识别、关系抽取等。 2.3 图谱构建:将...
6. **权限管理**:为了保护知识创作者的权益,系统需要实现权限控制,如内容加密、下载限制、会员等级等。源码中这部分可能涉及到权限验证和访问控制策略。 7. **内容管理**:包括内容上传、分类、审核、推荐等功能...
* 采用众包的方式,收集带标注的训练集数据 * 可以查看训练集的分布,防止训练集不平衡 四、系统架构 1. 语料库大小:50GB+ * 实体数量:33W+ * 关系数量:45W+ 关键问题: * 如何获取大规模语料库? * 如何训练...
6. **持续优化**:由于大数据环境下的数据具有动态变化的特性,因此领域知识结构模型也需要定期更新和完善,以保持其时效性和准确性。 #### 结论 本文提出的面向知识服务的领域知识结构研究,旨在解决大数据环境下...
该系统将收集、整理和管理与鱼类病害防治相关的知识,并将其组织成为知识图谱,以便用户能够更加方便地获取和利用这些知识。 知识点1:知识图谱技术 知识图谱是一种将知识组织在一起并形成语义上相关的结构的方法...
企业知识管理(Knowledge Management, KM)是指企业通过一系列策略和技术手段来收集、整理、存储、分享以及应用组织内外的知识资源,以提高企业的创新能力、决策效率及竞争力的过程。企业知识管理不仅涉及到信息技术...
* 知识管理:知识图谱可以用于知识的收集、存储、共享和应用,提高知识的利用效率和价值。 * 人工智能:知识图谱可以作为人工智能的知识来源,用于机器学习、自然语言处理等应用。 * 自然语言处理:知识图谱可以用于...
6. **用户交互**:确保设计的界面符合用户习惯,提供良好的反馈机制,如悬停提示、点击反馈等,使用户在操作过程中感到顺畅。 7. **可扩展性**:设计时应考虑到未来的扩展性,预留接口以便添加新功能,如用户评论、...
知识管理是指企业通过系统化的方式收集、组织、分享和利用其内部及外部的知识资源,以提高决策质量、促进创新、提升效率并创造竞争优势的过程。 ### 一、知识的价值 知识被视为现代企业的无形资产,它涵盖了员工的...
诉讼过程中,证据的收集和法律策略的制定显得尤为关键。 总结来说,"知识产权法课件"旨在提供一个全面了解和掌握知识产权法的平台,内容可能包括以上各个方面的详细讲解,帮助学习者理解知识产权的法律架构,提高对...
Neo4j+vue+flask+mysql实现的知识图谱项目源代码+数据库——红色文化之张学良人物知识图谱...互联网上搜集数据,本项目基于百度百科的数据,进行搜集并绘制初始的知识图谱,并搜集到了十种关系类别。并建立 second.csv
信息管理关注的是数据的收集、存储和传递,而知识管理则更注重于对信息的提炼和转化,形成更有价值的知识。例如,通过商业智能或数据挖掘技术,可以从大量信息中提取出对企业决策有指导意义的业务知识和内部管理知识...
同时,附件2提供了客户服务知识收集模板,方便标准化收集与整理知识信息。 #### 6. 积分管理与维护 规范中还提到了积分管理,鼓励员工积极参与知识管理,通过积分激励机制提高知识贡献的积极性。此外,明确了管理...
J2EE知识(真心收集好文),学习Java必看的
6. **数据存储**:"mysite.rar"和"计算机基础知识试题.rar"可能是网站源代码或者相关学习资料的压缩包,涉及到文件系统、数据备份和恢复、数据库基础等内容。 7. **计算机基础理论**:"大学计算机基础教材(PDF)...