Heap OOM故障实例1

故障描述：

线上系统运行过程中出现OOM异常，导致jvm crash。

系统运行在IBM AIX上，通过IBM heap工具分析得到结果，如下图所示：

 

java应用日志分析：

1.通过查看应用日志，发现在某个时间点jvm heap内存出现异常：内存使用不断上升直至溢出。

2.由于系统特性使然，heap内存分配为64M，通过上图可以发现，异常时mina框架的MessageWriteRequest对象已经占用了61M左右的heap，导致溢出。

 

故障分析：

通过跟踪mina源程序，发现是由于大量消息阻塞的消息queue中，无法发送也没有及时清除，最终导致heap内存溢出。

 

评论

3 楼 charles751 2013-02-26  

由于是agent软件，所以不能分配太多的内存。
我只做了BUG的分析定位，暂时不需要我来解决。

2 楼 freezingsky 2013-02-25  

一方面服务端分配的内存实在是太少了。另外，楼主都已经找到了问题的根源，无法清除也无法发送，那怎么不把解决的方法一并告知呢？

1 楼 richard_2010 2013-02-25  

64M的内存啊。。。。