`

TXSeries内存泄露诊断一例

 
阅读更多
1.
前一段做过一次TXSeries内存泄露的诊断,有了诊断工具和实验室的支持,短短两天就定位了应用的类库原因。不过里面的工具需要正式的技术服务才能够获得。


2. Dumpbt工具的使用
2.1 Dumpbt原理
该脚本使得dbx绑定到指定region的所有cicsas进程。该脚本将获取所有在cmdfile(一般为malloc_common和free_common)的堆栈。
需要注意的是开启大量的dbx进程以及将dbx绑定到cicsas进程将导致较大的region性能下降,所以建议MaxServer不要太大,仅仅保留最小需要即可。
同时需要检查和增加AIX每个用户的最大进程数,保证dbx的绑定成功。

2.2 使用步骤

1. 准备工作:
a) 上传dumpbt工具,根据内附的readme说明修改$args参数;
b) 建议将MinServer与MaxServer设置为相等,且数值较少;例如MinServer=MaxServer=3。
2. createdumpbt:
执行createdumpbt.sh <region_name>;执行ps –ef | grep dumpbt将观测到针对每个cicsas进程均有相应的dumpbt进程。
3. 运行CICS交易
运行怀疑有内存泄露的交易;执行过程中dumpbt基于CICS的dbx机制,系统处于调试状态。
4. terminatedumpbtscripts:
观察cicstail日志,约半个小时后交易完成后,执行terminatedumpbtscripts.sh完成日志搜集工作。
5. 运行dumpbt_ouput分析工具:./dumpbt_ouput <dumpbt> output.txt
此时的的dumpbt搜集了系统所有的malloc和free操作;可运行dumpbt_ouput生成output文件,里面将包括怀疑有内存泄露的地址。
2.3 dumpbt日志的分析
此处参照《dumpbt日志样本.zip》中的1077426.dumpbt文件。
在dumpbt日志中,执行malloc进行内存分配的例子如下:
malloc_common(??) at 0xd011bc40
_Fancy_malloc(unsigned long)(??) at 0xd153892c
newop.operator new(unsigned long)(??) at 0xd1538440
allocate(unsigned long)(this = 0x30badaa8, size = 24), line 40 in "MemoryManagerImpl.cpp"
..

TasTA_Exec(??, ??, ??, ??, ??, ??, ??, ??) at 0xd20e5390
TasTA_Run(??, ??, ??, ??, ??, ??, ??) at 0xd22e39b4
conco_as.main(??, ??) at 0x1000152c

<<< [where] Wed Nov 16 12:15:54 CST 2011

In debuggerCommand_1 CMD = func, PATT =
malloc_common
In debuggerCommand_1 CMD = print $r3, PATT =
0x00000018 《=================内存分配的大小
In debuggerCommand_1 CMD = print $r3, PATT =
0x30f1cab8 《=================内存分配的地址

上述表明程序在地址0x30f1cab8处分配了大小为0x00000018(24字节)的内存:
如果改地址被释放,则应有相应的free操作,如下:
free_common(0x30f1cab8) at 0xd011b960
delop.operator delete(void*)(??) at 0xd1535c1c
deallocate(void*)(this = 0x30badaa8, p = 0x30f1cab8), line 54 in "MemoryManagerImpl.cpp"
xercesc_3_1::ENameMap::~ENameMap()(this = 0x30f1caa0, __dtorFlags = 0, __vtt = (nil)), line 44 in "TransENameMap.hpp"
xercesc_3_1::EEndianNameMapFor<xercesc_3_1::XMLUTF16Transcoder>::~EEndianNameMapFor()(this = 0x30f1caa0, __dtorFlags = 3, __vtt = (nil)), line 67 in "TransENameMap.c"


TasTA_Exec(??, ??, ??, ??, ??, ??, ??, ??) at 0xd20e5390
TasTA_Run(??, ??, ??, ??, ??, ??, ??) at 0xd22e39b4
conco_as.main(??, ??) at 0x1000152c

<<< [where] Wed Nov 16 12:41:14 CST 2011

In debuggerCommand_1 CMD = func, PATT =
free_common
In debuggerCommand_1 CMD = print $r3, PATT =
0x30f1cab8 《=================内存释放的地址
In debuggerCommand_1 CMD = print $r3, PATT =
0x30006c88

应用需要检查所有被分配的地址有没有被释放,如果对应的malloc没有被free,则需要怀疑此处有内存泄露(需过滤CICS内部调用的地址,参考?2.4 过滤CICS内部调用的地址)。

但往往dumpbt日志较大,此次,实验室提供了dumpbt_ouput分析工具,可筛选出没有被free的地址。
2.4 output日志的分析
此处参照《dumpbt日志样本.zip》中的output文件,共有98个内存地址。
执行./dumpbt_ouput <dumpbt> output.txt后可生成output.txt文件,会列出每一个malloc和free不匹配的记录,举例如下:

ADDR = 0x35241cf8 《=========内存分配的地址
SIZE = 0x006009a4 《=========内存分配的大小

根据提示的ADDR搜索dumpbt确认是否是应用的地址以及是否被正确释放。
(需过滤CICS内部调用的地址,参考?2.4 过滤CICS内部调用的地址)。
2.5 过滤CICS内部调用的地址
此处参照《dumpbt日志样本.zip》中的output文件,共有98个内存地址。
dumpbt_ouput工具产生的output文件包含许多CICS内部调用的地址没有被释放,按照IBM TXSeries实验室的解释,此处的内存占用属于正常情况,该地址将被后续交易中复用或在交易之外被回收,需要排除掉这些地址。
经查阅了以往的CICS内存泄露的PMR,这样的场景出现了多次,且实验室针对以往PMR的质疑在实验室进行过验证,确保类似CICS内部调用不会造成内存泄露。
11月16日 统计分析了output文件中所有98个地址,首先和X行工程师确认了97处不属于应用调用的堆栈。
11月22日 和实验室确认了下面的地址属于CICS的内部调用。
read_msg()
bde_pb_Malloc()
SupER_ConsoleMessage()
rpc_ss_client_get_thread_ctx()
rpc_ss_men_alloc()
pthread_cleanup_push_np()

“ Yes..it looks memory allocated by CICS for functional operation, all
these memory you may not see getting freed after everytime transaction
execution. You dont need to worry about these memory allocation which is
happening from CICS and it won't cause any memory leak.“


作者:张立国
分享到:
评论

相关推荐

    TXSeries培训资料

    【TXSeries培训资料】是一份全面介绍TXSeries的教育资源,主要涵盖了该软件的产品概述、安装启动、管理维护以及错误定位等方面的知识。TXSeries是IBM公司推出的一款分布式事务处理中间件,它支持多线程和多处理器...

    TXseries安装指南

    #### 一、TXseries for Multiplatforms 概述 - **产品版本**: TXseries for Multiplatforms 6.0 版本(文档编号 S151-0262-00)。 - **版权信息**: 由 International Business Machines Corporation (IBM) 出版,...

    IBM TXSeries for AIX Quick Beginning

    IBM TXSeries for AIX Quick Beginning 是一份关于如何快速入门 IBM TXSeries 在 AIX 操作系统上的文档。这份文档主要面向那些希望快速了解并部署 IBM TXSeries 的用户,提供了一系列的基础指导与建议。 #### 二、...

    TXSeries(CICS)开发培训

    TXSeries是IBM提供的一款强大的交易处理系统,主要针对大型企业级应用,特别是在金融领域广泛应用。CICS(Customer Information Control System)是TXSeries的核心组件,它为业务关键型应用程序提供了高效、可靠的...

    配置TXSeries CICS与IBM主机CICS的连接

    系统架构 系统规划 网关主机软件安装 网关主机配置 .NODE .CONNECTIVITY .LU 6.2 .权限设置 .SNA管理与维护 前置机软件安装和配置 备机软件安装与配置(接管网关) 备机软件安装与...

    IBM TXSeries for HP-UX Quick Beginning V4.2.pdf

    IBM TXSeries for HP-UX Quick Beginning V4.2 是一份详细的指南,旨在帮助用户快速掌握如何在 HP-UNIX 操作系统上安装、配置和使用 IBM TXSeries。这份文档提供了全面的技术指导和支持信息,特别适用于那些希望迅速...

    Webshere6.1 ND 在Linux下的补丁安装攻略

    WebSphere Application Server(WAS)是IBM提供的一款企业级的Java应用服务器,用于部署和管理企业级的应用程序。在WebSphere 6.1 Network Deployment(ND)版本中,为了确保系统的稳定性和安全性,定期更新和安装...

    CICS 配置实例

    TXSeries是IBM的一种分布式中间件,特别为在z/OS、Linux、AIX等平台上运行CICS而设计。它提供了跨平台的集成,使企业能够构建和运行混合云环境中的复杂应用。 配置CICS在TXSeries上的过程包括以下几个关键步骤: 1...

    CICS Application Programming Reference

    About this book This book describes the TXSeries® for Multiplatforms application programming interface (API). It contains reference information that you need when you use CICS® API commands to ...

    CICS中文手册3

    IBM TXSeries 发行说明

    cics管理指南

    - **IBM TXSeries** 是一个基于CICS的技术平台,能够为多平台环境(如Windows NT、AIX、Solaris、HP-UX等)提供一致性的事务处理能力。 #### 二、IBM TXSeries平台支持 - **Windows NT** 支持两种DCE(Distributed...

    中间件IBM-cics

    交易中间件,如TXSeries,是位于操作系统和应用程序之间的一层系统软件,它为各种应用程序提供了一个统一的基础架构。中间件的种类繁多,其中包括交易处理监视器(TPM)和面向消息的中间件(MOM)。TPM如CICS,专注...

    CICS中文手册

    IBM TXSeries 概念与功能

    EasyCICS手册

    EasyCICS是一个简化CICS/TXSeries应用接口的工具,自1999年v1.0以来受到广大用户的欢迎。它使得CICS/TXSeries成为一个更易用、高效且功能丰富的在线事务处理服务器。EasyCICS适用于那些已经熟悉或想要学习CICS/...

    定义中间件是介于应用与操作系统之间的系统软件(“支持”文档)共20张.pptx

    中间件是一种重要的系统软件,它位于应用程序和操作系统之间,扮演着承上启下的角色,为各种应用程序提供基础运行环境和支持。中间件可以被看作是一个基准平台,它为开发和运行分布式应用程序提供了必要的服务和功能...

    Vodafone利用IBM电子商务解决方案

    这个合作的核心是IBM的TXSeries中间件,它作为WebSphere应用服务器企业版的一部分,为Vodafone提供了高效且集成的计费系统。 在移动电话服务市场快速增长的背景下,Vodafone面临着提供多样化服务的压力,包括语音...

    CICS中文手册5

    TXSeries 4.2 PTF 集 AIX 发行说明

    IBM_中间件培训_CICS

    - **TXSeries**:作为CICS的一个扩展系列,TXSeries 在交易处理方面具有卓越的表现。据统计,全球《财富》100强企业中有99家都在使用IBM TXSeries (CICS),这表明了其在业界的领先地位。 ##### 2. 消息中间件MOM ...

    CICS ADMINISTRATION FOR WINDOWS

    IBM TXSeries Administration Tool是配置CICS的关键工具,它提供了一个用户友好的界面,使管理员能够轻松管理CICS的各个方面。通过这个工具,管理员可以创建和修改资源定义、设置参数以及监控系统状态。此外,该工具...

Global site tag (gtag.js) - Google Analytics