`
cppmule
  • 浏览: 447118 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类

使用Google的开源TCMalloc库,提高MySQL在高并发情况下的性能

 
阅读更多

使用Google的开源TCMalloc库,提高MySQL在高并发情况下的性能



转载时请务必以超链接形式标明文章 原始出处和作者信息及本版权声明。 
链接:http://www.dbasky.net/archives/2009/02/googletcmallocmysql.html 
TCMalloc(Thread-Caching Malloc)是google开发的开源工具──"google-perftools"中的成员。与标准的glibc库的malloc相比,TCMalloc在内存的分配上效率和速度要高得多,可以在很大程度上提高MySQL服务器在高并发情况下的性能,降低系统负载。
为MySQL添加TCMalloc库的安装步骤(Linux环境):

  1、64位操作系统请先安装libunwind库,32位操作系统不要安装。libunwind库为基于64位CPU和操作系统的程序提供了基本的堆栈辗转开解功能,其中包括用于输出堆栈跟踪的API、用于以编程方式辗转开解堆栈的API以及支持C++异常处理机制的API。

wget http://download.savannah.gnu.org/releases/libunwind/libunwind-0.99-alpha.tar.gz
tar zxvf libunwind-0.99-alpha.tar.gz
cd libunwind-0.99-alpha/
CFLAGS=-fPIC ./configure
make CFLAGS=-fPIC
make CFLAGS=-fPIC install


  2、安装google-perftools:

wget http://google-perftools.googlecode.com/files/google-perftools-0.97.tar.gz
tar zxvf google-perftools-0.97.tar.gz
cd google-perftools-0.97/
./configure
make && make install

echo "/usr/local/lib" > /etc/ld.so.conf.d/usr_local_lib.conf
/sbin/ldconfig


  3、修改MySQL启动脚本(根据你的MySQL安装位置而定):

vi /usr/local/mysql/bin/mysqld_safe

  在# executing mysqld_safe的下一行,加上:
引用
export LD_PRELOAD=/usr/local/lib/libtcmalloc.so

  保存后退出,然后重启MySQL服务器。


  4、使用lsof命令查看tcmalloc是否起效:

/usr/sbin/lsof -n | grep tcmalloc

  如果发现以下信息,说明tcmalloc已经起效:
  mysqld    10847   mysql  mem       REG        8,5  1203756   20484960 /usr/local/lib/libtcmalloc.so.0.0.0   


--------------------------------------------------------------------------------

  注:2008年12月31日,修正了libunwind在x86_64位操作系统下的编译错误,TCMalloc无法加载等问题。

  涉及修改内容:
  1、libunwind的编译参数改为:
  CFLAGS=-fPIC ./configure
  make CFLAGS=-fPIC
  make CFLAGS=-fPIC install

  2、增加:
  echo "/usr/local/lib" > /etc/ld.so.conf.d/usr_local_lib.conf
  /sbin/ldconfig

  3、修改MySQL加载TCMalloc的语句:
  export LD_PRELOAD=/usr/local/lib/libtcmalloc.so
分享到:
评论

相关推荐

    MySQL 使用Google的TCMalloc库,提高MySQL的性能.docx

    与传统的glibc库中的malloc相比,TCMalloc在内存管理和分配方面表现出显著的优越性,特别是在处理高并发场景时,能够极大地提升MySQL服务器的性能,有效降低系统负载。 TCMalloc的核心设计理念是利用线程本地存储...

    nginx优化 使用Google的开源TCMalloc库

    google_perftools_profiles /tmp/tcmalloc/; events{ use epoll; worker_connections 65535; } 6:测试和运行 # /usr/local/server/nginx/sbin/nginx -t 如果显示下面信息,即表示配置没问题 nginx: the ...

    基于TCMalloc原理的C++高并发内存池设计源码

    本项目为基于TCMalloc原理设计的C++高并发内存池...该项目借鉴了Google开源的TCMalloc框架,专注于实现一个多线程环境下高效的内存管理方案,旨在提升内存分配与回收的性能,适用于深入学习和理解TCMalloc的核心机制。

    linux系统 64位下编译安装tcmalloc

    默认情况下,`libunwind`会安装在/usr/local/lib,但我们可以使用`--prefix`选项自定义安装位置,例如: ```bash ./configure --prefix=/path/to/custom/directory ``` 配置完成后,使用`make`进行编译,然后使用`...

    vs2003-tcmalloc静态链接库

    总的来说,VS2003-Tcmalloc静态链接库提供了一种在VS2003环境下优化内存管理的方法,特别适合需要高性能内存分配的多线程应用。正确理解和使用Tcmalloc,可以显著提升软件的运行效率,同时,也需要根据实际需求权衡...

    tcmalloc编译好的lib文件和dll文件

    tcmalloc是Google开发的一种高效内存分配器,它是jemalloc的变种,主要设计目标是提高多线程环境下的内存分配性能。tcmalloc通过优化内存分配过程,减少了锁的竞争,提升了大规模并发应用的性能。在这个压缩包中,...

    Tcmalloc.zip

    Tcmalloc通过优化内存分配机制,提高了多线程环境下的性能。结合Gperftools中的其他工具,开发者可以有效地调试和优化程序,减少内存泄漏,提高整体系统性能。而libunwind库则提供了强大的调用栈回溯功能,使得分析...

    控制内存增长TCMALLOC.docx

    TCMalloc是一种高性能的内存分配库,其设计目的是为了改善传统malloc函数在多线程环境下的性能表现。通过采用线程局部缓存策略,TCMalloc能够在每个线程上维护一个小的内存池,这样可以显著减少锁的竞争,进而提升多...

    Tcmalloc-v2.10

    Tcmalloc,全称为“Thread-Caching Malloc”,是Google开发的一款高效、优化的内存分配器,它被包含在gperftools库中,版本2.10提供了一系列性能优化和内存管理功能。tcmalloc的设计目标是在多线程环境中提高内存...

    高并发内存池项目原始代码,开源项目

    总结来说,这个开源项目提供了实现高并发内存池的框架,借鉴了tcmalloc的设计思想,利用基数树进行内存管理,并针对多线程环境进行了优化,旨在提高内存分配的效率和并发性能。对于想要深入理解内存管理、并发编程...

    使用google-perftools优化nginx在高并发时的性能的教程(完整版)

    标题中的“使用google-perftools优化nginx在高并发时的性能的教程(完整版)”指的是一个详细的指南,旨在教导读者如何利用Google的性能分析工具google-perftools来增强Nginx在处理高并发请求时的性能。这个过程涉及到...

    tcmalloc排查内存泄漏的方法

    tcmalloc是一种高性能的内存管理库,它可以帮助开发者检测和解决内存泄漏问题。在本文中,我们将介绍如何使用tcmalloc来排查内存泄漏的方法。 安装gperftools 首先,我们需要安装gperftools这个工具包,可以使用...

    基于numa架构的tcmalloc内存管理算法

    通过实现一个NUMA感知的堆内存管理器,使得在NUMA架构下运行的应用程序能够智能地选择内存分配位置,从而减少跨节点内存访问的次数,优化内存使用,提高应用性能。 在NUMA架构中,一个常见的系统内存架构示例是SMP...

    工作小计-性能优化-gperftools/tcmalloc/pprof

    "gperftools"、"tcmalloc"和"pprof"是Google开发的一套强大的性能分析工具,它们在优化C++应用程序的性能方面发挥着重要作用。 1. **gperftools**: gperftools是一个开源的性能分析工具集,主要包含CPU和内存剖析...

    基于C++的TCMalloc内存优化模块设计源码

    本项目为基于C++语言的TCMalloc内存优化模块的设计...TCMalloc(google-perftools)旨在优化多线程C++应用的内存分配,相比glibc 2.3的malloc具有更高的性能,特别适用于MySQL等数据库在高并发环境下的内存稳定性需求。

    libunwind-1.1.tar.gz

    在MySQL和Nginx这样的高并发服务中,准确地定位问题源头是关键,libunwind提供了强大的支持。 接下来,我们来看tcmalloc,它是Google开发的一个高效内存分配器。传统C++的malloc和free函数在多线程环境中可能会成为...

    tcmalloc库安装指南.txt

    tcmallc内存库的安装方法,然后在编译时将其静态链接到库cmimpl 。 target_link_libraries(cmimpl -pthread ) #######静态链接c++库################### SET_TARGET_PROPERTIES(cmimpl PROPERTIES LINK_FLAGS "-...

    35个Google开源项目

    Google作为全球知名的技术巨头,对开源社区的贡献不可忽视。他们已经发布了超过500个开源项目,涵盖了各种领域,从基础的编程工具到复杂的互联网应用。以下是一些可能不为人知的Google开源项目,这些项目不仅展现了...

    Mysql安全和性能配置标准

    - `my.cnf`文件不建议放在`/etc`目录下,特别是在一台机器运行多个MySQL实例的情况下。 - 示例配置: - `[client]` - `port=3306` - `socket=/tmp/mysql.sock` - `[mysqld]` - `port=3306` - `socket=/tmp/...

Global site tag (gtag.js) - Google Analytics