使用TCMalloc优化Nginx和mysql增强服务器高并发负载能力

TCMalloc(Thread-Caching Malloc)是google开发的开源工具──“google-perftools”中的成员。与标准的glibc库的malloc相比,TCMalloc在内存的分配上效率和速度要高得多,可以在很大程度上提高MySQL服务器在高并发情况下的性能,降低系统负载。

1、什么是TCMalloc?

TCMalloc意思是线程缓存的malloc。TCMalloc(Thread-Caching Malloc)是google开发的开源工具──“google-perftools”中的成员。与标准的glibc库的malloc相比,TCMalloc在内存的分配上效率和速度要高得多,可以在很大程度上提高服务器在高并发情况下的性能,降低系统负载。

2、TCMalloc安装

为MySQL添加TCMalloc库的安装步骤(Linux环境):

1、64位操作系统请先安装 libunwind库,32位操作系统不要安装。libunwind库为基于64位CPU和操作系统的程序提供了基本的堆栈辗转开解功能,其中包括用于输出堆栈跟踪的API、用于以编程方式辗转开解堆栈的API以及支持C++异常处理机制的API。

01
wget http://download.savannah.gnu.org/releases/libunwind/libunwind-0.99-alpha.tar.gz
02

03
tar zxvf libunwind-0.99-alpha.tar.gz
04

05
cd libunwind-0.99-alpha/
06

07
CFLAGS=-fPIC ./configure
08

09
make CFLAGS=-fPIC
10

11
make CFLAGS=-fPIC install
2、安装google-perftools:

01
wget http://google-perftools.googlecode.com/files/google-perftools-0.97.tar.gz
02

03
tar zxvf google-perftools-0.97.tar.gz
04

05
cd google-perftools-0.97/
06

07
./configure
08

09
make && make install
10

11
echo "/usr/local/lib" > /etc/ld.so.conf.d/usr_local_lib.conf
12

13
/sbin/ldconfig

注意:如果是64位系统,编译参数改为:./configure –enable-frame-pointers

3、设置并更新动态连接库

echo "/usr/local/lib" > /etc/ld.so.conf.d/usr-local-lib.conf

ldconfig

4、 MYSQL 和NGINX 编译配置

Nginx编译配置

./configure –with-http_stub_status_module –with-google_perftools_module 其他的也可以自己添加嘛。

新建目录:/tmp/tcmalloc,赋予755权限。

google_perftools_profiles /tmp/tcmalloc; 在nginx 主配置nginx.conf worker_rlimit_nofile 添加此行

重点在mysql的编译问题:

mysql编译可能加载不上TCMalloc,

1)、一种方法:直接编译TCMalloc进mysql

./configure --prefix=/usr/local/mysql --with-extra-charsets=complex --enable-thread-safe-client --enable-assembler --with-mysqld-ldflags=-all-static --with-mysqld-ldflags=-ltcmalloc --with-charset=utf8 --enable-thread-safe-client --with-big-tables --with-readline --with-ssl --with-embedded-server --enable-local-infile

2)、第二方法:去掉静态编译参数,

--with-mysqld-ldflags=-all-static ,在相关文件中添加TCMalloc加载项

./configure --prefix=/usr/local/mysql --with-extra-charsets=complex --enable-thread-safe-client --enable-assembler --with-charset=utf8 --enable-thread-safe-client --with-big-tables --with-readline --with-ssl --with-embedded-server --enable-local-infile

然后:

sudo vi /usr/local/web/mysql/bin/mysqld_safe

#在:# executing mysqld_safe下加入以下

export LD_PRELOAD=/usr/local/lib/libtcmalloc.so

最后重启下Nginx和Mysql

lsof -n | grep tcmalloc

如果显示以下说明OK,

root@wehefei:/home/jincon/lnmp1.0.2/nginx-1.0.15# lsof | grep tcmalloc

mysqld 20047 mysql mem REG 104,17 1902881 9048380 /usr/local/lib/libtcmalloc.so.0.2.2

nginx 23726 www 9w REG 104,17 0 14418049 /tmp/tcmalloc.23726

nginx 23727 www 11w REG 104,17 0 14418050 /tmp/tcmalloc.23727

nginx 23728 www 13w REG 104,17 0 14418052 /tmp/tcmalloc.23728

nginx 23729 www 15w REG 104,17 0 14418051 /tmp/tcmalloc.23729

包子的Nginx开启了四个进程,注意下。