Jemalloc优化MySQL和Nginx
jemalloc源于jason evans 2006年在bsdcan conference发表的论文:《a scalable concurrent malloc implementation for freebsd》。jason认为phkmalloc(freebsd's previous malloc implementation by kamp (1998))没有考虑多处理器的情况,因此在多线程并发下性能低下(事实如此),而jemalloc适合多线程下内存分配管理。从2007年开始以freebsd标准引进来。软件技术革新很多是freebsd发起,在freebsd应用广泛的技术会慢慢导入到linux中。
redis 2.4版本之后,默认使用jemalloc来做内存管理;tengine也整合jemalloc。jemalloc从各方评测的结果可见与google tcmalloc都不相伯仲,皆为内存管理器领域最高水平。如下图:
最左边的就是glibc的malloc,最右边的就是jemalloc。从图表上可以看出,jemalloc的性能有glibc的两倍以上。非常压倒性的性能差异。因此,使用了jemalloc的应用程序自然会快很多。jemalloc旁边的就是tcmalloc。tcmalloc的性能与其相差甚微,低jemalloc2.1.0慢4.5%。图上和tcmalloc的1.4版本,而现在已经到2.1版本,因此实际上这两者应该是不相仲伯的。jemalloc的创始人jason evans也意识到这一点,说在cpu core 8以上的计算机上jemalloc效率更高。
mysql性能测试--jemalloc内存管理:http://www.linuxeye.com/linux/1914.html
jemalloc作为可选项已经添加到《lnmp最新源码一键安装包》
安装jemalloc
cd lnmp/src wget http://www.canonware.com/download/jemalloc/jemalloc-3.4.0.tar.bz2 tar xjf jemalloc-3.4.0.tar.bz2 cd jemalloc-3.4.0 ./configure make && make install echo '/usr/local/lib' > /etc/ld.so.conf.d/local.conf ldconfig
使用jemalloc优化mysql
方法一:
mysql/mariddb 5.5编译方法,cmake预编译时加上下面参数
-dcmake_exe_linker_flags="-ljemalloc" -dwith_safemalloc=off
方法二:
直接加载修改mysqld_safe
查找文件 /usr/local/mysql/bin/mysqld_safe
在#executing mysqld_safe 下面加上
ld_preload=/usr/local/lib/libjemalloc.so
重新启动mysql
使用下面代码自动修改mysqld_safe文件
sed -i 's@executing mysqld_safe@executing mysqld_safe\nexport ld_preload=/usr/local/lib/libjemalloc.so@' /usr/local/mysql/bin/mysqld_safe service mysqld restart
使用jemalloc优化nginx
编译nginx时添加以下参数:
--with-ld-opt="-ljemalloc"
具体实现:
cd lnmp/src/nginx-1.4.2 make clean ./configure --prefix=/usr/local/nginx --user=www --group=www \ --with-http_stub_status_module --with-http_ssl_module --with-http_flv_module \ --with-http_gzip_static_module --with-ld-opt="-ljemalloc" make && make install
验证jemalloc优化nginx是否生效,如下
lsof -n | grep jemalloc
推荐阅读