欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  IT编程

Linux系统下自行编译安装MySQL及基础配置全过程解析

程序员文章站 2024-02-21 17:26:46
安装依赖: centos: # yum -y install wget gcc-c++ cmake make bison ncurses-devel per...

安装依赖:

centos:

# yum -y install wget gcc-c++ cmake make bison ncurses-devel perl unzip

ubuntu:(使用ubuntu下面有不少需要root权限,请注意)

复制代码 代码如下:

# sudo apt-get install -y g++ gcc make libpcre3 zlib1g libbz2-dev automake cmake perl libncurses5-dev bison

添加mysql系统用户

# groupadd mysql
# useradd -r -g mysql mysql

提前建立好相关目录

# mkdir /data/logs/mysql
# mkdir /data/mysql

下载mysql源代码:

# wget http://cdn.mysql.com/downloads/mysql-5.6/mysql-5.6.12.tar.gz

配置

# cmake \
-dcmake_install_prefix=/usr/local/server/mysql-5.6.12 \
-dmysql_datadir=/data/mysql \
-dmysql_unix_addr=/tmp/mysql.sock \
-dmysql_user=mysql \
-ddefault_charset=utf8 \
-default_collation=utf8_general_ci \
-dwith_innobase_storage_engine=1 \
-denable_downloads=1

配置释义:

-dcmake_install_prefix=/usr/local/server/mysql-5.6.12 设置安装目录
-dmysql_datadir=/data/mysql 设置数据库存放目录
-dmysql_unix_addr=/tmp/mysql.sock 设置unix socket 目录
-dmysql_user=mysql 设置运行用户
-ddefault_charset=utf8 设置默认字符集,默认latin1
-default_collation=utf8_general_ci 设置默认校对规则,默认latin1_general_ci
-dwith_innobase_storage_engine=1 添加innodb引擎支持
-denable_downloads=1 自动下载可选文件,比如自动下载谷歌的测试包
-dmysql_tcp_port=3306 设置服务器监听端口,默认3306
-dsysconfdir=/data/etc 设置my.cnf所在目录,默认为安装目录

更多参数执行 # cmake . -lh 或者查看官方说明

note:

执行过程中会出现:

cmake error: problem with tar_extract_all(): invalid argument
cmake error: problem extracting tar: /usr/local/src/mysql-5.6.12/source_downloads/gmock-1.6.0.zip

解决方法:
cd mysql目录下面会发现有一个source_downloads目录,需要解压unzip gmock-1.6.0.zip,然后再重新执行上述配置过程。当然你也可以去掉-denable_downloads=1这个选项,不编译谷歌的测试包也没有什么问题,但是之前的某些版本会出现无法编译的问题。

编译安装

# make && make install

建立链接文件,方便以后使用和升级:

# ln -s /usr/local/server/mysql-5.6.12 /usr/local/server/mysql

设置权限:

# chown -r mysql:mysql /usr/local/server/mysql
# chown -r mysql:mysql /usr/local/server/mysql-5.6.12
# chown -r mysql:mysql /data/mysql
# chown -r mysql:mysql /data/logs/mysql

初始化数据库

复制代码 代码如下:

# /usr/local/server/mysql/scripts/mysql_install_db --user=mysql --datadir=/data/mysql --basedir=/usr/local/server/mysql --collation-server=utf8_general_ci


这时候会出现以下警告,下面配置my.cnf会解决这个问题
详情请查看 mysql 5.6 中 timestamp 的变化

[warning] timestamp with implicit default value is deprecated. please use --explicit_defaults_for_timestamp server option (see documentation for more details).
配置启动项目:

# cp /usr/local/server/mysql/support-files/mysql.server /etc/init.d/mysql

修改安装目录下my.cnf,部分参数需要结合实际情况进行修改

[mysqld]
 
datadir = /data/mysql
socket = /tmp/mysql.sock
pid-file = /data/logs/mysql/mysql.pid
user = mysql
port = 3306
default_storage_engine = innodb
 
# innodb
#innodb_buffer_pool_size = 128m
#innodb_log_file_size = 48m
innodb_file_per_table = 1
innodb_flush_method = o_direct
 
# myisam
#key_buffer_size = 48m
 
# character-set
character-set-server=utf8
collation-server=utf8_general_ci
 
# name-resolve
skip-host-cache
skip-name-resolve
 
# log
log_error = /data/logs/mysql/mysql-error.log
long_query_time = 1
slow-query-log
slow_query_log_file = /data/logs/mysql/mysql-slow.log
 
# others
explicit_defaults_for_timestamp=true
#max_connections = 500
open_files_limit = 65535
sql_mode=no_engine_substitution,strict_trans_tables
 
[client]
socket = /tmp/mysql.sock
port = 3306
note:

被注释掉的部分语句,需要结合业务和硬件资源进行修改,所以先占位,使用默认值即可。my.cnf文件中不能出现拼写错误,否则,接下来启动会出现很多意想不到的错误,如果出现无法启动请参看:mysql-error.log文件。权限设置不当也会导致启动失败。

启动前,再次确认一遍权限:

很有可能现在my.cnf的权限不是mysql,同时检查一下/etc/my.cnf是否存在,如果存在则删除!!!

# chown -r mysql:mysql /usr/local/server/mysql-5.6.12

启动mysql:

# service mysql start

添加环境变量

#echo 'export path=$path:/usr/local/server/mysql/bin'>> /etc/profile

安全设置(设定初始密码,移除匿名用户,移除测试数据库):

# /usr/local/server/mysql/bin/mysql_secure_installation

添加开机启动

centos:

# chkconfig mysql on

ubuntu:

# sudo update-rc.d mysql defaults

配置须知:

mysql有大量可以修改的配置选项,通常只需要把基本的项配置正确,应该将更多的时间花在schema的优化、索引上,以及查询设计上。正确地配置mysql的基本配置项后,再花力气去修改其他配置选项的收益通常就比较小了。
过度优化的服务器导致的潜在风险很大,容易频繁崩溃、运行缓慢。
mysql大多数默认配置选项已经是最佳配置了,所以最好不要做太多的改动,上文设置的参数对于大多数人已经够多了。
没有一劳永逸的配置,随着数据库内数据、用户数量的变化,过一段时间后,可以有选择地调整数据库的配置。
基本配置选项详解:

socket = /tmp/mysql.sock
pid_file = /data/logs/mysql/mysql.pid

socket和pid_file 文件如果不指定位置,放在默认编译位置,在不同的mysql版本里可能会导致一些错误

default_storage_engine = innodb

设定默认存储引擎,创建表的时候最好显式进行存储引擎的配置

innodb_buffer_pool_size = 2g
innodb_log_file_size = 128m
innodb_file_per_table = 1
innodb_flush_method = 0_direct

innodb最重要的两个选项为缓冲池大小
innodb_buffer_pool_size和 日志文件大小innodb_log_file_size,默认值一般都太小。

如果大部分表都是innodb表,innodb缓冲池的设置或许比其他任何东西都需要内存。innodb并不仅仅缓存索引:它还会缓存数据、自适应哈系索引、插入缓冲(insert buffer)、锁,以及其他内部数据结构。innodb还使用缓冲池来帮助延迟写入,合并多个写入操作,一起顺序写回。总之,innodb严重依赖缓冲池,必须分配足够内存。

note:
缓冲池越大,预热和关闭都需要很长时间。

innodb使用日志来减少事务提交的开销。因为日志已经记录了事务,就无须在每个事务提交时把缓冲池的胀快刷新到磁盘中。innodb用日志把随机i/o变成顺序i/o。一旦日志安全写到磁盘,事务就持久化了。如果断电,innodb可以重放日志并且恢复已经提交的事务。
整体日志大小受控于innodb_log_file_size和innodb_log_file_in_group两个参数之乘积。一般需要设置几百mb甚至上gb。作为经验法则,一般日志文件全部大小,应该足够容纳服务器一小时的活动内容。

缓冲池大小设置方法:
从服务器总内存开始
减去操作系统占用内存和其他服务占用内存(如果还有其他服务的话)
减去mysql自身需要内存,例如为每个查询操作分配一些缓冲。
减去足够让操作系统缓存innodb日志文件的内存,至少是足够缓存最近经常访问的部分。再减去一些可以缓存二进制日志的最后一部分,以防止复制产生了延迟,备库可能读取主库上旧的二进制日志文件,给主库内存造成压力。
减去其他mysql缓冲和缓存需要的内存,如myisam键缓存(key_buffer_size),或者查询缓存(query cache)
处以105%,向下取舍一个合理值。

note:设置不需要很精确,而且宁可谨慎,而不要设置过大,如果设置少了20%可能只产生很小的影响,但是如果大了20%则可能造成很严重的问题:内存交换、磁盘抖动、内存耗尽和死机。

#myisam
key_buffer_size = 128m

myisam自身只缓存索引,不缓存数据(依赖操作系统缓存数据)。如果大部分为myisam表,就应该分配较大key_buffer_size。
再分配多大内存前,首先了解一下,myisam占用了多大的空间,肯定不需要分配比需要缓存的索引数据还大的内存(有时候为数据量扩增预留一些,会设置比较大)。
有两个方法计算索引大小:
使用sql语句,查询information——schema表的index_length字段,把他们相加即可。

select sum( index_length) from information_schema.tables
where engine='myisam';

使用的unix系统,则使用以下命令

# du -sch `find /mysqldatadir -name “*.myi”`

键缓存需要存储多大的值?
不要超过索引总大小,也不要超过为操作系统缓存保留的总大小。取两者较小值。

缓冲区使用率计算,通过show status和show variables命令查看以下变量:

100 - ( ( key_blocks_unused * key_cache_block_size) * 100 / key_buffer_size )

如果服务器运行很长一段时间之后,还是没有使用完所有缓冲键,就可以把缓冲键调小一点。

键缓冲命中率
从经验上来讲,每秒未命中次数更有用,假定一个磁盘每秒可以产生100个随机读,每秒5次缓存未命中则不会导致i/o繁忙,每秒80次则可能导致i/o繁忙。计算公式:

key_reads / uptime

设定默认字符集和编码

# character-set-server
character-set-server=utf8
collation-server=utf8_general_ci

以下选项设定仅使用ip来链接mysql服务器,省略了dns查询时间
阅读材料:http://dev.mysql.com/doc/refman/5.6/en/host-cache.html

# name-resolve
skip-name-resolve
skip-host-cache

设定错误日志和慢查询日志。大于1s的为慢查询

# log
log_error = /data/logs/mysql/mysql-error.log
long_query_time = 1
slow_query_log
slow_query_log_file = /data/logs/mysql/mysql-slow.log

# others
#timestamp默认设置,5.6.6后不设置会报错
explicit_defaults_for_timestamp=true

设定同时处理的最大链接,保证应用激增产生而不堪重负,当查询不能执行,那打开一个链接没有任何好处,所以被“太多链接”的错误拒绝是一个快速而代价下的失败方式。具体设定需要参考预想的最大并发数和本机配置。

max_connections = 500

table_open_cache was known as table_cache in mysql 5.1.2 and earlier.
table_open_cache应该设置足够大,避免总是重新打开和解析表定义。如果open_tables的值每秒变化很大,那么table_open_cache可能设置偏小。这个值从max_connections的10倍开始设置比较好,但是,大部分情况下不要超过10000.

table_open_cache = 5000

如果在段时间内不断有错误链接,比如:权限错误,应用配置出错等。客户端达到max_connect_errors设定次数,就会被加入黑名单,无法连接,直到再次刷新主机缓存。(如何操作?)可以有效防止暴力破解密码。

max_connect_errors = 2000

在典型的linux系统上我们把open_files_limit设置的尽可能大。现代操作系统中打开文件句柄开销都较小。如果这个参数设置不够大,会出现经典的24号错误:”too many open files”。

open_files_limit = 65535