redis数据库安装 redis持久化及主从复制
----------------------------------------安装redis-5.0.4----------------------------------------
wget http://download.redis.io/releases/redis-5.0.4.tar.gz tar zxvf redis-5.0.4.tar.gz -c /usr/local/ mv /usr/local/redis-5.0.4 /usr/local/redis cd /usr/local/redis make
修改配置文件
bind 192.168.100.101 #配置监听地址 protected-mode no #关闭保护模式,允许外网连接数据库 daemonize yes #开启以后台方式运行 logfile "/usr/local/redis/log/redis.log" #日志文件路径 dir /usr/local/redis/ #dump快照存放路径
mkdir /usr/local/redis/log;touch /usr/local/redis/log/redis.log #创建日志文件
创建命令链接
ln -s /usr/local/redis/src/redis-cli /usr/local/bin/redis ln -s /usr/local/redis/src/redis-cli /usr/local/bin/redis-cli ln -s /usr/local/redis/src/redis-server /usr/local/bin/redis-server
设置redis开机自启动
echo "redis-server /usr/local/redis/redis.conf" >> /etc/rc.local chmod +x /etc/rc.local
启动redis服务
redis-server /usr/local/redis/redis.conf
测试连接
redis-cli
安装过程可能出现的问题
1.centos默认没有安装gcc,这会导致我们无法make成功
yum install gcc-c++ -y #解决办法:yum安装开发环境
2.make时报如下错误:
zmalloc.h:50:31: fatal error: jemalloc/jemalloc.h: no such file or directory
#include <jemalloc/jemalloc.h>
^
compilation terminated.
make[1]: *** [adlist.o] error 1
make[1]: leaving directory `/root/redis-5.0.4/src'
make: *** [all] error 2
原因是jemalloc重载了linux下的ansi c的malloc和free函数
make malloc=libc #解决办法:make时添加参数
3.make之后,会出现一句提示
hint: to run 'make test' is a good idea ;)
但是不测试,通常是可以使用的;若我们运行make test ,会有如下提示
[devnote@devnote src]$ make test
you need tcl 8.5 or newer in order to run the redis test
make: ***[test] error_1
yum install tcl -y #解决办法:yum安装tcl8.5
----------------------------------------redis持久化方式----------------------------------------
rdb持久化:将reids在内存中的数据库记录定时dump到磁盘上,类似于快照功能(半持久化模式)
rdb方式配置:vim /usr/local/redis/redis.conf save 900 1 #开启rdb快照功能,在900秒内完成一个key值得变动触发快照功能,如若将所有save配置项都注释掉,那么则将关闭rdb快照功能 save 300 10 save 60 10000 stop-writes-on-bgsave-error yes #当rdb快照后台进程失败,不影响用户得写操作 rdbcompression yes #是否将rdb快照文件压缩,关闭后会增加性能 rdbchecksum no #关闭rdb快照文件的检查校验,增加性能 dbfilename dump.rdb #快照文件的名称 dir ./ #快照文件的存储路径,./为redis的安装目录下
aof持久化:append only file--原理是将reids的操作日志以追加的方式写入文件,近似实时性(全持久化模式)
aof持久化方式配置:vim /usr/local/redis/redis.conf #save 900 1 #save 300 10 #save 60 10000 appendonly yes #开启aof持久化方式 appendfilename "appendonly.aof" #指定持久化的文件 appendfsync everysec #频率,具体参数见下表 no-appendfsync-on-rewrite no #如若设置为yes,则redis执行的命令会存放到缓冲区,待系统自动同步到硬盘 auto-aof-rewrite-percentage 100 #若当前写入的aof文件达到了上次rewrite文件大小的100%,则触发rewrite操作 auto-aof-rewrite-min-size 64mb #设置aof持久化重写文件的最小值,当达到60m并且符合100%的条件时,则触发rewrite操作
选项 | 同步频率 |
always | 每一次写操作都会调用一次fsync,这时数据是最安全的,当然,由于每次都会执行fsync,所以其性能也会受到影响 |
everysec | 默认每隔一秒进行一次fsync调用,将缓冲区中的数据写到磁盘,但是当这一次的fsync调用时长超过1秒时。redis会采取延迟fsync的策略,再等一秒钟。也就是在两秒后再进行fsync,这一次的fsync就不管会执行多长时间都会进行 |
no | redis不会主动调用fsync去将aof日志内容同步到磁盘,所以这一切就完全依赖于操作系统的调试了。对大多数linux操作系统,是每30秒进行一次fsync,将缓冲区中的数据写到磁盘上 |
----------------------------------------redis主从复制----------------------------------------
同步类型:
1.全量同步:
redis全量复制一般发生在replica初始化阶段,这时replica需要将master上的所有数据都复制一份。具体步骤如下:
1)从服务器连接主服务器,发送sync命令(从服务器向主服务器初次同步时,不会影响主服务器接收客户端的请求);
2)主服务器接收到sync命名后,开始执行bgsave命令生成rdb文件并使用缓冲区记录此后执行的所有写命令;
3)主服务器bgsave执行完后,向所有从服务器发送快照文件,并在发送期间继续记录被执行的写命令;
4)从服务器收到快照文件后丢弃所有旧数据,载入收到的快照;
5)主服务器快照发送完毕后开始向从服务器发送缓冲区中的写命令;
6)从服务器完成对快照的载入,开始接收命令请求,并执行来自主服务器缓冲区的写命令;
完成上面几个步骤后就完成了从服务器数据初始化的所有操作,从服务器此时可以接收来自用户的读请求
2.增量同步:
redis增量复制是指replica初始化后开始正常工作时主服务器发生的写操作同步到从服务器的过程。 增量复制的过程主要是主服务器每执行一个写命令就会向从服务器发送相同的写命令,从服务器接收并执行收到的写命令
同步策略:
主从刚刚连接的时候,进行全量同步;全同步结束后,进行增量同步;如果有需要replica在任何时候都可以发起全量同步;redis策略是,无论如何,首先会尝试进行增量同步,如不成功,要求从机进行全量同步
注:如果多个replica断线了,需要重启的时候,因为只要replica启动,就会发送sync请求和主机全量同步,当多个同时出现的时候,可能会导致master io剧增导致宕机
建议开启master主服务器的持久化功能,避免出现master重启后,数据无法恢复;
主从配置:
master配置 vim /usr/local/redis/redis.conf min-replicas-to-write 2 #设置replica节点的数量,如果replica节点数量少于此值,那么master节点将停止客户端的一切写请求 min-replicas-max-lag 10 #master与replica之间同步数据的超时时间,若超过此时间,master节点将停止客户端的一切写操作
replica配置 vim /usr/local/redis/redis.conf replicaof 192.168.100.101 6379 #指定master的ip地址以及端口 masterauth 123123 #指定master的连接密码
验证主从复制
192.168.100.101:6379> info replication #查看复制信息