一、什么是redis主从复制?
主从复制,当用户往Master端写入数据时,通过Redis Sync机制将数据文件发送至Slave,Slave也会执行相同的操作确保数据一致;且实现Redis的主从复制非常简单。
二、redis主从复制特点
1、同一个Master可以拥有多个Slaves。
2、Master下的Slave还可以接受同一架构中其它slave的链接与同步请求,实现数据的级联复制,即Master->Slave->Slave模式;
3、Master以非阻塞的方式同步数据至slave,这将意味着Master会继续处理一个或多个slave的读写请求;
4、Slave端同步数据也可以修改为非阻塞是的方式,当slave在执行新的同步时,它仍可以用旧的数据信息来提供查询;否则,当slave与master失去联系时,slave会返回一个错误给客户端;
5、主从复制具有可扩展性,即多个slave专门提供只读查询与数据的冗余,Master端专门提供写操作;
6、通过配置禁用Master数据持久化机制,将其数据持久化操作交给Slaves完成,避免在Master中要有独立的进程来完成此操作。
三、redis主从复制原理
当启动一个Slave进程后,它会向Master发送一个SYNC Command,请求同步连接。无论是第一次连接还是重新连接,Master都会启动一个后台进程,将数据快照保存到数据文件中,同时Master会记录所有修改数据的命令并缓存在数据文件中。后台进程完成缓存操作后,Master就发送数据文件给Slave,Slave端将数据文件保存到硬盘上,然后将其在加载到内存中,接着Master就会所有修改数据的操作,将其发送给Slave端。若Slave出现故障导致宕机,恢复正常后会自动重新连接,Master收到Slave的连接后,将其完整的数据文件发送给Slave,如果Mater同时收到多个Slave发来的同步请求,Master只会在后台启动一个进程保存数据文件,然后将其发送给所有的Slave,确保Slave正常。
四、配置过程
Jemalloc安装
#yum install -y tcl gcc gcc-c++ make bzip2
#wgethttp://www.canonware.com/download/jemalloc/jemalloc-4.2.0.tar.bz2
#tar -xjf jemalloc-4.2.0.tar.bz2
#cd jemalloc-4.2.0
#./configure --prefix=/usr/local/jemalloc --libdir=/usr/local/lib
#make && make install
#make clean
#echo "/usr/local/lib" >/etc/ld.so.conf.d/usr_local_lib.conf
#/sbin/ldconfig
Redis安装
#cd ../
#wgethttp://download.redis.io/releases/redis-3.2.0.tar.gz
#cd redis-3.2.0
#make MALLOC=jemalloc
#make install
#cd utils/
#./install_server.sh
安装配置和数据路径可以定义:
Selected config:
Port :6379
Config file : /etc/redis/6379.conf
Log file :/var/log/redis_6379.log
Data dir : /data/redis
Executable : /usr/local/bin/redis-server
Cli Executable : /usr/local/bin/redis-cli
Is this ok? Then press ENTER to go on or Ctrl-C to abort.
Copied /tmp/6379.conf =>/etc/init.d/redis_6379
Redis设置内存大小
打开redis配置文件
#vim /etc/redis/6379.conf
增加如下两行
maxmemory 12g
maxmemory-policy volatile-lru
第一行:Redis设置最大占用内存,一般推荐Redis设置内存为最大物理内存的四分之三。
第二行:如果设置了maxmemory,一般都要设置过期策略。
Redis有六种过期策略:
1、volatile-lru ->根据LRU算法生成的过期时间来删除。
2、allkeys-lru ->根据LRU算法删除任何key。
3、volatile-random->根据过期设置来随机删除key。
4、allkeys->random->无差别随机删。
5、volatile-ttl ->根据最近过期时间来删除(辅以TTL)
6、noeviction ->谁也不删,直接在写操作时返回错误。
配置完成重启redis
查看配置是否生效
#redis-cli info
主从:
192.168.1.76主
192.168.1.77从
两台分别安装redis
安装好之后,在从192.168.1.77的redis配置文件修改bind并增加一行参数
#vim /etc/redis/6379.conf
bind 0.0.0.0
slaveof 192.168.1.76 6379
启动两台redis
在主192.168.1.76执行
#redis-cli
>set name ceshi
>get name
在从192.168.1.77执行
#redis-cli
>get name
如果可以get到ceshi,代表主从成功
Sentinel哨兵:
在其中一台redis上或者随便找一台服务器安装,如果只安装一个sentinel并要安装在redis服务器上,建议在从上搭建sentinel,这样保证了主宕机之后不会影响主从切换,从宕机不会影响主的运行
#vim /etc/redis/sentinel.conf
port 26379
daemonize yes
sentinel monitor mymaster 192.168.1.76 6379 1
sentinel down-after-milliseconds mymaster 30000
sentinel parallel-syncs mymaster 1
sentinel failover-timeout mymaster 900000
logfile "/var/log/sentinel.log"
注释:
第一行:指定sentinel端口号
第二行:指定sentinel为后台启动
第三行:指定sentinel去监视一个名为mymaster的Master,Master的IP地址为192.168.1.76,
端口为6379,最后的1表示当有1个Sentinel检测到Master异常时会判定其失效,如果为2,即只有当2个Sentinel都判定Master失效了才会自动迁移,如果Sentinel的数量不达标,则不会执行自动故障迁移。
第四行:指定Sentinel判定Master断线的时间。(单位为毫秒,判定为主观下线SDOWN)
第五行:指定在执行故障转移时,最多可以有多少个Slave同时对新的Master进行同步。这个数字设置为1,虽然完成故障转移所需的时间会变长,但是可以保证每次只有1个Slave处于不能处理命令请求的状态。
第六行:如果在该时间(ms)内未能完成failover(即故障时master/slave自动切换
)操作,则认为该failover失败。
第七行:指定Sentinel日志文件。
启动
#redis-sentinel /etc/redis/sentinel.conf
测试:
使用如下命令查看
#redis-cli -h 192.168.1.76 -p 6379 info
将主192.168.1.76的redis停掉,会发现从192.168.1.77切换为主了
将主192.168.1.76的redis启动,会发现自动添加为从服务器了
Redis数据迁移
1、在旧redis执行redis-clisave将数据保存到磁盘文件dump.rdb
2、停止新redis
3、将旧的redis保存后的磁盘文件dump.rdb拷贝到新的redis数据目录下
4、启动新的redis