【Redis学习】Redis复制(replica)
理论简介
定义
replica即主从复制,master以写为主,Slave以读为主。
当master数据变化的时候,自动将新的数据异步同步到其它slave数据库。
功能
读写分离
容灾恢复
数据备份
水平扩容支撑高并发
使用
配从(Slave)不配主(Master)
权限细节
master如果配置了requirenass参数,需婴密码登陆,那么slave就要配置masterauth来设置校验密码,否则的话master会拒绝slave的访问请求。
基本操作命令
info replication
可以查看复制节点的主从关系和配置信息
replicaof 主库IP 主库端口
一般写入进redis.conf配置文件内
slaveof 主库IP 主库端口
临时命令,每次与master断开之后,都需要重新连接,除非你配置进redis.conf文件
在运行期间修改slave节点的信息,如果该数据库已经是某个主数据库的从数据库,那么会停止和原主数据库的同步关系转而和新的主数据库同步(重新拜码头)。
slaveof no one
使当前数据库停止与其他数据库的同步,转成主数据库(自立为王)。
演示架构
架构说明
一个Master两个Slave
3台虚机,每台都安装redis
拷贝多个redis.conf文件
redis6379.conf
redis6380.conf
redis6381.conf
小口诀
三边网络相互ping通且注意防火墙配置
三大命令
主从复制
replicaof 主库IP 主库端口
配从(库)不配主(库)
改换门庭
slaveof 新主库IP 新主库端口
自立为王
slaveof no one
配置细则
以redis6379.conf为例
- 开启daemonize yes
- 注释掉bind 127.0.0.1
- protected-mode no
- 指定端口
- 指定当前工作目录,dir
- pid文件名字,pidfile
- log文件名字,logfile
- requirepass
- dump.rdb名字
-
aof文件,appendfilename
默认即可,无需修改 -
从机访问主机的通行密码masterauth,必须(从机需要配置,主机不用)
一主二仆
方案1:配置文件固定写死
配置文件执行:replicaof 主库IP 主库端口
配从(库)不配主(库)
先master后两台slave依次启动
主从关系查看
日志
主机日志
从机日志
命令
info replication
命令查看
主机
从机
主从问题演示
- 从机可以执行写命令吗? ——N
- 从机切入点问题
slave是从头开始复制还是从切入点开始复制?
master启动,写到k3
slave1跟着master同时启动,跟着写到k3
slave2写到k3后才启动,那之前的是否也可以复制?
Y,首次一锅端,后续跟随,master写,slave跟
- 主机shutdown后,从机会上位吗? ——N
主机shutdown后情况如何?从机是上位还是原地待命
从机不动,原地待命,从机数据可以正常使用;等待主机重启动归来。
-
主机shutdown后,重启后主从关系还在吗?从机还能否顺利复制? ——Y
-
某台从机down后,master继续,从机重启后它能跟上大部队吗? ——Y
方案2:命令操作手动指定
从机停机去掉配置文件中的主从配置项,3台目前都是主机状态,各不从属
-
3台master
-
预设的从机上执行命令
slaveof 主库IP 主库端口
效果
-
用命令使用的话,2台从机重启后,关系还在吗? ——N
slaveof只是一次服务开启时的临时配置,服务关闭后无效。
配置VS命令的区别
配置:持久稳定
命令:当次生效
薪火相传
上一个slave可以是下一个slave的master,slave同样可以接收其他slaves的连接和同步请求,那么该slave作为了链条中下一个的master,可以有效减轻主master的写压力
中途变更转向:会清除之前的数据,重新建立拷贝最新的
slaveof 新主库IP新主库端口
虽然对于6381是master,但6380的身份依旧是slave,无法执行写操作。
反客为主
slaveof no one
使当前数据库停止与其他数据库的主从关系、
工作流程总结
slave启动,同步初请
slave启动成功连接到master后会发送一个sync命令
slave首次全新连接master,一次完全同步(全量复制)将被自动执行,slave自身的数据会被master覆盖
首次连接,全量复制
master节点收到sync命令后会开始在后台保仔快照(即RDB持久化,主从复制时会触发RDB),同时收集所有接收到的用于修改数据集命令缓存起来,master节点执行RDB持久化完后,master将rdb快照文件和所有缓存的命令发送到所有slave,以完成一次完全同步。
而slave服务在接收到数据库文件数据后,将其存盘并加载到内存中,从而完成复制初始化。
心跳持续,保持通信
repl-ping-replica-period 10
默认每10秒钟主机向从机发送信息,确保从机状态正常。
进入平稳,增量复制
Master继续将新的所有收集到的修改命令自动依次传给slave,完成同步。
从机下线,重连续传
master会检查backlog里面的offset,master和slave都会保存一个复制的offset;还有一个masterId,offset是保存在backlog中的。Master只会把已经复制的offset后面的数据复制给Slave,类似断点续传。
痛点和改进需求
复制延时,信号衰减
由于所有的写操作都是先在Master上操作,然后同步更新到Slave上,所以从Master同步到Slave机器有一定的延迟,当系统很繁忙的时候,延迟问题会更加严重,Slave机器数量的增加也会使这个问题更加严重。
master挂了怎么办?
那每次都要人工干预?
无人值守安装变成刚需 —— 哨兵机制