当前位置: 首页 > article >正文

MySQL主从同步+binlog

一、简介

MySQL内建的复制功能是构建大型,高性能应用程序的基础 通过将MySQL的某一台主机(master)的数据复制到其他主机(slaves)上,并重新执行一遍来执行 复制过程中一台服务器充当主服务器,而其他一个或多个其他服务器充当从服务器

1.1主从复制原理

主要基于MySQL二进制日志 主要包括三个线程(2个I/O线程,1个SQL线程)

LNMP(centos7,mysql5.6)

vmware workstation pro配置了3个虚拟机,均安装了LNMP环境:

master:  192.168.0.105       

slave:     192.168.0.106 、192.168.0.107

二、原理

(1)主数据库master进行增删改操作后,相应操作记录的语句(比如 create database test)会记录到binlog日志文件中(binlog日志文件一般和数据库data文件夹在一起)。

(2)从数据库Slave会请求主数据库的binlog日志文件,拷贝到Slave的中继日志中,然后在自己的从数据库上自动执行相同的操作语句,进而实现主从的同步。

注:这里,我们所需要配置的只是主从环境以及开启binlog日志,其他的mysql会自动完成。

二、配置主从同步

2.1环境准备

克隆三台没有下过mysql的虚拟机(或恢复快照)

ip为  master   192.168.1.112 

        slave1     192.168.1.113

        slave2     192.168.1.114

下载mysql:yum install mysql-server -y

不会下载或者下载报错:MySQL数据库安装---离线下载_mysql 离线下载安装-CSDN博客

2.2主从配置

2.2.1【master】(主服务器)

1.)选举112为主服务器

vim /etc/my.cnf
 
[client]
user=root
password=ABc1234
 
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
 
log-error=/var/log/mysqld. log
pid-file=/var/run/mysqld/mysqld.pid
 
server_id=11 #可以是任意正整数,一般比slave大

然后开启MySQL服务

2.)在数据库中创建用户,以及授权,修改master库的密码加密方式

repl 你所创建的用户名

MySQL@123 用户密码

mysql> create user repl@'%'identified with mysql_native_password by 'MySQL@123'
    -> ;
Query OK, 0 rows affected (0.00 sec)

mysql> grant replication slave on *.* to repl@'%';
Query OK, 0 rows affected (0.00 sec)

查看主配置状态:show master status;

3 )关闭防火墙,禁用SElinux 

[root@openeuler-1 ~]  systemctl stop firewalld

[root@openeuler-1 ~]  setenforce 0
setenforce: SELinux is disabled  #已被禁用

[root@openeuler-1 ~]  getenforce #查看SElinux状态
Disabled
2.2.2【slave】从服务器

【slave1】和【slave2】

1.)配置主配置文件,添加一个server_id(唯一标识)

vim /etc/my.cnf

slave1的   113slave2的   114

配置后开启/重启mysql服务:systemctl start mysql.service/systemctl restart mysql.service

2.)在从mysql上进行部署,连接主库(因为连接的是同一个主库,两个slave操作一样)

ps:如果start slave后,要重新连接主库(change maste to), 必须先stop slave

        从库指向主库创建的host,用户名,密码,二进制文件,以及节点

mysql> change master to
    -> master_host='192.168.1.112',
    -> master_user='repl',
    -> master_password='MySQL@123',
    -> master_log_file='binlog.000001',
    -> master_log_pos=980;
Query OK, 0 rows affected, 8 warnings (0.01 sec)

 3.)开启主从

mysql> start slave;
Query OK, 0 rows affected, 1 warning (0.00 sec)

4.) 关闭防火墙,禁用SElinux  

[root@openeuler-1 ~]  systemctl stop firewalld

[root@openeuler-1 ~]  setenforce 0
setenforce: SELinux is disabled  #已被禁用

[root@openeuler-1 ~]  getenforce #查看SElinux状态
Disabled

 5.) 查看是否成功并测试

 

三、基于binlog的主从同步

3.1【主服务器】

1.) 开启binlog

在id后面添加两行

[root@openeuler-1 Mysql]# vim /etc/my.cnf

server_id=11

gtid_mode=ON
enforce-gtid-consistency=ON

[root@openeuler-1 Mysql]# systemctl restart mysqld.service

 3.2【从服务器】

1.)暂停slave,进入配置文件添加两行,重启服务(重启更改后的配置才会生效)

mysql> stop slave;
Query OK, 0 rows affected, 1 warning (0.01 sec)

mysql> \q
Bye

[root@openeuler-1 Mysql]# vim /etc/my.cnf

server_id=113

gtid_mode=ON
enforce-gtid-consistency=ON

[root@openeuler-1 Mysql]# systemctl restart mysqld.service 

2.)测试gid是否开启

mysql> show variables like '%gtid%';

3.) 暂停slave,连接主库

mysql> stop slave;
Query OK, 0 rows affected, 1 warning (0.00 sec)

mysql> change master to
    -> master_host='192.168.1.112',
    -> master_user='repl',
    -> master_password='MySQL@123',
    -> master_auto_position=1;        #使用 GTID 自动定位。
Query OK, 0 rows affected, 7 warnings (0.00 sec)

mysql> start slave;
Query OK, 0 rows affected, 1 warning (0.02 sec)
3.3 GTID 从库误写入操作处理

从库一般是不需要写入数据的,如果不小心写入一般会报错

Last_SQL_Error: Error 'Can't create database 'db4'; database exists' on query. Default database: 'db4'. Query: 'create database db4'

Retrieved_Gtid_Set: 71bfa52e-4aae-11e9-ab8c-000c293b577e:1-3                #说明gid3报错
Executed_Gtid_Set:  71bfa52e-4aae-11e9-ab8c-000c293b577e:1-2,
7ca4a2b7-4aae-11e9-859d-000c298720f6:1

解决方法:注入空事务

暂停salve:
stop slave;

#3是报错的ID号
set gtid_next='99279e1e-61b7-11e9-a9fc-000c2928f5dd:3';
begin;commit; 
set gtid_next='AUTOMATIC';
    
这里的xxxxx:N 也就是你的slave sql thread报错的GTID,或者说是你想要跳过的GTID。

最好的解决方案:重新构建主从环境

3.4  IO进程错误

发现IO进程错误,检查日志,排除故障:

tail localhost.localdomain.err

常见错误:各个复制的虚拟机server_id不能相同

解决方法:修改id,重启mysql

四、延时同步

4.1简介

是我们人为配置的一种特殊同步,从库和主库同步延时N小时

为什么要有延时同步?

        数据库有两种故障:

                物理损坏:可以用主从复制解决。主库rm删除,直接将应用切换到从库

                逻辑损坏:普通主从同步无法解决。eg:主库drop database ns,从库也没了

4.2配置延时同步

主库加一个参数即可,其他不变

 change master to master_delay=300;  #延时300s

4.3故障模拟恢复

1.)主库数据操作

mysql> stop slave;
Query Ok, 0 rows affected, l warning(0.00 sec)

mysal> change master to master_delay=300;  #延时300s
Query OK, 0 rows affected, 2 warnings (0.0l sec)

mysql> start slave;
Query OK, 0 rows affected, 1 warning (0.02 sec)

mysq1> show slave status \G
SQL_Delay: 300
SQL_Remaining_Delay: NULL

 2.)停止从库SQL线程

stop slave sql_thread;

3.) 找relaylog的截取点和终点

起点:

        Relay_Log_File:db01-relay-bin.000002

        Relay_Log_Pos:482

终点:

4.)  从库恢复relaylog

source /tmp/relay.sq1

5.)  从库身份解除

db0l [relay]>stop slave ;
db0l [relay]>reset slave all


http://www.kler.cn/a/540599.html

相关文章:

  • Vue(4)
  • 仿 RabbitMQ 实现的简易消息队列
  • 数据集成实例分享:金蝶云星空对接旺店通实现库存管理自动化
  • 【SQL server】关于SQL server彻底的卸载删除。
  • 使用LLaMA Factory踩坑记录
  • at coder ABC 392
  • ffmpeg -demuxers
  • 《optee系统架构从入门到精通》
  • 征程 6 相比征程 5 对算子支持扩展的具体案例讲解
  • 将本地jar包安装到maven仓库
  • 【PCIe 总线及设备入门学习专栏 10 -- pci linux driver】
  • 宝塔一键部署Wordpress无法打开,显示响应时间太长
  • MyBatis——动态SQL
  • 在Linux上创建虚拟网卡
  • Centos7系统安装redis
  • 机器学习分类整理【表格版】分类角度、名称、概念、常见算法、典型案例
  • 《手札·开源篇》Odoo系统与SKF Observer Phoenix API双向对接方案
  • 28、Spring Boot 定时任务:轻松实现任务自动化
  • DatePicker 实现:日期范围截止时间为23:59:59
  • 《基于Python与DashScope的智能语音合成工具开发》
  • Web3 与区块链:开启透明、安全的网络新时代
  • 计算机毕业设计SpringBoot+LayUI宠物医院管理系统(源码+文档+运行视频+讲解视频)
  • C语言基础10:复杂数据的输入输出
  • Goland 内存逃逸问题
  • 移动(新)魔百盒刷机教程[M301A_YS]
  • 用AI写游戏2——实现老虎机游戏