Mysql主从复制(重置版)
MySQL Replication是Mysql自带的一种功能,可以实现将数据从一台数据库服务器(master)复制到一台或多台数据库服务器(slave),默认情况下属于异步复制,无需维持长连接。通过配置可以复制所有的库或者其中几个库,又或者库中的一部分表。
(1).工作原理
简单的说就是master服务器将数据库的改变写入二进制日志(binary log),slave服务器同步这些二进制日志事件(binary log events)到它的中继日志(relay log),然后slave服务器重做中继日志中的事件进行数据操作。
注意:是由slave服务器开启一个I/O线程拉取数据。单master对单slave情况下slave服务器上压力更大,但单master对多slave情况下master服务器上压力更大。
(2).作用
1.故障切换
2.备份服务,无法对SQL语句执行产生的故障恢复,有限的备份
3.高性能,可以多台slave,实现读写分离
(3).常见方案
1.一主多从,一个master对应多个slave,I/O压力集中在master上。
2.M-S-S,中间那个S是slave中继,为了缓解master服务器的I/O压力在中间加了一个slave中继。
3.M-M,双主互备,互为主从
4.M-M-M,基本没用
5.一从多主,这是为了节约成本,将多个master数据自动整合,但数据修改会非常多,从服务器压力大。
(4)主从复制时mysql配置文件会遇到的相关参数
server-id = 1 数据库的ID号,值必须为1到2^32–1之间的一个正整数值,且唯一。master和slave都必须存在。
log-bin=mysql-bin 启用并指定二进制日志文件,可以是相对路径(基于datadir),也可以是绝对路径。master必须存在,slave可以存在。
relay_log=mysql-relay-bin 启用并指定中继日志,可以是相对路径(基于datadir),也可以是绝对路径。slave参数。
log-slave-updates=1 将复制事件写入自己的二进制日志。slave参数。
read_only=1 数据库只读,slave参数,一般用于读写分离时使用。
sync-binlog=1 实时写入二进制日志文件与磁盘同步
binlog-format=[STATEMENT|ROW|MIXED] 三个值分别代表基于SQL语句复制(STATEMENT),基于行的复制(ROW),混合模式复制(MIXED)。详细查看:https://www.cnblogs.com/langtianya/p/5504774.html
如果以下两个参数都没指定,则slave默认复制所有数据库
binlog-do-db=data 同步的二进制数据库名,master参数
binlog-ignore-db=mysql 不同步的二进制数据库名,master参数
explicit_defaults_for_timestamp=true 这是为了取消TIMESTAMP字符类型(时间戳)随更新而自动更新的操作(必须在创建timestamp字符类型前写入配置文件,否则需要修改列参数),默认是off,没用到TIMESTAMP字符类型不用设置。explicit_defaults_for_timestamp参数详细查看:https://www.cnblogs.com/JiangLe/p/6956865.html
slave-skip-errors有四个可选值,off、all、ddl_exist_errors和错误代码([list of error codes]),默认为off
slave-skip-errors=1062,1053 跳过指定错误代码的错误,继续执行复制
slave-skip-errors=all 跳过所有错误
slave-skip-errors=ddl_exist_errors 这是一系列错误代码:1007,1008,1050,1051,1054,1060,1061,1068,1094,1146
说明:
1007:数据库已存在,创建数据库失败
1008:数据库不存在,删除数据库失败
1050:数据表已存在,创建数据表失败
1050:数据表不存在,删除数据表失败
1054:字段不存在,或程序文件跟数据库有冲突
1060:字段重复,导致无法插入
1061:重复键名
1068:定义了多个主键
1094:位置线程ID
1146:数据表缺失,请恢复数据库
(4).部署M-S(一主一从)
实验环境:youxi1 192.168.5.101 CentOS7.5 Mysql5.7.16 Mysql端口3306 做Master
youxi2 192.168.5.102 CentOS7.5 Mysql5.7.16 Mysql端口3306 做Slave
1)master服务器上的操作
创建一个用于复制所需的用户
mysql> grant replication slave on *.* to repl@192.168.5.102 identified by '12345678'; Query OK, 0 rows affected, 1 warning (0.01 sec) mysql> flush privileges; //刷新权限表
创建一个用于复制的数据库
mysql> create database test_db; Query OK, 1 row affected (0.00 sec)
修改配置文件,在[mysqld]模块下操作。然后重启mysqld
[root@youxi1 ~]# vim /etc/my.cnf server-id=1 //添加或修改 log-bin=mysql-bin-master binlog-do-db=test_db
slave-skip-errors=all //个人建议跳过错误,这样slave就不会运行这些错误语句 [root@youxi1 ~]# systemctl restart mysqld
查看master状态,记录当前日志文件名和当前节点。
mysql> show master status\G //这是查看master的状态 *************************** 1. row *************************** File: mysql-bin-master.000001 //当前日志文件 Position: 154 //当前节点 Binlog_Do_DB: test_db //同步的数据库 Binlog_Ignore_DB: //不同步的数据库 Executed_Gtid_Set: 1 row in set (0.00 sec) mysql> show binlog events\G //这是查看二进制日志信息 *************************** 1. row *************************** Log_name: mysql-bin-master.000001 //日志文件名 Pos: 4 //开始节点 Event_type: Format_desc //事件类型 Server_id: 1 //执行服务器标识 End_log_pos: 123 //结束节点 Info: Server ver: 5.7.16-log, Binlog ver: 4 //信息,更多的是执行的SQL语句 *************************** 2. row *************************** Log_name: mysql-bin-master.000001 Pos: 123 Event_type: Previous_gtids Server_id: 1 End_log_pos: 154 Info: 2 rows in set (0.00 sec)
说明:show binlog events [IN 'log_name'] [FROM pos] [LIMIT [offset,] row_count]
IN 'log_name' 指定要查询的binlog文件名(不指定就是第一个binlog文件)
FROM pos 指定从哪个pos起始点开始查起(不指定就是从整个文件首个pos点开始算)
LIMIT [offset,] 偏移量(不指定就是0)
row_count 查询总条数(不指定就是所有行)
注意:如果防火墙是打开的,记得添加mysql的端口号。
[root@youxi1 ~]# firewall-cmd --permanent --zone=public --add-port=3306/tcp success [root@youxi1 ~]# firewall-cmd --reload success [root@youxi1 ~]# firewall-cmd --zone=public --list-ports 3306/tcp
2)slave服务器上的操作
master和slave必须保证数据库版本一致,复制的数据库在二进制日志记录操作前一模一样。
建立与master需要复制的一模一样的数据库,可以从master导出再导入到slave,也可以手动创建。
mysql> create database test_db; Query OK, 1 row affected (0.01 sec)
修改配置文件,在[mysqld]模块下操作。然后重启mysqld。
[root@youxi2 ~]# vim /etc/my.cnf server-id=2 //如果没有更多的需求(例如M-S-S,M-M,读写分离,MHA等),这样就可以了 [root@youxi2 ~]# systemctl restart mysqld
指定master的配置信息
mysql> stop slave; //如果是第一次配置slave,可以不需要 Query OK, 0 rows affected, 1 warning (0.00 sec) mysql> change master to master_host='192.168.5.101', //master的IP地址 -> master_port=3306, //端口号,默认3306 -> master_user='repl', //用户名 -> master_password='12345678', //密码 -> master_log_file='mysql-bin-master.000001', //从哪个二进制日志文件读取 -> master_log_pos=154; //从二进制日志文件的哪个pos点开始读取 Query OK, 0 rows affected, 2 warnings (0.06 sec) //如果没有master_log_file和master_log_pos则默认从第一个二进制日志文件的0pos点开始 mysql> start slave; Query OK, 0 rows affected (0.02 sec)
注意:如果在出错后重新配置master信息,这时master的IP地址、端口号、用户名、密码没有改变可以不用重新配置,只需指定master_log_file和master_log_pos即可。
查看slave的状态
mysql> show slave status\G *************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.5.101 Master_User: repl Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin-master.000001 Read_Master_Log_Pos: 154 Relay_Log_File: youxi2-relay-bin.000003 Relay_Log_Pos: 327 Relay_Master_Log_File: mysql-bin-master.000001 Slave_IO_Running: Yes //这两行都是Yes时就是配置正确了 Slave_SQL_Running: Yes
3)测试
在master上创建表,并添加数据
mysql> use test_db; Database changed mysql> create table user_id(id int,name varchar(20)); Query OK, 0 rows affected (0.05 sec) mysql> insert into user_id values(1,'zhangsan'); Query OK, 1 row affected (0.02 sec)
在slave上查看
mysql> select * from test_db.user_id; +------+----------+ | id | name | +------+----------+ | 1 | zhangsan | +------+----------+ 1 row in set (0.00 sec)
(5).部署M-M
M-M其实就是基于M-S再做一个反向主从。我就接着上面的M-S往下做了
1)在youxi2(原salve)上操作
创建复制用户
mysql> grant replication slave on *.* to repl@192.168.5.101 identified by '12345678'; Query OK, 0 rows affected, 1 warning (0.00 sec) mysql> flush privileges; Query OK, 0 rows affected (0.00 sec)
修改配置文件,在[mysqld]模块下操作。然后重启mysqld。
[root@youxi2 ~]# vim /etc/my.cnf log-bin=mysql-bin-slave //添加或修改 binlog-do-db=test_db [root@youxi2 ~]# systemctl restart mysqld
查看master状态
mysql> show master status\G *************************** 1. row *************************** File: mysql-bin-slave.000001 Position: 154 Binlog_Do_DB: test_db Binlog_Ignore_DB: Executed_Gtid_Set: 1 row in set (0.00 sec)
注意:如果防火墙是打开的,记得添加mysql的端口号。
[root@youxi2 ~]# firewall-cmd --permanent --zone=public --add-port=3306/tcp success [root@youxi2 ~]# firewall-cmd --reload success [root@youxi2 ~]# firewall-cmd --zone=public --list-ports 3306/tcp
2)在youxi1(原master)上操作
指定master配置信息
mysql> stop slave; //如果第一次配置slave,可以不需要 Query OK, 0 rows affected, 1 warning (0.00 sec) mysql> change master to master_host='192.168.5.102',master_user='repl',master_password='12345678',master_log_file='mysql-bin-slave.000001',master_log_pos=154; Query OK, 0 rows affected, 2 warnings (0.02 sec) mysql> start slave; Query OK, 0 rows affected (0.01 sec)
查看slave状态
mysql> show slave status\G *************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.5.102 Master_User: repl Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin-slave.000001 Read_Master_Log_Pos: 154 Relay_Log_File: youxi1-relay-bin.000002 Relay_Log_Pos: 326 Relay_Master_Log_File: mysql-bin-slave.000001 Slave_IO_Running: Yes Slave_SQL_Running: Yes
3)测试
在youxi2上插入数据
mysql> use test_db; Reading table information for completion of table and column names You can turn off this feature to get a quicker startup with -A Database changed mysql> insert into user_id values(2,'lisi'); Query OK, 1 row affected (0.01 sec)
在youxi1上查看
mysql> select * from test_db.user_id; +------+----------+ | id | name | +------+----------+ | 1 | zhangsan | | 2 | lisi | +------+----------+ 2 rows in set (0.01 sec)
(6).部署M-S-S
实验环境:youxi1 192.168.5.101 CentOS7.5 Mysql5.7.16 Mysql端口3306 做Master
youxi2 192.168.5.102 CentOS7.5 Mysql5.7.16 Mysql端口3306 做Slave中继
youxi3 192.168.5.103 CentOS7.5 Mysql5.7.16 Mysql端口3306 做Slave
1)master服务器上的操作
创建一个用于复制所需的用户
mysql> grant replication slave on *.* to repl@192.168.5.102 identified by '12345678'; Query OK, 0 rows affected, 1 warning (0.01 sec) mysql> flush privileges; //刷新权限表
创建一个用于复制的数据库
mysql> create database test_db; Query OK, 1 row affected (0.00 sec)
修改配置文件,在[mysqld]模块下操作。然后重启mysqld
[root@youxi1 ~]# vim /etc/my.cnf server-id=1 log-bin=mysql-bin-master binlog-do-db=test_db sync-binlog=1 binlog-format=row [root@youxi1 ~]# systemctl restart mysqld
查看master状态,记录当前日志文件名和当前节点
mysql> show master status\G *************************** 1. row *************************** File: mysql-bin-master.000001 Position: 154 Binlog_Do_DB: test_db Binlog_Ignore_DB: Executed_Gtid_Set: 1 row in set (0.00 sec) mysql> show binlog events\G *************************** 1. row *************************** Log_name: mysql-bin-master.000001 Pos: 4 Event_type: Format_desc Server_id: 1 End_log_pos: 123 Info: Server ver: 5.7.16-log, Binlog ver: 4 *************************** 2. row *************************** Log_name: mysql-bin-master.000001 Pos: 123 Event_type: Previous_gtids Server_id: 1 End_log_pos: 154 Info: 2 rows in set (0.01 sec)
注意:如果防火墙是打开的,记得添加mysql的端口号。
[root@youxi1 ~]# firewall-cmd --permanent --zone=public --add-port=3306/tcp success [root@youxi1 ~]# firewall-cmd --reload success [root@youxi1 ~]# firewall-cmd --zone=public --list-ports 3306/tcp
2)在slave中继服务器上的操作
slave中继服务器是master服务器的从服务器,也是slave服务器的主服务器,所以其本身即是从,又是主。
创建一个用于复制的用户
mysql> grant replication slave on *.* to repl@192.168.5.103 identified by '12345678'; Query OK, 0 rows affected, 1 warning (0.01 sec) mysql> flush privileges; //刷新权限表 Query OK, 0 rows affected (0.01 sec)
建立与master服务器相同的数据库,可以从master导出再导入到slave,也可以手动创建。
mysql> create database test_db; Query OK, 1 row affected (0.00 sec)
修改配置文件,因为是slave中继服务器,本身并不会产生数据,所以二进制日志文件里都是从master服务器上拉取的事件,也就没有指定同步或不同步的数据库。
[root@youxi2 ~]# vim /etc/my.cnf server-id=2 log-bin=mysql-bin-slave1 //开启二进制日志文件 log-slave-updates=1 //复制事件写入到二进制日志文件 binlog-format=row [root@youxi2 ~]# systemctl restart mysqld
指定master的配置信息
mysql> stop slave; //如果是第一次配置slave,可以不需要 Query OK, 0 rows affected, 1 warning (0.00 sec) mysql> change master to master_host='192.168.5.101', //master的IP地址 -> master_user='repl', //用户名 -> master_password='12345678', //密码 -> master_log_file='mysql-bin-master.000001', //从哪个二进制日志文件读取 -> master_log_pos=154; //从二进制日志文件的哪个pos点开始读取 Query OK, 0 rows affected, 2 warnings (0.06 sec) //如果没有master_log_file和master_log_pos则默认从第一个二进制日志文件的0pos点开始 mysql> start slave; Query OK, 0 rows affected (0.02 sec)
查看master状态,记录当前日志文件名和当前节点
mysql> show master status\G *************************** 1. row *************************** File: mysql-bin-slave1.000001 Position: 322 Binlog_Do_DB: Binlog_Ignore_DB: Executed_Gtid_Set: 1 row in set (0.00 sec)
查看slave状态
mysql> show slave status\G *************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.5.101 Master_User: repl Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin-master.000001 Read_Master_Log_Pos: 154 Relay_Log_File: youxi2-relay-bin.000002 Relay_Log_Pos: 327 Relay_Master_Log_File: mysql-bin-master.000001 Slave_IO_Running: Yes Slave_SQL_Running: Yes
注意:如果防火墙是打开的,记得添加mysql的端口号。
[root@youxi2 ~]# firewall-cmd --permanent --zone=public --add-port=3306/tcp success [root@youxi2 ~]# firewall-cmd --reload success [root@youxi2 ~]# firewall-cmd --zone=public --list-ports 3306/tcp
3)配置slave服务器
创建和master一样的数据库,可以从master导出再导入到slave,也可以手动创建。
mysql> create database test_db; Query OK, 1 row affected (0.00 sec)
修改配置文件,在[mysqld]模块下操作。然后重启mysqld。
[root@youxi3 ~]# vim /etc/my.cnf server-id = 3 binlog-format=row [root@youxi3 ~]# systemctl restart mysqld
指定master的配置信息
mysql> stop slave; //如果是第一次配置slave,可以不需要 Query OK, 0 rows affected, 1 warning (0.00 sec) mysql> change master to master_host='192.168.5.102', //master的IP地址 -> master_user='repl', //用户名 -> master_password='12345678', //密码 -> master_log_file='mysql-bin-slave1.000001', //从哪个二进制日志文件读取 -> master_log_pos=322; //从二进制日志文件的哪个pos点开始读取 Query OK, 0 rows affected, 2 warnings (0.06 sec) //如果没有master_log_file和master_log_pos则默认从第一个二进制日志文件的0pos点开始 mysql> start slave; Query OK, 0 rows affected (0.02 sec)
查看slave的状态
mysql> show slave status\G *************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.5.102 Master_User: repl Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin-slave1.000001 Read_Master_Log_Pos: 322 Relay_Log_File: youxi3-relay-bin.000005 Relay_Log_Pos: 327 Relay_Master_Log_File: mysql-bin-slave1.000001 Slave_IO_Running: Yes Slave_SQL_Running: Yes
4)测试
在master服务器上创建表,并添加数据
mysql> use test_db; Database changed mysql> create table user_id(id int,name varchar(20)); Query OK, 0 rows affected (0.03 sec) mysql> insert into user_id values(1,'zhangsan'); Query OK, 1 row affected (0.05 sec)
在slave中继服务器上查看
mysql> select * from test_db.user_id; +------+----------+ | id | name | +------+----------+ | 1 | zhangsan | +------+----------+ 1 row in set (0.00 sec)
在slave服务器上查看
mysql> select * from test_db.user_id; +------+----------+ | id | name | +------+----------+ | 1 | zhangsan | +------+----------+ 1 row in set (0.00 sec)
5)如果不想slave中继服务器同步数据,但又不影响slave服务器该怎么做
首先修改slave中继服务器上表的引擎为黑洞引擎
mysql> set sql_log_bin=off; //关闭二进制日志 Query OK, 0 rows affected (0.00 sec) mysql> alter table test_db.user_id ENGINE=blackhole; Query OK, 1 row affected (0.03 sec) Records: 1 Duplicates: 0 Warnings: 0 mysql> set sql_log_bin=on; //打开二进制日志 Query OK, 0 rows affected (0.00 sec)
然后查看下slave服务器的slave状态
mysql> show slave status\G *************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.5.102 Master_User: repl Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin-slave1.000001 Read_Master_Log_Pos: 776 Relay_Log_File: youxi3-relay-bin.000006 Relay_Log_Pos: 327 Relay_Master_Log_File: mysql-bin-slave1.000001 Slave_IO_Running: Yes Slave_SQL_Running: Yes
再到master服务器上插入数据测试
mysql> insert into user_id values(2,'lisi'); Query OK, 1 row affected (0.02 sec)
查看slave中继服务器的数据
mysql> select * from test_db.user_id; Empty set (0.00 sec)
查看slave服务器数据
mysql> select * from test_db.user_id; +------+----------+ | id | name | +------+----------+ | 1 | zhangsan | | 2 | lisi | +------+----------+ 2 rows in set (0.00 sec)
(7).扩展:mysql的1593报错
在做主从复制时,由于我是克隆的服务器,导致了mysql的uuid相同,所以出现了1593报错。
当出现1593报错时,使用SHOW VARIABLES LIKE '%server_%';查看两个mysql的id和uuid。如果是server_id相同,进入/etc/my.cnf修改server_id的值。如果是server_uuid相同,使用SELECT uuid();随机获取一个uuid,然后进入$datadir/auto.cnf修改uuid的值。最后都需要重启mysqld。
原文地址:https://www.cnblogs.com/diantong/p/11037423.html
- Spring Boot微服务架构入门
- 测序文章数据上传找哪里
- Volatile实现原理实现原子性happens-before关系从happends-before规则分析可见性编译器层面实现可见性处理器层面实现可见性
- java中的toString方法
- 简单可视化-送你一双发现美的眼睛
- 享元模式
- 揭秘:针对中国移动用户的强大网银木马剖析
- 从源代码到Runtime发生的重排序编译器重排序指令重排序内存系统重排序阻止重排序
- 内存屏障保证缓存一致性优化
- 最新XSS 0day漏洞来袭,影响最新版本IE浏览器(含POC)
- Java内存模型—JMMhappens-before规则
- 那些年我们一起用过的Hybrid App
- 来看看美帝人民的安全意识:安全研究人员指责iOS版Outlook存在多处安全隐患
- 不是原配也可以-对接非原生配体
- MySQL 教程
- MySQL 安装
- MySQL 管理与配置
- MySQL PHP 语法
- MySQL 连接
- MySQL 创建数据库
- MySQL 删除数据库
- MySQL 选择数据库
- MySQL 数据类型
- MySQL 创建数据表
- MySQL 删除数据表
- MySQL 插入数据
- MySQL 查询数据
- MySQL where 子句
- MySQL UPDATE 查询
- MySQL DELETE 语句
- MySQL LIKE 子句
- mysql order by
- Mysql Join的使用
- MySQL NULL 值处理
- MySQL 正则表达式
- MySQL 事务
- MySQL ALTER命令
- MySQL 索引
- MySQL 临时表
- MySQL 复制表
- 查看MySQL 元数据
- MySQL 序列 AUTO_INCREMENT
- MySQL 处理重复数据
- MySQL 及 SQL 注入
- MySQL 导出数据
- MySQL 导入数据
- MYSQL 函数大全
- MySQL Group By 实例讲解
- MySQL Max()函数实例讲解
- mysql count函数实例
- MYSQL UNION和UNION ALL实例
- MySQL IN 用法
- MySQL between and 实例讲解
- PHP信号处理机制的操作代码讲解
- php防止表单重复提交实例讲解
- Python实现封装打包自己写的代码,被python import
- 创建一个 Serverless 应用,真的没有这么难!
- PHP使用mongoclient简单操作mongodb数据库示例
- 基于TensorFlow的CNN实现Mnist手写数字识别
- django rest framework 自定义返回方式
- PHP+Ajax实现的检测用户名功能简单示例
- Yii框架学习笔记之session与cookie简单操作示例
- Ajax+Jpgraph实现的动态折线图功能示例
- Python闭包及装饰器运行原理解析
- Django中Q查询及Q()对象 F查询及F()对象用法
- keras.layer.input()用法说明
- python入门:argparse浅析 nargs='+'作用
- PHP7导出Excel报ERR_EMPTY_RESPONSE解决方法