Mysql主从复制搭建与深度原理分析

时间:2022-07-22
本文章向大家介绍Mysql主从复制搭建与深度原理分析,主要内容包括其使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。

首先,在docker下进行搭建mysql可以当做学习数据库搭建时的测试使用,docker的hub中有已经封装好的mysql可以避免我们进行数据库安装的复杂步骤,而且docker容器之间相互独立,拥有自己的ip和可以设置不同的端口,不会造成端口的冲突。

docker下安装mysql环境

sudo docker pull  mysql:5.7

这里不要随便下载最新的版本,有些封装的docker容器里mysql服务并不完整。

查看docke images 可以发现mysql:5.7的镜像已经下载下来

接下来将镜像启动作为 Master 和 slave

Master
docker run -p 3339:3306 --name master -e MYSQL_ROOT_PASSWORD=123456 -d mysql:5.7
Slave
docker run -p 3340:3306 --name slave -e MYSQL_ROOT_PASSWORD=123456 -d mysql:5.7

配置mysql主从复制

查看容器ID

CONTAINER ID        IMAGE               COMMAND                  CREATED             STATUS              PORTS                               NAMES
d34a83c63bbc        mysql:5.7           "docker-entrypoint.s…"   4 hours ago         Up 3 hours          33060/tcp, 0.0.0.0:3340->3306/tcp   slave
e46d81b5bfdf        mysql:5.7           "docker-entrypoint.s…"   4 hours ago         Up 3 hours          33060/tcp, 0.0.0.0:3339->3306/tcp   master

进入docker

//进入 slave
sudo docker exec -it d3 bash

//进入 master
sudo docker exec -it e4 bash
  1. 配置Master

vim /etc/mysql/mysql.conf.d/mysqld.cnf

注意:没有vim需要安装,安装前先apt-get update apt-get install vim

[mysqld]
## 同一局域网内注意要唯一
server-id=100  
## 开启二进制日志功能,可以随便取(关键)
log-bin=mysql-bin

配置 server-id 完后,需要重启mysql

使用service mysql restart完成重启

sudo docker start master启动容器

然后在Master数据库创建数据同步用户,授予用户 slave REPLICATION SLAVE权限和REPLICATION CLIENT权限,用于在主从库之间同步数据。

CREATE USER 'slave'@'%' IDENTIFIED BY '123456';

GRANT REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'slave'@'%';

最后查看文件的position

show master status;
后面的操作完成之前,需要保证Master库不能做任何操作,否则将会引起状态变化,File和Position字段的值变化。填写在从库sql中
  1. 配置slave
[mysqld]
## 设置server_id,注意要唯一
server-id=101  
## 开启二进制日志功能,以备Slave作为其它Slave的Master时使用
log-bin=mysql-slave-bin   
## relay_log配置中继日志
relay_log=edu-mysql-relay-bin 

进入slave的mysql执行

CHANGE MASTER TO
MASTER_HOST='172.17.0.2',
MASTER_USER='slave',
MASTER_PASSWORD='123456',
MASTER_LOG_FILE='mysql-bin.000001',
MASTER_LOG_POS=609,
MASTER_PORT=3306;
//启动主从复制
start slave;

这里master容器ip可以通过

sudo docker inspect --format='{{.NetworkSettings.IPAddress}}' master
进行查看
  1. 测试
mysql -h 127.0.0.1  -P 3339 -u root -p 123456
在主库创建一个数据库,查看从库是否也存在

create database http_system;

mysql -h 127.0.0.1  -P 3340 -u root -p 123456

show databases;

Mysql主从复制主要场景

mysql 默认采用异步的方式进行主从复制,同时从库可以指定复制从库的特定表和特定库

在sql操作中会遇到,某个SQL需要锁住整个表的情况,导致暂时不能进行读服务,这样就会影响现有的工作,主从读写分离,主库进行读,从库进行写,可以保证业务正常运行。

同时保证数据库的高可用,防止数据丢失。

主从复制原理

mysql主从复制主要由三个线程完成:

log dump 线程 运行在主节点

I/O 和 SQL 线程 运行在从节点

  1. binary log dump 线程负责,发送bin-log的内容,在读取bin-log的时候,会对bin-log进行加锁,读取完毕就释放。
  2. 在从节点执行 “start slave” 从节点就启动一个I/O线程来连接主节点,请求主库更新bin-log,I/O进程在收到主库更新的bin-log后保存在relay-log中。并将读取到的binary log文件名和位置保存到master-info 文件中,以便在下一次读取的时候能够清楚的告诉Master“我需要从某个bin-log 的哪个位置开始往后的日志内容,请发给我”
  3. SQL线程负责从relay-log中读取,解析为具体操作并执行,保证数据一致性。

如果一主多从,Mysql会为每一个从节点创建一个 log dump 线程,所以首先必须打开Master 端的binary log(bin-log)功能

mysql默认是异步方式,用户执行sql 和 log dump 没有什么相关性

说明

Mysql 主从复制是mysql 高可用,高性能的基础,有了这个基础,mysql 的部署会变得简单、灵活并且具有多样性,从而可以根据不同的业务场景做出灵活的调整。