current position:Home>Mysql builds master-slave backup based on docker

Mysql builds master-slave backup based on docker

2022-09-23 10:34:57BackgroundHero

环境准备

  • centos7系统
  • docker环境

主从同步原理

在这里插入图片描述

基本原理:

slave会从master读取binlog来进行数据同步

具体步骤:

  • step1:master将数据改变记录到二进制日志(binary log)中.
  • step2: 当slave上执行 start slave 命令之后,slave会创建一个 IO 线程用来连接master,请求master中的binlog.
  • step3:当slave连接master时,master会创建一个 log dump 线程,用于发送 binlog 的内容.在读取 binlog 的内容的操作中,会对主节点上的 binlog 加锁,当读取完成并发送给从服务器后解锁.
  • step4:IO 线程接收主节点 binlog dump 进程发来的更新之后,保存到 中继日志(relay log) 中.
  • step5:slave的SQL线程,读取relay log日志,并解析成具体操作,从而实现主从操作一致,最终数据一致.

预期目标

Build a master and two slavesMysql环境

  • 主服务器:容器名mysql-master,端口3306
  • 从服务器:容器名mysql-slave1,端口3307
  • 从服务器:容器名mysql-slave2,端口3308

由于经费有限,Here is a server to build,Use different ports to distinguish

前置准备

#关闭docker
systemctl stop docker
#关闭防火墙
systemctl stop firewalld
#启动docker
systemctl start docker

搭建主Mysql

创建

docker run -d \
-p 3306:3306 \
-v /root/mysql/master/conf:/etc/mysql/conf.d \
-v /root/mysql/master/data:/var/lib/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
--name mysql-master \
mysql

配置

vim /root/mysql/master/conf/my.cnf

写入配置

[mysqld]
# 服务器唯一id,默认值1
server-id=1
# 设置日志格式,默认值ROW
binlog_format=MIXED
# 二进制日志名,默认binlog
# log-bin=binlog
# 设置需要复制的数据库,默认复制全部数据库
#binlog-do-db=mytestdb
# 设置不需要复制的数据库
#binlog-ignore-db=mysql
#binlog-ignore-db=infomation_schema

binlog格式说明:

  • binlog_format=STATEMENT:日志记录的是主机数据库的写指令,性能高,但是now()之类的函数以及获取系统参数的操作会出现主从数据不同步的问题.
  • binlog_format=ROW(默认):日志记录的是主机数据库的写后的数据,批量操作时性能较差,解决now()或者 user()或者 @@hostname 等操作在主从机器上不一致的问题.
  • binlog_format=MIXED:是以上两种level的混合使用,有函数用ROW,没函数用STATEMENT,但是无法识别系统变量

binlog-ignore-db和binlog-do-db的优先级问题:
在这里插入图片描述

重启mysql

docker restart mysql-master

在这里插入图片描述

进入容器

If your connection tool version is low
还需要进入mysql进行配置

It is recommended to modify,因为例如ShardingsphereConnections may also go wrong

#进入容器:env LANG=C.UTF-8 避免容器中显示中文乱码
docker exec -it mysql-master env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';

在这里插入图片描述

连接

在这里插入图片描述

Create a user for backup

-- 创建slave用户
CREATE USER 'slave'@'%';
-- 设置密码
ALTER USER 'slave'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
-- 授予复制权限
GRANT REPLICATION SLAVE ON *.* TO 'slave'@'%';
-- 刷新权限
FLUSH PRIVILEGES;

在这里插入图片描述

主机中查询master状态

执行完此步骤后不要再操作主服务器MYSQL,防止主服务器状态值变化

SHOW MASTER STATUS;

记下FilePosition的值.

执行完此步骤后不要再操作主服务器MYSQL,防止主服务器状态值变化.

在这里插入图片描述

搭建从Mysql1

创建

docker run -d \
-p 3307:3306 \
-v /root/mysql/slave1/conf:/etc/mysql/conf.d \
-v /root/mysql/slave1/data:/var/lib/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
--name mysql-slave1 \
mysql

配置

vim /root/mysql/slave1/conf/my.cnf

写入配置

[mysqld]
# 服务器唯一id,每台服务器的id必须不同,如果配置其他从机,注意修改id
server-id=2
# 中继日志名,默认xxxxxxxxxxxx-relay-bin
#relay-log=relay-bin

重启mysql

docker restart mysql-slave1

在这里插入图片描述

进入容器

#进入容器:env LANG=C.UTF-8 避免容器中显示中文乱码
docker exec -it mysql-slave1 env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';

在这里插入图片描述

连接

在这里插入图片描述

配置主从

# 配置主Mysql地址
CHANGE MASTER TO MASTER_HOST='192.168.226.130', 
# 配置主MssqlCreated username and password and port for backup
MASTER_USER='slave',MASTER_PASSWORD='123456', MASTER_PORT=3306,
# 配置主Mssql的binlogLog name and current location(location noted above)
MASTER_LOG_FILE='binlog.000003',MASTER_LOG_POS=1333; 

在这里插入图片描述

搭建从Mysql2

创建

docker run -d \
-p 3308:3306 \
-v /root/mysql/slave2/conf:/etc/mysql/conf.d \
-v /root/mysql/slave2/data:/var/lib/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
--name mysql-slave2 \
mysql

配置

vim /root/mysql/slave2/conf/my.cnf

写入配置

[mysqld]
# 服务器唯一id,每台服务器的id必须不同,如果配置其他从机,注意修改id
server-id=3
# 中继日志名,默认xxxxxxxxxxxx-relay-bin
#relay-log=relay-bin

重启mysql

docker restart mysql-slave2

在这里插入图片描述

进入容器

#进入容器:env LANG=C.UTF-8 避免容器中显示中文乱码
docker exec -it mysql-slave2 env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';

在这里插入图片描述

连接

在这里插入图片描述

配置主从

# 配置主Mysql地址
CHANGE MASTER TO MASTER_HOST='192.168.226.130', 
# 配置主MssqlCreated username and password and port for backup
MASTER_USER='slave',MASTER_PASSWORD='123456', MASTER_PORT=3306,
# 配置主Mssql的binlogLog name and current location(location noted above)
MASTER_LOG_FILE='binlog.000003',MASTER_LOG_POS=1333; 

在这里插入图片描述

启动从机复制功能

START SLAVE;

-- 查看状态(不需要分号)
SHOW SLAVE STATUS\G

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

In the query status, you can see the following two statusesyes即表示创建成功
在这里插入图片描述

测试同步

主Mysql中创建数据

CREATE DATABASE db_user;
USE db_user;
CREATE TABLE t_user (
 id BIGINT AUTO_INCREMENT,
 uname VARCHAR(30),
 PRIMARY KEY (id)
);
INSERT INTO t_user(uname) VALUES('xiaohong');
INSERT INTO t_user(uname) VALUES('xiaoming');

在这里插入图片描述

查看数据库
在这里插入图片描述
在这里插入图片描述
At this point, the build is complete!

关闭主从复制

-- 在从机上执行.功能说明:停止I/O 线程和SQL线程的操作.
stop slave; 

-- 在从机上执行.功能说明:用于删除SLAVE数据库的relaylog日志文件,并重新启用新的relaylog文件.
reset slave;

-- 在主机上执行.功能说明:删除所有的binglog日志文件,并将日志索引文件清空,重新开始所有新的日志文件.
-- 用于第一次进行搭建主从库时,进行主库binlog初始化工作;
reset master;

常见问题

问题1

启动主从同步后,常见错误是Slave_IO_Running: No 或者 Connecting 的情况,此时查看下方的 Last_IO_ERROR错误日志,根据日志中显示的错误信息在网上搜索解决方案即可

在这里插入图片描述

典型的错误例如:Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: 'Client requested master to start replication from position > file size'

解决方案:

-- 在从机停止slave
SLAVE STOP;

-- 在主机查看mater状态
SHOW MASTER STATUS;
-- 在主机刷新日志
FLUSH LOGS;
-- 再次在主机查看mater状态(会发现File和Position发生了变化)
SHOW MASTER STATUS;
-- 修改从机连接主机的SQL,并重新连接即可

问题2

启动docker容器后提示 WARNING: IPv4 forwarding is disabled. Networking will not work.

在这里插入图片描述

此错误,虽然不影响主从同步的搭建,但是如果想从远程客户端通过以下方式连接docker中的MySQL则没法连接

C:\Users\administrator>mysql -h 192.168.100.201 -P 3306 -u root -p

解决方案:

#修改配置文件:
vim /usr/lib/sysctl.d/00-system.conf
#追加
net.ipv4.ip_forward=1
#接着重启网络
systemctl restart network

copyright notice
author[BackgroundHero],Please bring the original link to reprint, thank you.
https://en.chowdera.com/2022/266/202209231027550774.html

Random recommended