简介
通常数据库的主从同步可用作数据备份,也可以用来解决数据库访问的热点问题。通过读写分离(主库写,从库读)的方式对数据库的访问进行分压。
MySQL 的主从同步既可以是单向的,也可以是双向的互为主从。一个主库可以有多个从库,而从库也可以通过级联的方式作为其他从库的主库。
原理
MySQL 的主从同步是一个异步复制的过程。其原理如下
- Master 在执行完SQL 语句后,将相关的语句记录到binlog 文件中。
- Slave 从Master 获取binlog 文件,并存于本地relay-log 文件中,然后读取master.info 文件,从上次同步时的position 位置开始执行SQL 语句。
整个过程如下,主要由Master I/O 线程、Slave I/O 线程和Slave SQL 线程参与完成。
- 在Slave 上执行start slave,开启主从同步。
- Slave I/O 线程通过Master 上的授权用户连接Master,并请求从指定的binlog 文件及位置开始的日志内容。
- Master 接收到请求后,通过Master I/O 线程读取指定的binlog 内容并返回给Slave I/O 线程。同时返回本次读取的binlog 文件名及位置。
- Slave I/O 线程将binlog 内容依次写入本地的relay-log 文件,并更新master.info 文件中的binlog 文件名和位置。
- Slave SQL 线程实时检测本地relay-log 中新增的内容,解析成SQL 语句后在Slave 上顺序执行。
- 由此完成了从Master 到Slave 的基于SQL 执行语句的数据同步,确保数据的一致性。
步骤
Step 1. 修改Master 上的my.cnf 文件,开启binlog 功能。
[mysqld]
server-id=1
log-bin=/var/lib/mysql/mysql-bin.log
binlog-ignore-db=mysql
binlog-do-db=demo
binlog_cache_size=1M
binlog_format=mixed
expire_logs_days=3
- server-id 用于唯一标识数据库,可用来避免互为主从同步的情况下的循环复制问题
- log-bin 指定binlog 的文件路径,该目录需要有mysql 的用户权限
- binlog-do-db 指定需要同步的数据库;binlog-ignore-db 指定不需要同步的数据库
Step 2. 在Master 上创建用于复制的用户并授权
> grant replication slave on *.* to 'repl'@'10.1.1.%' identified by 'password';
> flush privileges;
Step 3. Master 锁表
锁表是为了防止由于新数据的写入而导致binlog 文件名和位置发生变化。也可以通过暂停其他服务来保证没有新数据写入。
> flush tables with read lock;
在锁表期间不要关闭该窗口。
Step 4. 记录Master 的binlog 文件名和位置信息
> show master status;
Step 5. 导出数据库
如果要同步的数据库数据量比较大,可以先从Master 上导出该数据库,然后在Slave 上导入,以此减少需要同步的数据量。
# master
> mysqldump -ureadonly -ppassword -S /var/run/mysqld/mysql.sock --databases demo | gzip > demo.sql.gz
# slave
> gzip -d demo.sql.gz
> mysql -uroot -ppassword -S /var/run/mysqld/mysql.sock < demo.sql
Step 6. Master 解锁,恢复可写
> unlock tables;
Step 7. 修改Slave 上的my.cnf
[mysqld]
server-id=2
relay-log=/var/lib/mysql/mysql-relay-bin
relay-log-index=/var/lib/mysql/mysql-relay-bin.index
read-only=1
- relay-log 和relay-log-index 指定relay-log 的文件路径和索引
- read-only 表明对于非临时表进行只读控制,replication threads 和拥有super 权限的用户不受此控制。
- replicate-do-db 指定需要同步的数据库
如果该slave 同时要作为其他从库的主库,则需要添加bin-log 配置,同时log_slave_updates=1。
Step 8. Slave 上开启同步
> change master to master_host='10.1.1.1',master_port=3306,master_user='repl',master_password='password',master_log_file='mysql-bin.000001',master_log_pos=10;
> start slave;
使用以下命令查看Slave 的同步状态,如果出现Slave_IO_Running: Yes 和Slave_SQL_Running: Yes,则说明同步正常。
> show slave status\G
可以通过以下脚本读取该值来监控主从同步。
> mysql -h 127.0.0.1 --port=3306 -u root -ppassword -e "show slave status\G" | grep Slave_SQL_Running | awk -F: '{print $2}'
Step 9. 关闭主从同步
在Slave 上停止主从同步
> stop slave;
重置Slave 信息
> reset slave; # 清除binlog 文件名及位置
> reset slave all; # 清除slave 的连接配置信息