数据切分迁移实战（一）使用docker-compose搭建mysql主从环境

首先我们构建一个启动两个mysql实例的docker-compose.yml

version: "3"
services:
  mysql-master:
    image: mysql:5.7
    container_name: mysql_master
    ports:
      - 3306:3306
    volumes:
      - ../volume/mysql-master:/var/lib/mysql
      - ../volume/conf/mysql-ms/mysqld-master.cnf:/etc/mysql/mysql.conf.d/mysqld.cnf
    environment:
      MYSQL_ROOT_PASSWORD: aq1sw2de
      MYSQL_DATABASE: BIG
      MYSQL_USER: bigadmin
      MYSQL_PASSWORD: aq1sw2de
    restart: unless-stopped
    networks:
      mysql-ms-network:
        ipv4_address: 172.25.0.101
  mysql-slave:
    image: mysql:5.7
    container_name: mysql_slave
    ports:
      - 3307:3306
    volumes:
      - ../volume/mysql-slave:/var/lib/mysql
      - ../volume/conf/mysql-ms/mysqld-slave.cnf:/etc/mysql/mysql.conf.d/mysqld.cnf
    environment:
      MYSQL_ROOT_PASSWORD: aq1sw2de
      MYSQL_DATABASE: BIG
      MYSQL_USER: bigadmin
      MYSQL_PASSWORD: aq1sw2de
    restart: unless-stopped
    networks:
      mysql-ms-network:
        ipv4_address: 172.25.0.102
networks:
  mysql-ms-network:
    driver: bridge
    ipam:
      config:
      - subnet: 172.25.0.0/24

登陆验证master和slave服务是否都已经启动：

$ docker-compose exec mysql-master bash
root@8a2f57eaf88a:/ mysql -u root -h 172.25.0.101 BIG - p
root@8a2f57eaf88a:/ mysql -u root -h 172.25.0.102 BIG - p

配置mysql-master的mysqld.conf

[mysqld]
#主数据库端ID号
server_id = 1           
#开启二进制日志                  
log-bin = mysql-bin    
#需要复制的数据库名，如果复制多个数据库，重复设置这个选项即可                  
binlog-do-db = BIG
#将从服务器从主服务器收到的更新记入到从服务器自己的二进制日志文件中                 
log-slave-updates                        
#控制binlog的写入频率。每执行多少次事务写入一次(这个参数性能消耗很大，但可减小MySQL崩溃造成的损失) 
sync_binlog = 1                    
#这个参数一般用在主主同步中，用来错开自增值, 防止键值冲突
auto_increment_offset = 1           
#这个参数一般用在主主同步中，用来错开自增值, 防止键值冲突
auto_increment_increment = 1            
#二进制日志自动删除的天数，默认值为0,表示“没有自动删除”，启动时和二进制日志循环时可能删除  
expire_logs_days = 7                    
#将函数复制到slave  
log_bin_trust_function_creators = 1

mysql-master执行以下命令

mysql>grant replication slave on *.* to 'root'@'172.25.0.102' identified by 'aq1sw2de';
mysql>flush privileges;

获取mysql-master的binlog开始主从复制的地址

mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000006 |      454 | BIG          |                  |                   |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

配置mysql-slave的mysqld.conf

[mysqld]
# 从数据库端ID号
server_id = 2
log-bin = mysql-bin
log-slave-updates
sync_binlog = 0
#log buffer将每秒一次地写入log file中，并且log file的flush(刷到磁盘)操作同时进行。该模式下在事务提交的时候，不会主动触发写入磁盘的操作
innodb_flush_log_at_trx_commit = 0 
#指定slave要复制哪个库
replicate-do-db = BIG
#MySQL主从复制的时候，当Master和Slave之间的网络中断，但是Master和Slave无法察觉的情况下（比如防火墙或者路由问题）。Slave会等待slave_net_timeout设置的秒数后，才能认为网络出现故障，然后才会重连并且追赶这段时间主库的数据
slave-net-timeout = 60
log_bin_trust_function_creators = 1

mysql-slave执行以下命令

mysql>reset slave;
mysql>change master to master_host='172.25.0.101',master_user='root',master_password='aq1sw2de',master_log_file='mysql-bin.000006',master_log_pos=454;
mysql>start slave;

然后查看mysql-slave状态

mysql>show slave status;

注意查看Slave_IO_Running | Slave_SQL_Running这两列必须为yes
以上配置完毕之后，我们执行一段SQL来验证是否主从同步成功。

SQL

CREATE TABLE IF NOT EXISTS `BIG`.`hello` (
  `id` INT NOT NULL AUTO_INCREMENT,
  `aloha` VARCHAR(45) NOT NULL,
  PRIMARY KEY (`id`))
ENGINE = InnoDB;

执行完毕之后主库生成新表，这时候检查从库，应该会有一个相同的表产生。说明主从同步配置成功。

注意，当重启主从之后，配置信息丢失。需要重新对master_log_file文件及master_log_pos进行配置。

下一篇文章会尝试塞入一定量的数据，来测试下单表的性能。