MySQL 主从复制

MySQL主从复制的实现

主服务器master配置

  1. 启用二进制日志

  2. 为当前节点设置一个全局唯一ID号

  3. 创建有复制权限的用户账号

    [mysqld]
    log_bin=/data/mysql-bin
    server_id=1
    
    # 创建复制用户
    MariaDB [(none)]> grant replication slave on *.* to 'repluser'@'192.168.80.%' identified by 'teamw0rk';
    # 确定复制的位置为mysql-bin.000003的404
    MariaDB [(none)]> show master logs;
    +------------------+-----------+
    | Log_name         | File_size |
    +------------------+-----------+
    | mysql-bin.000001 |     30334 |
    | mysql-bin.000002 |   1038814 |
    | mysql-bin.000003 |       404 |
    +------------------+-----------+
    
    

从服务器slave配置

  1. 启用中继日志

  2. 使用有复制权限的用户账号连接至主服务器,并启动复制线程

    [mysqld]
    server-id=2
    
    MariaDB [(none)]> show slave status;
    Empty set (0.00 sec)
    
    CHANGE MASTER TO
      MASTER_HOST='192.168.80.11',
      MASTER_USER='repluser',
      MASTER_PASSWORD='teamw0rk',
      MASTER_PORT=3306,
      MASTER_LOG_FILE='mysql-bin.000003',
      MASTER_LOG_POS=404,
      MASTER_CONNECT_RETRY=10;
    MariaDB [(none)]> show slave status\G
    MariaDB [(none)]> start slave;
    
    # 查看运行状态
    MariaDB [(none)]> show processlist;
    +----+-------------+-----------+------+---------+------+-----------------------------------------------------------------------------+------------------+----------+
    | Id | User        | Host      | db   | Command | Time | State                                                                       | Info             | Progress |
    +----+-------------+-----------+------+---------+------+-----------------------------------------------------------------------------+------------------+----------+
    |  4 | root        | localhost | NULL | Query   |    0 | NULL                                                                        | show processlist |    0.000 |
    |  5 | system user |           | NULL | Connect |   42 | Waiting for master to send event                                            | NULL             |    0.000 |
    |  6 | system user |           | NULL | Connect |   55 | Slave has read all relay log; waiting for the slave I/O thread to update it | NULL             |    0.000 |
    +----+-------------+-----------+------+---------+------+-----------------------------------------------------------------------------+------------------+----------+
    MariaDB [(none)]> show slave status\G
    

如果master已经运行了一段时间,且有大量数据

  1. 通过备份恢复数据至从服务器

    master服务器

    # 创建一个用于复制的账号
    MariaDB [(none)]> grant replication slave on *.* to 'repluser'@'192.168.80.%' identified by 'teamw0rk';
    # 备份数据库
    mysqldump -A --single-transaction --master-data=1 -F > /data/all.sql
    # 将备份复制到到slave
    scp /data/all.sql 192.168.80.12:/tmp
    

    slave服务器

    # 编辑all.sql文件,编辑MASTER_LOG_FILE一行
    CHANGE MASTER TO 
    MASTER_HOST='192.168.80.11',
    MASTER_USER='repluser',
    MASTER_PASSWORD='teamw0rk',
    MASTER_PORT=3306,
    MASTER_LOG_FILE='mysql-bin.000004', MASTER_LOG_POS=245;
    # 编辑/etc/my.cnf
    [mysqld]
    server-id=12
    # 启动mysql
    systemctl start mariadb
    # 恢复数据库
    mysql < /tmp/all.sql
    MariaDB [(none)]> show slave status\G
    # 开始同步
    MariaDB [(none)]> start slave;
    

加入新的slave

  1. 备份现有节点的数据库,然后在新的slave上恢复
  2. 修改配置文件加入serveri-id
  3. 修改备份文件加入change-master信息
  4. 启动服务和slave

主服务器损坏,提升slave为master

  1. 比较二进制日志位置,选择新的为master

    show slave status
    # Master_Log_File:
    # Read_Master_Log_Pos:
    
  2. 提升slave为master

    # 清理slave信息
    stop slave;
    reset slave all;
             
    #配置slave为master
    
  3. 其它slave

    # 清空slave信息
    # 重新设置master
    change master to 
    ...
    

级联复制

  1. 级联节点配置
[mysqld]
log_bin
log_slave_updates
  1. 级联节点的备份从master获取,slave节点备份要从slave上获取。

清除复制错误码

  1. 忽略错误

    MariaDB [(none)]> stop slave;
    Query OK, 0 rows affected (0.00 sec)
    
    MariaDB [(none)]> set global sql_slave_skip_counter=1; # N:错误个数
    # 配置文件中加入 slave-skip-errors=error1#, error2#,.. 指定错误编号
    Query OK, 0 rows affected (0.00 sec)
    
    MariaDB [(none)]> start slave;
    Query OK, 0 rows affected (0.00 sec)
    

主主复制

  1. master1

    [mysqld]
    server_id=1
    log_bin
    auto_increment_offset=1
    auto_increment_increment=2
    
  2. master2

    server_id=2
    log_bin
    auto_increment_offset=2
    auto_increment_increment=2
    
  1. 把对方指定为主节点

半同步复制

  1. master配置

    mysql> INSTALL PLUGIN rpl_semi_sync_master SONAME 'semisync_master.so';
    mysql> SET GLOBAL rpl_semi_sync_master_enabled=1;
    mysql> SET GLOBAL rpl_semi_sync_master_timeout = 1000;超时长1s
    mysql> SHOW GLOBAL VARIABLES LIKE '%semi%';
    mysql> SHOW GLOBAL STATUS LIKE '%semi%';
    
  2. slave配置

    mysql> INSTALL PLUGIN rpl_semi_sync_slave SONAME 'semisync_slave.so';
    mysql> SET GLOBAL rpl_semi_sync_slave_enabled=1;
    

复制过滤器

  1. master 上通过binlog实现

    binlog-ignore-db = 数据库黑名单列表
    
  2. slave的relay log仅读取特定数据库语句

    replicate_do_db= 指定复制库的白名单
    replicate_ignore_db= 指定复制库黑名单
    replicate_do_table= 指定复制表的白名单
    replicate_ignore_table= 指定复制表的黑名单
    replicate_wild_do_table= foo%.bar% 支持通配符
    replicate_wild_ignore_table=
    

复制加密

  1. 生成证书

    mkdir /etc/my.cnf.d/ssl
    cd /etc/my.cnf.d/ssl
    openssl genrsa 2048 > cakey.pem
    openssl req -new x509 -key cakey.pem -out cacert.pem -days 3650
    openssl req -new rsa:1024 -days 365 -nodes -keyout master.key > masker.csr
    # master 证书
    openssl x509 -req -in master.csr -CA cacert.pem -CAkey caker.pem -set_serial 01 > master.crt
    
    # slave 证书
    openssl -req -newkey rsa:1024 -nodes -keyout slave.key > slave.csr
    openssl x509 -req -in slave.csr -CA cacert.pem -CAkey caker.pem -set_serial 02 > slave.crt
    
    cacert.pem
    cakey.pem
    master.crt
    master.csr
    master.key
    slave.crt
    slave.csr
    slave.key
    
  1. master 配置

    [mysqld]
    ssl-ca=/etc/my.cnf.d/ssl/cacert.pem
    ssl-cert=/etc/my.cnf.d/ssl/master.crt
    ssl-key=/etc/my.cnf.d/ssl/master.key
    
    # 创建一个使用ssl连接的复制账号
    mysql>GRANT REPLICATION SLAVE ON *.* TO 'repluser'@'192.168.8.%' IDENTIFIED BY ‘magedu' REQUIRE SSL;
    
  1. slave配置

    [mysqld]
    ssl-ca=/etc/my.cnf.d/ssl/cacert.pem
    ssl-cert=/etc/my.cnf.d/ssl/slave.crt
    ssl-key=/etc/my.cnf.d/ssl/slave.key
    
    mysql>
    CHANGE MASTER TO 
    MASTER_HOST='MASTERIP', 
    MASTER_USER='rep', 
    MASTER_PASSWORD='centos',
    MASTER_LOG_FILE='mariadb-bin.000001',
    MASTER_LOG_POS=245,
    MASTER_SSL=1;
    

复制的监控和维护

  1. 清理日志
  • PURGE { BINARY | MASTER } LOGS { TO 'log_name' | BEFORE datetime_expr }

  • RESET MASTER

  • RESET SLAVE

  1. 复制监控
  • SHOW MASTER STATUS

  • SHOW BINARY LOGS

  • SHOW BINLOG EVENTS

  • SHOW SLAVE STATUS

  • SHOW PROCESSLIST

  1. 从服务器是否落后于主服务
  • Seconds_Behind_Master:0
  1. 如何确定主从节点数据是否一致
  • percona-tools
  1. 数据不一致如何修复
  • 删除从数据库,重新复制

GTID复制

MySQL 5.6,mariadb10.2 支持

  1. master
[mysqld]
log_bin
server-id=11
gtid_mode=ON
enforce_gtid_consistency
  1. slave
   vim /etc/my.cnf
   server-id=2
   gtid_mode=ON
   enforce_gtid_consistency
   mysql>CHANGE MASTER TO MASTER_HOST='192.168.8.100',
   MASTER_USER='repluser',
   MASTER_PASSWORD='P@ssw0rd!',
   MASTER_PORT=3306,
   MASTER_AUTO_POSITION=1;
   mysql>start slave;
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,132评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,802评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,566评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,858评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,867评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,695评论 1 282
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,064评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,705评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,915评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,677评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,796评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,432评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,041评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,992评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,223评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,185评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,535评论 2 343