1. 程式人生 > >MariaDB主從復制及半同步復制

MariaDB主從復制及半同步復制

mysql

主從復制:
從服務器:
I/O線程:從master請求二進制日誌信息,並保存至中繼日誌;
SQL線程:從relay log中讀取日誌信息,在本地完成重放;

    異步模式:async
        1、從服務器落後於主服務器;
        2、主從數據不一致;

    二進制日誌的格式:SET datetime = now()
        1、基於行
        2、基於語句
        3、混合

配置過程:
    1、master
        (1) 啟用二進制日誌;
        my.cnf----> log_bin=log_bin.log
        (2) 設置一個在當前集群中惟一的server-id;
        my.cnf----> server_id=1
        (3) 創建一個有復制權限(REPLICATION SLAVE, REPLICATION CLIENT)賬號;
      MariaDB>GRANT REPLICATION SLAVE,REPLICATION CLIENT ON *.* TO ‘slave‘@‘192.168.20.%‘ identified by ‘PASSWORD‘;
        (4)查看Master日誌信息,記錄,復制時使用
        MariaDB>SHOW MASTER STATUS;
    +----------------+----------+--------------+------------------+
    | File                      | Position     | Binlog_Do_DB | Binlog_Ignore_DB |
    +----------------+----------+--------------+------------------+
    | log_bin.000014 | 30155002 |              |                  |
    +----------------+----------+--------------+------------------+

    2、slave
        (1) 啟用中繼日誌;
        my.cnf---->relay_log=relay-bin
        (2) 設置一個在當前集群中惟一的server-id;
        my.cnf----> server_id=2
        (3) 使用有復制權限用戶賬號連接至主服務器,並啟動復制線程;
        MariaDB>CHANGE MASTER TO MASTER_HOST=‘192.168.20.1‘, MASTER_USER=‘slave‘, MASTER_PASSWORD=‘PASSWORD‘, MASTER_LOG_FILE=‘log_bin.0000014‘, MASTER_LOG_POS=30155002, MASTER_CONNECT_RETRY=5
        MariaDB>START SLAVE;
        (4)查看Slave復制狀態
        MariaDB>SHOW SLAVE STATUS\G

     一主多從,一從一主;服務器程序版本最好相同

總結:
    master: binlog dump 
    slave: IO thread, SQL thread 

    slave: 如果連接至主服務器:
        CHANGE MASTER TO option [, option] ...

        option:
        MASTER_BIND = ‘interface_name‘
        | MASTER_HOST = ‘host_name‘     主服務器地址
        | MASTER_USER = ‘user_name‘     有復制權限的用戶名
        | MASTER_PASSWORD = ‘password‘   用戶密碼
        | MASTER_PORT = port_num         主服務器的端口
        | MASTER_CONNECT_RETRY = interval    連接重試時間間隔
        | MASTER_HEARTBEAT_PERIOD = interval    心跳檢測時間間隔
        | MASTER_LOG_FILE = ‘master_log_name‘    主服務器二進制日誌文件
        | MASTER_LOG_POS = master_log_pos          二進制日誌文件中的位置
        | RELAY_LOG_FILE = ‘relay_log_name‘           
        | RELAY_LOG_POS = relay_log_pos
        | MASTER_SSL = {0|1}
        | MASTER_SSL_CA = ‘ca_file_name‘
        | MASTER_SSL_CAPATH = ‘ca_directory_name‘
        | MASTER_SSL_CERT = ‘cert_file_name‘
        | MASTER_SSL_KEY = ‘key_file_name‘
        | MASTER_SSL_CIPHER = ‘cipher_list‘
        | MASTER_SSL_VERIFY_SERVER_CERT = {0|1}
        | IGNORE_SERVER_IDS = (server_id_list)

主主:
    互為主從:
        1、數據不一致; 
        2、自動增長id
            定義一個節點使用奇數id
                auto_increment_offset=1
                auto_increment_increment=2
            定義另一個節點使用偶數id
                auto_increment_offset=2
                auto_increment_increment=2

        (1) 各自使用不同的server id
        (2) 都啟用binlog和relay log 
        (3) 定義自動增長的id字段的增長方式
        (4) 都授權有復制權限的用戶賬號
        (5) 各自把對方指定為主服務器

    GRANT REPLICATION SLAVE,REPLICATION CLIENT ON *.* TO ‘slave‘@‘192.168.20.%‘ IDENTIFIED BY ‘PASSWORD‘;

復制如何開始?
    主節點運行很長時間,且已經有一定規模的數據,如何啟動復制?

    在主節點做一個完全備份,並記錄二進制日誌文件及位置;
    在從節點恢復此完全備份,並在啟動復制時從記錄的二進制日誌文件和位置開始;

復制時應該註意的問題:
    1、如何限制從服務器只讀?
        在從服務器啟動read_only;但僅對非具有SUPER權限的用戶有效;

            阻止所有用戶 :MariaDB> FLUSH TABLES WITH READ LOCK;

    2、如何保證主從復制時的事務安全?
        在master節點啟用參數:
            sync_binlog = on

            如果用到的為InnoDB存儲引擎:
                innodb_flush_logs_at_trx_commit
                innodb_support_xa=on

        在slave節點:
            skip_slave_start

        主節點:
            sync_master_info = 1

        從節點
            sync_relay_log = 1
            sync_relay_log_info = 1

    3、半同步復制
    主節點:
        MariaDB [(none)]> INSTALL PLUGIN rpl_semi_sync_master SONAME ‘semisync_master.so‘;
        Query OK, 0 rows affected (0.05 sec)            

        MariaDB [(none)]> SHOW GLOBAL VARIABLES LIKE ‘%semi%‘;
        +------------------------------------+-------+
        | Variable_name                      | Value |
        +------------------------------------+-------+
        | rpl_semi_sync_master_enabled       | OFF   |
        | rpl_semi_sync_master_timeout       | 10000 |
        | rpl_semi_sync_master_trace_level   | 32    |
        | rpl_semi_sync_master_wait_no_slave | ON    |
        +------------------------------------+-------+
        4 rows in set (0.00 sec)

        MariaDB [(none)]> SET GLOBAL rpl_semi_sync_master_enabled=1;
        Query OK, 0 rows affected (0.00 sec)

        MariaDB [(none)]> SET GLOBAL rpl_semi_sync_master_timeout=2000;
        Query OK, 0 rows affected (0.00 sec)

    從節點:
        MariaDB [(none)]> INSTALL PLUGIN rpl_semi_sync_slave SONAME ‘semisync_slave.so‘;
        Query OK, 0 rows affected (0.05 sec)

        MariaDB [(none)]> SHOW GLOBAL VARIABLES LIKE ‘%semi%‘;
        +---------------------------------+-------+
        | Variable_name                   | Value |
        +---------------------------------+-------+
        | rpl_semi_sync_slave_enabled     | OFF   |
        | rpl_semi_sync_slave_trace_level | 32    |
        +---------------------------------+-------+
        2 rows in set (0.00 sec)

        MariaDB [(none)]> SET GLOBAL rpl_semi_sync_slave_enabled=1;
        Query OK, 0 rows affected (0.00 sec)

    如果從服務器已經啟動,還需要重啟IO_THREAD; 

4、復制過濾器
    讓slave僅復制有限的幾個數據庫,而非所有;

    有兩種實現思路:

    (1) 主服務器僅向二進制日誌中記錄有特定數據庫相關的寫操作;
        問題:即時點還原將無法全面實現; 

        binlog_do_db=                  # 數據庫白名單
        binlog_ignore_db=           # 數據庫黑名單

    (2)從服務器的SQL_THREAD僅在中斷日誌中讀取特定數據相關的語句並應用在本地;
        問題:會造成網絡帶寬和磁盤IO的浪費;

        Replicate_Do_DB=
        Replicate_Ignore_DB=
        Replicate_Do_Table=
        Replicate_Ignore_Table= 
        Replicate_Wild_Do_Table= 
        Replicate_Wild_Ignore_Table=

5、基於SSL的復制
    前提:支持SSL
    (1) 主服務器端配置證書和私鑰,並創建一個要求必須使用SSL連接的復制賬號(REQUIRE SSL);
    (2) SLAV端連接master時,使用MASTER_SSL相關的選項來配置證書等信息;

6、跟復制功能相關的文件:
    master.info:用於保存slave連接至master時的相關信息;
    relay-log.info:保存了當前slave節點上已經復制的當前二進制日誌和本地relay log日誌對應關系; 

7、復制的監控和維護
    (1) 清理日誌:PURGE 

    (2) 復制監控
        SHOW MASTER STATUS
        SHOW BINLOG EVENTS
        SHOW BINARY LOGS

        SHOW SLAVE STATUS

    (3) 如何判斷slave是否落後於master        
     Seconds_Behind_Master: 0

     (4) 如何確定主從節點數據是否一致?
        通過表自身的CHECKSUM檢查
        使用percona-tools中pt-table-checksum

    (5) 數據不一致的修復方法:
        重復復制;

MariaDB主從復制及半同步復制