2. 程式人生 > >初識MariaDB之6——半同步復制

初識MariaDB之6——半同步復制

阿新 • • 發佈：2018-05-10
mysql mariadb 半同步

一、背景介紹

MySQL主從復制能解決一定的單點故障問題，但其異步的工作特性存在一定的隱患，比如主節點事務提交後還未寫入binlog，此時主節點故障後，但主節點認為事務已提交，從節點無法從主節點獲取到該事務的信息，提升為主節點後就會造成數據丟失，為了解決這一問題，谷歌為mysql在5.5之後的版本引進了半同步復制

二、原理介紹

所謂半同步復制就是一主多從，或一主一從的時候，主節點事務提交後至少等待一個從節點寫入中繼日誌，這樣就保證了當主節點故障後，所有的操作都在中繼日誌中有保存，當等待從節點的時間超出設置範圍，會回復異步的方式

三、環境介紹

本次實驗使用CentOS7.4系統，5.5.56-MariaDB，實驗拓撲如下圖所示：

技術分享圖片技術分享圖片

使用一個日誌服務器（也可以是從服務器）作為與主節點半同步的服務器，其他從服務器通過日誌服務器同步binlog，由於日誌服務器自身只需要記錄binlog，所以不需要數據在其上執行一遍，存儲引擎可以使用blackhole

四、操作步驟

1.主節點服務器操作

（1）啟動主節點服務，配置文件如下

[mysqld]

datadir=/var/lib/mysql

socket=/var/lib/mysql/mysql.sock

skip_name_resolve=ON

log_bin=mysql-binlog

slow_query_log=ON

server-id=10

innodb_file_per_table=ON

binlog_format=ROW

（2）創建一個主從復制的賬號

MariaDB [mysql]> grant replication slave on *.* to 'bak'@'172.16.10.%' identified by 'bakpass';

MariaDB [mysql]> flush privileges;

（3）安裝並啟動半同步插件（可寫入配置文件永久生效）

MariaDB [(none)]> install plugin rpl_semi_sync_master soname 'semisync_master.so';

MariaDB [(none)]> set global rpl_semi_sync_master_enabled=ON;

（4）確認插件和功能以正常啟動

MariaDB [(none)]> show global variables like '%semi%';

+------------------------------------+-------+

| Variable_name | Value |

+------------------------------------+-------+

| rpl_semi_sync_master_enabled | ON |

| rpl_semi_sync_master_timeout | 10000 |

| rpl_semi_sync_master_trace_level | 32 |

| rpl_semi_sync_master_wait_no_slave | ON |

+------------------------------------+-------+

MariaDB [(none)]> show plugins;

技術分享圖片技術分享圖片

2.日誌服務器操作

（1）啟動日誌服務器，配置文件如下

[mysqld]

datadir=/var/lib/mysql

socket=/var/lib/mysql/mysql.sock

skip_name_resolve=ON

relay_log=mysql-relaylog

relay_log_index=mysql-relaylog

read_only=ON

relay_log_purge=ON

slow_query_log=ON

server-id=20

innodb_file_per_table=ON

default_storage_engine=blackhole

binlog_format=ROW

log_bin=mysql-binlog

log_slave_updates=ON

（2）關閉read_only，創建一個主從復制的賬號後再開啟

MariaDB [(none)]> set global read_only=0;

MariaDB [(none)]> grant replication slave on *.* to 'bak'@'172.16.10.%' identified by 'bakpass';

MariaDB [(none)]> flush privileges;

MariaDB [(none)]> set global read_only=1;

（3）安裝並啟動半同步插件

MariaDB [(none)]> install plugin rpl_semi_sync_slave soname 'semisync_slave.so';

MariaDB [(none)]> set global rpl_semi_sync_slave_enabled=ON;

（4）確認插件和功能以正常啟動

MariaDB [(none)]> show global variables like '%semi%';

+---------------------------------+-------+

| Variable_name | Value |

+---------------------------------+-------+

| rpl_semi_sync_slave_enabled | ON |

| rpl_semi_sync_slave_trace_level | 32 |

+---------------------------------+-------+

MariaDB [(none)]> show plugins;

技術分享圖片技術分享圖片

（5）指定主服務器及主服務器當前的binlog日誌和position

MariaDB [hellodb]> change master to

-> master_host='172.16.10.30',

-> master_user='bak',

-> master_password='bakpass',

-> master_port=3306,

-> master_log_file='mysql-binlog.000003',

-> master_log_pos=7805,

-> master_connect_retry=10;

（6）啟動從節點（可以指啟動指定線程類型，不指定為都啟動）

MariaDB [hellodb]> start slave [IO_THREAD | SQL_THREAD];

（7）查看從節點狀態（Slave_IO_Running和Slave_SQL_Running顯示Yes成功）

MariaDB [(none)]> show slave status \G

3.驗證日誌服務器blackhole存儲引擎是否生效

（1）主節點創建一個數據庫及表

MariaDB [(none)]> create database ark;

MariaDB [(none)]> use ark;

MariaDB [ark]> CREATE TABLE `students` ( `StuID` int(10) primary key, `Name` varchar(50) );

（2）確認當前主節點的binlog日誌及position

MariaDB [ark]> show master status;

+---------------------+----------+--------------+------------------+

| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |

+---------------------+----------+--------------+------------------+

| mysql-binlog.000003 | 8638 | | |

+---------------------+----------+--------------+------------------+

（3）確認日誌服務器當前的binlog日誌及position

MariaDB [ark]> show master status;

+---------------------+----------+--------------+------------------+

| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |

+---------------------+----------+--------------+------------------+

| mysql-binlog.000003 | 1104 | | |

+---------------------+----------+--------------+------------------+

（4）主服務器上任意插入條數據，再次觀察主節點的binlog日誌及position

MariaDB [ark]> insert into students (stuid,name) values (3,'fu');

MariaDB [ark]> show master status;

+---------------------+----------+--------------+------------------+

| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |

+---------------------+----------+--------------+------------------+

| mysql-binlog.000003 | 8818 | | |

+---------------------+----------+--------------+------------------+

（5）在日誌服務器上查看中繼日誌以更新

MariaDB [ark]> show slave status \G

*************************** 1. row ***************************

Slave_IO_State: Waiting for master to send event

Master_Host: 172.16.10.30

Master_User: bak

Master_Port: 3306

Connect_Retry: 10

Master_Log_File: mysql-binlog.000003

Read_Master_Log_Pos: 8818

Relay_Log_File: mysql-relaylog.000002

Relay_Log_Pos: 1545

Relay_Master_Log_File: mysql-binlog.000003

Slave_IO_Running: Yes

Slave_SQL_Running: Yes

Exec_Master_Log_Pos: 8818

（6）並且日誌服務器上的binlog日誌也完成了更新

MariaDB [ark]> show master status;

+---------------------+----------+--------------+------------------+

| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |

+---------------------+----------+--------------+------------------+

| mysql-binlog.000003 | 1309 | | |

+---------------------+----------+--------------+------------------+

（7）但此時表中卻無任何數據，說明blackhole引擎工作正常

技術分享圖片技術分享圖片

4.從節點服務器操作

從節點就是將日誌服務器當成主節點，所有的同步是指向日誌服務器

（1）啟動從節點的mysql服務，啟動relaylog日誌，更改serverid

[mysqld]

datadir=/var/lib/mysql

socket=/var/lib/mysql/mysql.sock

skip_name_resolve=ON

relay_log=mysql-relaylog

relay_log_index=mysql-relaylog

read_only=ON

relay_log_purge=ON

slow_query_log=ON

server-id=30

innodb_file_per_table=ON

（2）指定主服務器及主服務器當前的binlog日誌和position

MariaDB [(none)]> change master to

-> master_host='172.16.10.40',

-> master_user='bak',

-> master_password='bakpass',

-> master_port=3306,

-> master_log_file='mysql-binlog.000003',

-> master_log_pos=1309,

-> master_connect_retry=10;

（3）啟動從節點（可以指啟動指定線程類型，不指定為都啟動）

MariaDB [(none)]> start slave [IO_THREAD | SQL_THREAD];

（5）查看從節點狀態（Slave_IO_Running和Slave_SQL_Running顯示Yes成功）

MariaDB [(none)]> show slave status \G

*************************** 1. row ***************************

Slave_IO_State: Waiting for master to send event

Master_Host: 172.16.10.40

Master_User: bak

Master_Port: 3306

Connect_Retry: 10

Master_Log_File: mysql-binlog.000003

Read_Master_Log_Pos: 1309

Relay_Log_File: mysql-relaylog.000002

Relay_Log_Pos: 532

Relay_Master_Log_File: mysql-binlog.000003

Slave_IO_Running: Yes

Slave_SQL_Running: Yes

五、結果驗證

（1）在日誌服務器查看上遊節點

MariaDB [(none)]> show slave hosts;

+-----------+------+------+-----------+

| Server_id | Host | Port | Master_id |

+-----------+------+------+-----------+

| 20 | | 3306 | 10 |

+-----------+------+------+-----------+

（2）在從節點查看上遊節點

MariaDB [(none)]> show slave hosts;

+-----------+------+------+-----------+

| Server_id | Host | Port | Master_id |

+-----------+------+------+-----------+

| 30 | | 3306 | 20 |

+-----------+------+------+-----------+

（3）主庫上創建個數據庫，進行驗證，至此操作完成

MariaDB [(none)]> create database wahaha;

MariaDB [(none)]> show status like '%semi%';

技術分享圖片技術分享圖片

Rpl_semi_sync_master_no_tx 沒有成功接收slave提交的次數

補充說明：

1.blackhole存儲引擎會將所有關於數據的操作丟棄，但是關於數據庫結構的操作會執行（如創建數據庫，表）

2.Mariadb5.5或者MySQL5.7以後的版本支持多主一從，從服務器可以成為多臺MySQL服務器的統一日誌服務器，但要求是多臺MySQL服務器上數據庫名稱必須不相同，同時所有從服務器使用不同的復制賬號，因為主服務器上每個I/O dump thread都需要用不同的賬號發起

MariaDB [(none)]> show processlist \G

*************************** 3. row ***************************

Id: 7

User: bak

Host: 172.16.10.40:47972

db: NULL

Command: Binlog Dump

Time: 15921

State: Master has sent all binlog to slave; waiting for binlog to be updated

Info: NULL

Progress: 0.000

*************************** 5. row ***************************

Id: 17

User: qwe

Host: 172.16.10.50:58968

db: NULL

Command: Binlog Dump

Time: 1866

State: Master has sent all binlog to slave; waiting for binlog to be updated

Info: NULL

Progress: 0.000

3.如果是先開啟了主從復制，再切換到半同步，只需要執行

MariaDB [(none)]> stop slave io_thread;

MariaDB [(none)]> start slave io_thread;

4.如果服務器重啟，啟動MySQL服務器後，plugin插件和主從復制功能會自動啟動，但是半同步功能未啟動，此時是默認的異步同步（或者配置完成半同步後將該選項寫入配置文件），需要手動啟動半同步功能和io_thread，執行命令為：

主節點：

MariaDB [(none)]> set global rpl_semi_sync_master_enabled=ON;

從節點：

MariaDB [(none)]> set global rpl_semi_sync_slave_enabled=ON;

MariaDB [(none)]> stop slave io_thread;

MariaDB [(none)]> start slave io_thread;


初識MariaDB之6——半同步復制

相關推薦

初識MariaDB之6——半同步復制

mysql mariadb 半同步 一、背景介紹MySQL主從復制能解決一定的單點故障問題，但其異步的工作特性存在一定的隱患，比如主節點事務提交後還未寫入binlog，此時主節點故障後，但主節點認為事務已提交，從節點無法從主節點獲取到該事務的信息，提升為主節點後就會造成數據丟失，為了解決這一問題，

MySQL 5.7 新特性之增強半同步復制

art times -s gin com wrap nlog ash 所有 1. 背景介紹 半同步復制 普通的replication，即mysql的異步復制，依靠mysql二進制日誌也即binary log進行數據復制。比如兩臺機器，一臺主機(master)，另外一臺是從機

數據庫 之 Mysql半同步復制

tab relay_log 正常 rar nbsp 主從復制 設定 cli library 1 概述半同步復制指一部分主機同步復制，另一部分主機異步復制同步的邏輯是用戶寫操作到主服務器，主服務記錄到二進制文件後，主服務會同步發送給從服務器，從服務器響應數據同步後，主服務器

初識MariaDB之8——GTID主從復制

mysql mariadb gtid 一、背景介紹在MySQL5.6之前，主從復制是通過binlog和position實現的，當A主機宕機後，B主機成為新的主節點，此時在C主機上需要使用sql語句：CHANGE MASTER TO MASTER_HOST='xxx', MASTER

Mysql數據庫學習之mysql半同步復制簡析

mysql數據庫 數據庫管理員 數據庫工程師 數據庫開發 從5.7版本開始MySQL通過擴展的方式支持了半同步復制，當主庫執行一個更新操作事務時，提交操作會被阻止直到至少有一個半同步的，復制slave確認已經接收到本次更新操作，主庫的提交操作才會繼續，半同步復制的slave發送確認消息只會在本

MariaDB主從半同步復制詳解

red feedback 節點 master syntax off one out feed 半同步復制(Semisynchronous replication) 介於異步復制和全同步復制之間，主庫在執行完客戶端提交的事務後不是立刻返回給客戶端，而是等待至少一個從庫接收到並

MariaDB主從復制及半同步復制

mysql主從復制：從服務器：I/O線程：從master請求二進制日誌信息，並保存至中繼日誌；SQL線程：從relay log中讀取日誌信息，在本地完成重放； 異步模式：async 1、從服務器落後於主服務器； 2、主從數據不一致； 二進制日誌的格式：SET

Mysql 主從復制之半同步復制(基於gtid)

半同步復制 server-id作用Mysql主從復制mysql主從復制原理：從庫有兩個線程IO線程和SQL線程1.從庫的IO線程向主庫的主進程發送請求，主庫驗證從庫，交給主庫IO線程負責數據傳輸;2.主庫IO線程對比從庫發送過來的master.info裏的信息，將binlog文件信息，偏移量和binlog文件

MariaDB 10.3 主主半同步復制

MariaDB 主主半同步復制 MariaDB主主半同步，也就是兩個主從同步都開啟半同步復制。一. MariaDB01主 MariaDB02從 開啟半同步復制1. MariaDB01 主SET GLOBAL rpl_semi_sync_master_enabled = 1;2. MariaDB02

Mariadb半同步復制，主從復制與雙主復制

mysql mariadb 主從 主主 半同步復制 知識背景 ?? 一.mariadb復制相關知識 ??1.mariadb的來源????mysql數據庫目前在數據庫市場中所占份額僅僅次於oracle數據庫，同時也是開源數據庫的龍頭老大。由於mysql數據庫的開源性和高性能,同時還是免費的(

MySQL 5.6 搭建半同步復制

semisync 功能 thread sta mysql star like oca glob 確定是否可以動態安裝插件 show variables like ‘%have_dynamic_loading%‘; ls /usr/local/mysql-5.6.38-lin

半同步復制的實現

mysql1、在主服務器上的配置1）安裝mariadb-server[[email protected]/* */ ~]# yum -y install mariadb-server2）編輯/etc/my.cnf[[email protected]/* */ ~]# vim /etc/

MySQL半同步復制配置

point pos st3 架構 宕機 小事 tro 延遲 red ansible-playbook -f 3 endpoint/mysql.yml -e "exec=fileConfig" -e "db_action=setAll" -e "paras={‘plugin-

MySQL半同步復制--handle_slave_io等待master發送event

mysql handle_slave_iohandle_slave_io函數調用read_event函數：read_event函數從連接中讀取事件，如果沒有事件將會阻塞在這裏等待master發送事件。#0 0x00898402 in __kernel_vsyscall () #1 0x00c28133 i

Mysql 半同步復制

mysql 半同步復制Mysql 半同步復制 背景： 之所以要學習Mysql的半同步復制，是為了解決主從復制時，主從不一致太多，差距太大的問題，一個主服務器可以有多個從服務器，當主服務器宕機或者出現故障時就需要一個同步最好最多的從服務器來接替工作，而通過半同步復制的從服務器無疑是最佳選擇。

MySQL的半同步復制

mysql的半同步復制MySQL的半同步復制半同步復制： 什麽是半同步復制?我們知道在默認情況下，MySQL的復制是異步的，這意味著主服務器及其從服務器是獨立的。異步復制可以提供最佳的性能，因為主服務器在將更新的數據寫入它的二進制日誌(Binlog)文件中後，無需等待驗證更新數據是否已經復制到從服務器中，

Mysql實現數據庫主從復制、主主復制、半同步復制

mysql 數據庫復制 主主復制 主從復制 半同步復制 --------------Mysql實現數據庫主從復制架構----------------一、環境準備：centos系統服務器2臺、一臺用戶做Mysql主服務器，一臺用於做Mysql從服務器，配置好yum源、防火墻關閉、各節點時鐘服

MySQL5.7 半同步復制

span 日誌 提交 插件 comm 發生 master info 同步 一、概述 5.5與5.7的半同步復制可能存在差異，從MySQL5.5開始，MySQL以插件的形式支持半同步復制 異步：默認情況下，MySQL復制是異步的。主庫在執行完客戶端提交的事務後會立即將結果返給

mysql半同步復制

semi orm mas mysql intro tar cti vpd blog 一、簡單介紹 所查看的文檔：http://www.actionsky.com/mysql-57-semi-sync-intro/其中對於半同步復制講解的非常詳細。 二、進行簡單的配置

【可靠性】Mysql 5.7 降低了半同步復制-數據丟失的風險

time 原理 cat jpg 出現 nsa read pos ngs 如果你的生產線開啟了半同步復制，那麽對數據的一致性會要求較高，但在MySQL5.5/5.6裏，會存在數據不一致的風險。有這麽一個場景，客戶端提交了一個事務，master把binlog發送給slave，在