Mysql之主從架構的複製原理及主從/雙主配置詳解(二)
阿新 • • 發佈:2019-02-13
3.深入瞭解複製
3.1、基於語句的複製(Statement-BasedReplication)
MySQL5.0及之前的版本僅支援基於語句的複製(也叫做邏輯複製,logical replication),這在資料庫並不常見。master記錄下改變資料的查詢,然後,slave從中繼日誌中讀取事件,並執行它,這些SQL語句與master執行的語句一樣。
這種方式的優點就是實現簡單。此外,基於語句的複製的二進位制日誌可以很好的進行壓縮,而且日誌的資料量也較小,佔用頻寬少——例如,一個更新GB的資料的查詢僅需要幾十個位元組的二進位制日誌。而mysqlbinlog對於基於語句的日誌處理十分方便。
但是,基於語句的複製並不是像它看起來那麼簡單,因為一些查詢語句依賴於master的特定條件,例如,master與slave可能有不同的時間。所以,MySQL的二進位制日誌的格式不僅僅是查詢語句,還包括一些元資料資訊,例如,當前的時間戳。即使如此,還是有一些語句,比如,CURRENT USER函式,不能正確的進行復制。此外,儲存過程和觸發器也是一個問題。
另外一個問題就是基於語句的複製必須是序列化的。這要求大量特殊的程式碼,配置,例如InnoDB的next-key鎖等。並不是所有的儲存引擎都支援基於語句的複製。
3.2、基於記錄的複製(Row-Based Replication)
MySQL增加基於記錄的複製,在二進位制日誌中記錄下實際資料的改變,這與其它一些DBMS的實現方式類似。這種方式有優點,也有缺點。優點就是可以對任何語句都能正確工作,一些語句的效率更高。主要的缺點就是二進位制日誌可能會很大,而且不直觀,所以,你不能使用mysqlbinlog來檢視二進位制日誌。對於一些語句,基於記錄的複製能夠更有效的工作,如:
mysql> INSERT INTO summary_table(col1, col2, sum_col3)
-> SELECT col1, col2, sum(col3)
-> FROM enormous_table
-> GROUP BY col1, col2;
假設,只有三種唯一的col1和col2的組合,但是,該查詢會掃描原表的許多行,卻僅返回三條記錄。此時,基於記錄的複製效率更高。
另一方面,下面的語句,基於語句的複製更有效:
mysql> UPDATE enormous_table SET col1 = 0;
此時使用基於記錄的複製代價會非常高。由於兩種方式不能對所有情況都能很好的處理,所以,MySQL 5.1支援在基於語句的複製和基於記錄的複製之前動態交換。你可以通過設定session變數binlog_format來進行控制。
3.3、複製相關的檔案
除了二進位制日誌和中繼日誌檔案外,還有其它一些與複製相關的檔案。如下:(1)mysql-bin.index
伺服器一旦開啟二進位制日誌,會產生一個與二日誌檔案同名,但是以.index結尾的檔案。它用於跟蹤磁碟上存在哪些二進位制日誌檔案。MySQL用它來定位二進位制日誌檔案。(2)mysql-relay-bin.index
該檔案的功能與mysql-bin.index類似,但是它是針對中繼日誌,而不是二進位制日誌。(3)master.info
儲存從伺服器連線至主服務時所需要的資訊,每行一個值儲存master的相關資訊。不要刪除它,否則,slave重啟後不能連線master。(4)relay-log.info
儲存了複製位置:包括二進位制日誌和中繼日誌的檔案及位置。3.5、複製過濾(Replication Filters)
4.複製的常用拓撲結構
複製的體系結構有以下一些基本原則:(1)每個slave可以有一個或多個master;
(2)每個slave只能有一個唯一的伺服器ID;
(3)每個master可以有很多slave;
(4)如果設定log_slave_updates,slave可以是其它slave的master,從而擴散master的更新。
4.1、單一master和多slave
由一個master和一個slave組成複製系統是最簡單的情況。Slave之間並不相互通訊,只能與master進行通訊。 如果寫操作較少,而讀操作很時,可以採取這種結構。你可以將讀操作分佈到其它的slave,從而減小master的壓力。但是,當slave增加到一定數量時,slave對master的負載以及網路頻寬都會成為一個嚴重的問題。這種結構雖然簡單,但是,它卻非常靈活,足夠滿足大多數應用需求。一些建議:
(1) 不同的slave扮演不同的作用(例如使用不同的索引,或者不同的儲存引擎);
(2) 用一個slave作為備用master,只進行復制;
(3) 用一個遠端的slave,用於災難恢復;
4.2、主動模式的Master-Master(Master-Master in Active-Active Mode)
Master-Master複製的兩臺伺服器,既是master,又是另一臺伺服器的slave。這樣,任何一方所做的變更,都會通過複製應用到另外一方的資料庫中。 可能有些讀者朋友會有一個擔心,這樣搭建複製環境之後,難道不會造成兩臺MySQL之間的迴圈複製麼?實際上MySQL自己早就想到了這一點,所以在MySQL的BinaryLog中記錄了當前MySQL的server-id,而且這個引數也是我們搭建MySQLReplication的時候必須明確指定,而且Master和Slave的server-id引數值比需要不一致才能使MySQLReplication搭建成功。一旦有了server-id的值之後,MySQL就很容易判斷某個變更是從哪一個MySQLServer最初產生的,所以就很容易避免出現迴圈複製的情況。而且,如果我們不開啟記錄Slave的BinaryLog的選項(--log-slave-update)的時候,MySQL根本就不會記錄複製過程中的變更到BinaryLog中,就更不用擔心可能會出現迴圈複製的情形了。 如圖:主動的Master-Master複製有一些特殊的用處。例如,地理上分佈的兩個部分都需要自己的可寫的資料副本。這種結構最大的問題就是更新衝突。假設一個表只有一行(一列)的資料,其值為1,如果兩個伺服器分別同時執行如下語句:
在第一個伺服器上執行:
mysql> UPDATE tbl SET col=col + 1;
在第二個伺服器上執行:
mysql> UPDATE tbl SET col=col * 2;
那麼結果是多少呢?一臺伺服器是4,另一個伺服器是3,但是,這並不會產生錯誤。
Master1/Master2 | Platfrom | IP | APP Version |
Master1 | CentOS6.5_X86-64 | 172.16.41.1 | mariadb-10.0.10 |
Master2 | CentOS6.5_X86-64 | 172.16.41.2 | mariadb-10.0.10 |
#Master1的配置:
(1)修改server-id 主配置檔案/etc/my.cnf [mysqld]段中,修改如下行:server-id = 1 |
MariaDB [(none)]> CREATE USER 'luccy'@'172.16.41.2' IDENTIFIED
BY 'qazwsx123'; MariaDB [(none)]> REVOKE ALL PRIVILEGES ,GRANT OPTION FROM 'luccy'@'172.16.41.2'; MariaDB [(none)]> GRANT RELOAD,LOCK TABLES, REPLICATION CLIENT ,REPLICATION SLAVE ON *.* TO 'luccy'@'172.16.41.2'; |
#Master2的配置:
主配置檔案/etc/my.cnf [mysqld]段中,修改如下行:
server-id = 2 |
MariaDB [(none)]> CREATE USER 'jerry'@'172.16.41.1' IDENTIFIED BY 'qazwsx123'; MariaDB [(none)]> REVOKE ALL PRIVILEGES ,GRANT OPTION FROM 'jerry'@'172.16.41.1'; MariaDB [(none)]> GRANT RELOAD,LOCK TABLES, REPLICATION CLIENT ,REPLICATION SLAVE ON *.* TO 'jerry'@'172.16.41.1'; |
#Master1指向Master2 |
4.3、主動-被動模式的Master-Master(Master-Master in Active-Passive Mode)
4.4 級聯複製架構 Master –Slaves - Slaves
4.5、帶從伺服器的Master-Master結構(Master-Master with Slaves)
這種結構的優點就是提供了冗餘。在地理上分佈的複製結構,它不存在單一節點故障問題,而且還可以將讀密集型的請求放到slave上。參考文章:
http://www.52youpiao.com/it/post/mysql-slave.html