1. 程式人生 > >Mysql 服務器主從 主主配置

Mysql 服務器主從 主主配置

ant ide google 文件 med 推送 就會 壞事 復雜

目錄
原理 1
主從同步配置 2
主服務器同步用戶授權 2
配置MySQL主服務器的my.cnf文件 3
備機配置: 4
常用命令: 5
雙主配置my.cnf 6
binlog_ignore_db引起的同步復制故障 7
常見錯誤 11
Mysql Binlog三種格式介紹及分析 11

原理
經過抓包分析,tcpdump -n -i eth0 -A -s0 -v host 218.24.23.253。當從與主處於正常連接狀態時(而不是slave第一次啟動時),主發生sql操作時,是將binlog主動推送給從服務器。
當正常同步之後,如果Slave mysql 停止,如服務停止了,或者設備故障了。那麽在slave重新正常後,在這期間的主的變化都會正常同步到slave。

一 MySQL 復制的基本過程如下:(各部分學習自Google,謝謝)

  1. Slave 上面的IO線程連接上 Master,並請求從指定日誌文件的指定位置(或者從最開始的日誌)之後的日誌內容;
  2. Master 接收到來自 Slave 的 IO 線程的請求後,通過負責復制的 IO線程根據請求信息讀取指定日誌指定位置之後的日誌信息,返回給 Slave 端的 IO線程。返回信息中除了日誌所包含的信息之外,還包括本次返回的信息在 Master 端的 Binary Log 文件的名稱以及在 BinaryLog 中的位置;
  3. Slave 的 IO 線程接收到信息後,將接收到的日誌內容依次寫入到 Slave 端的RelayLog文件(mysql-relay-lin.xxxxxx)的最末端,並將讀取到的Master端的bin-log的文件名和位置記錄到 master-info文件中,以便在下一次讀取的時候能夠清楚的告訴Master“我需要從某個bin-log的哪個位置開始往後的日誌內容,請發給 我”
  4. Slave 的 SQL 線程檢測到 Relay Log 中新增加了內容後,會馬上解析該 Log 文件中的內容成為在 Master
    端真實執行時候的那些可執行的 Query 語句,並在自身執行這些 Query。這樣,實際上就是在 Master 端和 Slave端執行了同樣的 Query,所以兩端的數據是完全一樣的。

主從同步配置
安裝:
yum install mysql mysql-server #安裝
cp /usr/share/mysql/my-medium.cnf /etc/my.cnf #復制配置文件
service mysql start #啟動
chkconfig mysql on #設置開機自動啟動

mysql_secure_installatio n #初始化數據庫,刪除test庫;禁止root遠程登錄;

mysql root密碼:anhuilgl@86253744!@#
218.24.44.80;218.24.23.253 的mysql密碼修改為 root/Aanhuilgl@86253744
同步用的賬號和密碼:ZHUOMING_backup/ZHU0MING@135!#%

修改mysql的服務端口
vim /etc/my.cnf
主服務器同步用戶授權
CREATE DATABASE backup DEFAULT CHARACTER SET utf8 COLLATE utf8_general_ci; 建庫
#CREATE USER ‘ZHUOMING_backup‘@‘218.24.44.80‘ IDENTIFIED BY ‘ZHU0MING@135!#%‘; 建備份用的用戶和密碼(建用戶時填寫允許用戶備份操作的IP;在給此用戶賦權時的IP必須與此相同,否則賦不上權限)
#建用戶並授權
GRANT FILE,REPLICATION SLAVE ON . TO ‘ZHUOMING_backup‘@‘218.24.44.80‘ IDENTIFIED BY ‘ZHU0MING@135!#%‘; #給備份用戶相應的權限,
REVOKE FILE,REPLICATION SLAVE ON . FROM ‘ZHUOMING_backup‘@‘218.24.23.232‘; #收回授權
如果中間還通過防火墻做的靜態地址映射還需要增加防火墻外網口的地址和映射用的地址,否則連不上
GRANT FILE,REPLICATION SLAVE ON . TO ‘ZHUOMING_backup‘@‘223.100.7.151‘ IDENTIFIED BY ‘ZHU0MING@135!#%‘;
GRANT FILE,REPLICATION SLAVE ON . TO ‘ZHUOMING_backup‘@‘223.100.7.155‘ IDENTIFIED BY ‘ZHU0MING@135!#%‘;
GRANT ALL PRIVILEGES ON . TO ‘ZHUOMING_backup‘@‘223.100.7.155‘ IDENTIFIED BY ‘ZHU0MING@135!#%‘;
flush privileges; 每次賦權後必須刷新

三、把MySQL主服務器中的數據庫osyunweidb導入到MySQL從服務器中
1、導出數據庫osyunweidb
備註:在導出之前可以先進入MySQL控制臺執行下面命令
flush tables with read lock; #生產環境必須先鎖定。數據庫只讀鎖定命令,防止導出數據庫的時候有數據寫入。這個命令是全局讀鎖定,執行了命令之後所有庫所有表都被鎖定只讀。一般都是用在數據庫聯機備份,這個時候數據庫的寫操作將被阻塞,讀操作順利進行。解鎖的語句也是unlock tables。
mysqldump -u root -p osyunweidb > /home/osyunweidbbak.sql #在MySQL主服務器進行操作,導出數據庫osyunweidb到/home/osyunweidbbak.sql
unlock tables; #解除鎖定
2、導入數據庫到MySQL從服務器
mysql -u root -p #進入從服務器MySQL控制臺
create database osyunweidb; #創建數據庫
use osyunweidb #進入數據庫
source /home/osyunweidbbak.sql #導入備份文件到數據庫
mysql -u osyunweidbbak -h 192.168.21.169 -p #測試在從服務器上登錄到主服務器
MySQL主服務器配置
use backup; 將backup庫設置為當前庫
create table mytest (username varchar(20),password varchar(20)); 創建一個測試用表

vi /etc/my.cnf #編輯配置文件,在[mysqld]部分添加下面內容
server-id=1 #設置服務器id,為1表示主服務器,註意:如果原來的配置文件中已經有這一行,就不用再添加了。
log-bin=mysql-bin #啟動MySQL二進制日誌系統,註意:如果原來的配置文件中已經有這一行,就不用再添加了。
binlog_format = MIXED #建議使用MIXED格式。使用show variables like ‘binlog_format‘查看;
expire_logs_days = 10 #binlog過期清理時間,根據每日生成的日誌量,磁盤空間等設置過期時間。
max_binlog_size = 100M #每個日誌文件大小的最大值
binlog-do-db=backup #需要同步的數據庫名,如果有多個數據庫,可重復此參數,每個數據庫一行
binlog-ignore-db=mysql #不同步mysql數據庫
binlog-ignore-db=information_schema
binlog-ignore-db=performance_schema
service mysql restart #重啟MySQL
mysql -u root -p #進入mysql控制臺

查看主服務器,出現以下類似信息
mysql> show master status;
+------------------+----------+--------------+------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql-bin.000001 | 106 | backup | |
+------------------+----------+--------------+------------------+
1 row in set (0.00 sec)

查看server-id:
mysql> show variables like ‘server_id‘;
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| server_id | 1 |
+---------------+-------+
1 row in set (0.00 sec)

Mysql從服務器配置
vi /etc/my.cnf #編輯配置文件,在[mysqld]部分添加下面內容
server-id=2 #配置文件中已經有一行server-id=1,修改其值為2,主從不能相同
log-bin=mysql-bin #啟動MySQL二進制日誌系統,如果只做從數據庫則不起也可以,建議開啟。
binlog_format = MIXED #建議使用MIXED格式。使用show variables like ‘binlog_format‘查看;
expire_logs_days = 10 #binlog過期清理時間,根據每日生成的日誌量,磁盤空間等設置過期時間。
max_binlog_size = 100M #每個日誌文件大小的最大值
read-only = 1 #設置為只讀,以免被誤寫入而導致主從不同步,對非root用戶有效。
replicate-do-db=backup #需要同步的數據庫名,如果有多個數據庫,可重復此參數,每個數據庫一行
replicate-ignore-db=mysql #不同步mysql系統數據庫

:wq! #保存退出
service mysql restart #重啟MySQL
註意:MySQL 5.1.7版本之後,已經不支持把master配置屬性寫入my.cnf配置文件中了,配置文件中只需要把同步的數據庫和要忽略的數據庫寫入即可。
mysql -u root -p #進入MySQL控制臺
slave stop; #停止slave同步進程
進入主庫,鎖定主庫表:
flush tables with read lock; #生產環境必須先鎖定。
#執行同步語句(執行同步必須在mysql> stop slave; 的狀態下進行)
change master to master_host=‘223.100.7.155‘, MASTER_PORT=3306,master_user=‘ZHUOMING_backup‘,master_password=‘ZHU0MING@135!#%‘,master_log_file=‘mysql-bin.000001‘ ,master_log_pos=106;
start slave; #開啟slave同步進程
進入主庫,解鎖主庫標:
unlock tables;#解鎖。

SHOW SLAVE STATUS\G #查看slave同步信息,出現以下內容
1. row
Slave_IO_State: Waiting for master to send event
Master_Host: 192.168.21.169
Master_User: osyunweidbbak
Master_Port: 3306
Connect_Retry: 60
Master_Log_File: mysql-bin.000019
Read_Master_Log_Pos: 7131
Relay_Log_File: MySQLSlave-relay-bin.000002
Relay_Log_Pos: 253
Relay_Master_Log_File: mysql-bin.000019
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
Replicate_Do_DB: osyunweidb
Replicate_Ignore_DB: mysql
Replicate_Do_Table:
Replicate_Ignore_Table:
1 row in set (0.00 sec)
測試:
在主備數據庫服務器上:
CREATE DATABASE backup DEFAULT CHARACTER SET utf8 COLLATE utf8_general_ci; 建庫
create table cc(id int auto_increment,name varchar(20),primary key(id)); 建表
insert into cc (name) values(‘Mr.chai‘); 插數據
在備數據庫服務器上查看是否有新建的表和數據。

常用命令:
1、用戶創建完,賦完權限之後在備服務器上用此命令進行測試。如果能進行登錄則表明權限和連通性沒問題。
mysql -u osyunweidbbak -h 192.168.21.169 -p #測試在從服務器上登錄到主服務器
1、查看用戶及權限
SELECT DISTINCT CONCAT(‘User: ‘‘‘,user,‘‘‘@‘‘‘,host,‘‘‘;‘) AS query FROM mysql.user;
Show grants for ‘ZHUOMING_backup‘@‘10.34.34.232‘;
允許root用戶從218.24.23.253訪問
mysql>GRANT ALL PRIVILEGES ON . TO ‘root‘@‘218.24.23.253‘ IDENTIFIED BY ‘Aanhuilgl@86253744‘;
mysql> flush privileges; 修改權限之後需要執行此句以使之生效。
1、手動同步主數據庫;必須在slave stop的狀態下;
mysql>change master to master_host=‘223.100.7.155‘,master_user=‘ZHUOMING_backup‘,master_password=‘ZHU0MING@135!#%‘,master_log_file=‘mysql-bin.000002‘ ,master_log_pos=2394;

2、查看slave狀態
mysql> show slave status\G;

3、手動從主數據庫下載
mysql> load data from master;

4、在主備上可以查看各自的進程狀態,主上一個BinlogDump,從上兩個一個是I/O一個是SQL進程,I/O進程負責接收更新,SQL負責寫入本地庫。
show processlist;

5、查看參數配置
show variables like ‘slave%‘;

6、查看某用戶權限
Show grants for ‘ZHUOMING_backup‘@‘218.24.23.232‘;

7、修改配置文件my.cnf,在[mysqld]下添加slave_net_timeout = 600;此參數的默認值是3600(秒,1小時),是指 slave 端(備數據庫)的 I/O 線程處於 “waiting for master to send event”狀態,如果這個等待狀態超過 slave_net_timeout 時間,就會觸發重連 master 的動作。
slave_net_timeout = 600 此參數的合理值需要在實際環境中進行一下測試,時間太長,容易導致同步不及時,時間太短,則備機會頻繁連接主機。
在一個已經建立主從復制關系的系統裏面,正常情況下,由從庫向主庫發送一個 COM_BINLOG_DUMP 命令後,主庫有新的binlog event,會向備庫發送binlog。但是由於網絡故障或者其他原因(如主從數據庫之間跨防火墻)導致主庫與從庫的連接斷開或者主庫長時間沒有向從庫發送binlog。例如該例子中數據庫集群 10s 左右還沒有寫入的情況,超過slave_net_timeout設置的值,從庫會向主庫發起重連請求。5.6 版本slave 發起重連請求時,MySQL都會判斷有沒有用明文的用戶名密碼,如果有則發出上述信息到error.log。

8、--logs-slave-updates 參數
這個是在my.cnf文件配置的
通常情況,從服務器從主服務器接收到的更新不記入它的二進制日誌。該選項告訴從服務器將其SQL線程執行的更新記入到從服務器自己的二進制日誌。為了使該 選項生效,還必須用--logs-bin選項啟動從服務器以啟用二進制日誌。如果想要應用鏈式復制服務器,應使用--logs-slave- updates。例如,可能你想要這樣設置:
A -> B -> C
也就是說,A為從服務器B的主服務器,B為從服務器C的主服務器。為了能工作,B必須既為主服務器又為從服務器。你必須用--logs-bin啟動A和B以啟用二進制日誌,並且用--logs-slave-updates選項啟動B。

在my.cnf文件設置此選項
log_slave_updates=1
當然在這種機制下可能有的同學會存在這麽個問題:
如果a->b b->a 這樣的雙master架構下,a,b都打開log_slave_updates選項會不會出現無限循環的狀態。
mysql已經考濾到了這個問題,每條bin-log都會記錄執行語句的源server_id.當slave讀到語句的server_id等於本身的ID的時候,不會執行,所以我們不用擔心a,b會不會無限循環下去。

基於以上這種情況,mysql的replication集群將更加靈活,你如果需要可以做成各種各樣的鏈式復制。比如 a->b b->a b中設置log_slave_updates後還可以b->c. 這樣a,c中的數據也是一致的。

雙主配置my.cnf

  1. log_slave_updates = 1 #添加(將復制事件寫入binlog,一臺服務器既做主庫又做從庫此選項必須要開啟)
  2. replicate-same-server-id=0 #添加(防止MySQL循環更新)
  3. relay_log_recovery = 1 #添加(MySQLrelay_log的自動修復功能)
    *從MySQL5.5.X版本才開始支持,增加了relay_log_recovery參數,這個參數的作用是:當slave從庫宕機後,假如relay-log損壞了,導致一部分中繼日誌沒有處理,則自動放棄所有未執行的relay-log,並且重新從master上獲取日誌,這樣就保證了relay-log的完整性。默認情況下該功能是關閉的,將relay_log_recovery的值設置為 1時,可在slave從庫上開啟該功能,建議開啟。
  4. server-id:數據庫標識,每個數據庫標識必須唯一;
  5. auto_increment_increment=2 :這是循環鏡像裏最重要的參數之一,表示自動增量為2,就是指字段一次遞增多少,這將允許最多2臺數據庫加入這個循環鏡像的陣列,而自動遞增字段不會重復。當然如果有10臺主可以將這個值設成10。
  6. auto_increment_offset=1 :這是循環鏡像裏最重要的參數之一,表示自增字段的起始值,每個主數據庫的偏移值必須唯一,且在1和auto_increment_increment之間(也就是說兩個主數據庫的這個設置分別是1和2)。
    如果按以下設置,肯定不會出現這個問題,但如果業務有要求,ID必須連續,那就不能設置這兩個參數了:
    主1: 遞增初始值是1,一次遞增2。也就是值將是1、3、5.。。。
    auto-increment-increment=2
    auto-increment-offset=1
    主2: 遞增初始值是2,一次遞增2。也就是值將是2、4、6.。。。
    auto-increment-increment=2
    auto-increment-offset=2
    這樣配置之後,兩臺設備在生成auto_increment的列時就是主1是1、3、5、7奇數;主2是2、4、6、8偶數。註意,生成的值不一定連續,最後這個字段有可能是,1、2、3、4、5、7、8、10;邏輯是這樣,假如主1 執行insert 3條記錄,則這個字段是1、3、5,主2再執行insert的時候,是從6開始,6、8、10。然後主1再11、13、15。
    binlog_ignore_db引起的同步復制故障
    *在binlog_format 設置為ROW格式時,並且主服務器my.cnf配置文件設置了參數:binlog_ignore_db=xxx時會出現此問題。
    將mysql的binlog_fromat 設置為MIXED格式可以解決此問題。 slave服務器是可以同步執行-e 的操作的。
    mysql -u root -p -e "insert into backup.test values(11)"
    關於MySQL的 binlog_format 的幾中類型詳見本文最後的介紹(Mixed,Statement,Row)
    今天一個同事跟我說了一個問題,"mysql master使用了binlog_ignore_db一個庫以後,使用mysql -e 執行的所有語句就不寫binlog了?"
    詢問了他的情況,他是想在主從復制時,有一個庫不復制,查了他的my.cnf配置,binlog格式化為row,跟他要了當時的語句,如下:
    mysql -e "create table db.tb like db.tb1" 演示:

結果創建的表,Slave上一個都沒有,導致杯具發生。
到底是什麽原因引起的呢?那就是沒有使用use 庫名導致的,如果使用了,就可以記錄binlog,如圖:

所以,如果想在Slave上忽略一個庫的復制,最好不要用binlog_ignore_db這個參數,使用replicate-ignore-db = yourdb,取代之。
MySQL binlog_format (Mixed,Statement,Row)
MySQL 5.5 中對於二進制日誌 (binlog) 有 3 種不同的格式可選:Mixed,Statement,Row,默認格式是 Statement。總結一下這三種格式日誌的優缺點。

MySQL Replication 復制可以是基於一條語句 (Statement Level) ,也可以是基於一條記錄 (Row Level),可以在 MySQL 的配置參數中設定這個復制級別,不同復制級別的設置會影響到 Master 端的 bin-log 日誌格式。

  1. Row
    日誌中會記錄成每一行數據被修改的形式,然後在 slave 端再對相同的數據進行修改。
    優點:在 row 模式下,bin-log 中可以不記錄執行的 SQL 語句的上下文相關的信息,僅僅只需要記錄那一條記錄被修改了,修改成什麽樣了。所以 row 的日誌內容會非常清楚的記錄下每一行數據修改的細節,非常容易理解。而且不會出現某些特定情況下的存儲過程或 function ,以及 trigger 的調用和觸發無法被正確復制的問題。
    缺點:在 row 模式下,所有的執行的語句當記錄到日誌中的時候,都將以每行記錄的修改來記錄,這樣可能會產生大量的日誌內容,比如有這樣一條 update 語句:
    1 UPDATE product SET owner_member_id = ‘b‘ WHERE owner_member_id = ‘a‘
    執行之後,日誌中記錄的不是這條 update 語句所對應的事件 (MySQL 以事件的形式來記錄 bin-log 日誌) ,而是這條語句所更新的每一條記錄的變化情況,這樣就記錄成很多條記錄被更新的很多個事件。自然,bin-log 日誌的量就會很大。尤其是當執行 alter table 之類的語句的時候,產生的日誌量是驚人的。因為 MySQL 對於 alter table 之類的表結構變更語句的處理方式是整個表的每一條記錄都需要變動,實際上就是重建了整個表。那麽該表的每一條記錄都會被記錄到日誌中。
  2. Statement
    每一條會修改數據的 SQL 都會記錄到 master 的 bin-log 中。slave 在復制的時候 SQL 進程會解析成和原來 master 端執行過的相同的 SQL 再次執行。
    優點:在 statement 模式下,首先就是解決了 row 模式的缺點,不需要記錄每一行數據的變化,減少了 bin-log 日誌量,節省 I/O 以及存儲資源,提高性能。因為他只需要記錄在 master 上所執行的語句的細節,以及執行語句時候的上下文的信息。
    缺點:在 statement 模式下,由於他是記錄的執行語句,所以,為了讓這些語句在 slave 端也能正確執行,那麽他還必須記錄每條語句在執行的時候的一些相關信息,也就是上下文信息,以保證所有語句在 slave 端杯執行的時候能夠得到和在 master 端執行時候相同的結果。另外就是,由於 MySQL 現在發展比較快,很多的新功能不斷的加入,使 MySQL 的復制遇到了不小的挑戰,自然復制的時候涉及到越復雜的內容,bug 也就越容易出現。在 statement 中,目前已經發現的就有不少情況會造成 MySQL 的復制出現問題,主要是修改數據的時候使用了某些特定的函數或者功能的時候會出現,比如:sleep() 函數在有些版本中就不能被正確復制,在存儲過程中使用了 last_insert_id() 函數,可能會使 slave 和 master 上得到不一致的 id 等等。由於 row 是基於每一行來記錄的變化,所以不會出現類似的問題。
  3. Mixed
    從官方文檔中看到,之前的 MySQL 一直都只有基於 statement 的復制模式,直到 5.1.5 版本的 MySQL 才開始支持 row 復制。從 5.0 開始,MySQL 的復制已經解決了大量老版本中出現的無法正確復制的問題。但是由於存儲過程的出現,給 MySQL Replication 又帶來了更大的新挑戰。另外,看到官方文檔說,從 5.1.8 版本開始,MySQL 提供了除 Statement 和 Row 之外的第三種復制模式:Mixed,實際上就是前兩種模式的結合。在 Mixed 模式下,MySQL 會根據執行的每一條具體的 SQL 語句來區分對待記錄的日誌形式,也就是在 statement 和 row 之間選擇一種。新版本中的 statment 還是和以前一樣,僅僅記錄執行的語句。而新版本的 MySQL 中對 row 模式也被做了優化,並不是所有的修改都會以 row 模式來記錄,比如遇到表結構變更的時候就會以 statement 模式來記錄,如果 SQL 語句確實就是 update 或者 delete 等修改數據的語句,那麽還是會記錄所有行的變更。
    其他參考信息
    除以下幾種情況外,在運行時可以動態改變 binlog 的格式:
    . 存儲流程或者觸發器中間;
    . 啟用了 NDB;
    . 當前會話使用 row 模式,並且已打開了臨時表;
    如果 binlog 采用了 Mixed 模式,那麽在以下幾種情況下會自動將 binlog 的模式由 statement 模式變為 row 模式:
    . 當 DML 語句更新一個 NDB 表時;
    . 當函數中包含 UUID() 時;
    . 2 個及以上包含 AUTO_INCREMENT 字段的表被更新時;
    . 執行 INSERT DELAYED 語句時;
    . 用 UDF 時;
    . 視圖中必須要求運用 row 時,例如建立視圖時使用了 UUID() 函數;
    設定主從復制模式:
    1
    2
    3
    4 log-bin=mysql-bin
    #binlog_format="STATEMENT"
    #binlog_format="ROW"
    binlog_format="MIXED"
    也可以在運行時動態修改 binlog 的格式。例如:
    1
    2
    3
    4
    5
    6 mysql> SET SESSION binlog_format = ‘STATEMENT‘;
    mysql> SET SESSION binlog_format = ‘ROW‘;
    mysql> SET SESSION binlog_format = ‘MIXED‘;
    mysql> SET GLOBAL binlog_format = ‘STATEMENT‘;
    mysql> SET GLOBAL binlog_format = ‘ROW‘;
    mysql> SET GLOBAL binlog_format = ‘MIXED‘;
    兩種模式的對比:
    Statement 優點
    歷史悠久,技術成熟;
    產生的 binlog 文件較小;
    binlog 中包含了所有數據庫修改信息,可以據此來審核數據庫的安全等情況;
    binlog 可以用於實時的還原,而不僅僅用於復制;
    主從版本可以不一樣,從服務器版本可以比主服務器版本高;
    Statement 缺點:
    不是所有的 UPDATE 語句都能被復制,尤其是包含不確定操作的時候;
    調用具有不確定因素的 UDF 時復制也可能出現問題;
    運用以下函數的語句也不能被復制:
    • LOAD_FILE()
    • UUID()
    • USER()
    • FOUND_ROWS()
    • SYSDATE() (除非啟動時啟用了 –sysdate-is-now 選項)
      INSERT … SELECT 會產生比 RBR 更多的行級鎖;
      復制須要執行全表掃描 (WHERE 語句中沒有運用到索引) 的 UPDATE 時,須要比 row 請求更多的行級鎖;
      對於有 AUTO_INCREMENT 字段的 InnoDB 表而言,INSERT 語句會阻塞其他 INSERT 語句;
      對於一些復雜的語句,在從服務器上的耗資源情況會更嚴重,而 row 模式下,只會對那個發生變化的記錄產生影響;
      存儲函數(不是存儲流程 )在被調用的同時也會執行一次 NOW() 函數,這個可以說是壞事也可能是好事;
      確定了的 UDF 也須要在從服務器上執行;
      數據表必須幾乎和主服務器保持一致才行,否則可能會導致復制出錯;
      執行復雜語句如果出錯的話,會消耗更多資源;
      Row 優點
      任何情況都可以被復制,這對復制來說是最安全可靠的;
      和其他大多數數據庫系統的復制技能一樣;
      多數情況下,從服務器上的表如果有主鍵的話,復制就會快了很多;
      復制以下幾種語句時的行鎖更少:
    • INSERT … SELECT
    • 包含 AUTO_INCREMENT 字段的 INSERT
    • 沒有附帶條件或者並沒有修改很多記錄的 UPDATE 或 DELETE 語句
      執行 INSERT,UPDATE,DELETE 語句時鎖更少;
      從服務器上采用多線程來執行復制成為可能;
      Row 缺點
      生成的 binlog 日誌體積大了很多;
      復雜的回滾時 binlog 中會包含大量的數據;
      主服務器上執行 UPDATE 語句時,所有發生變化的記錄都會寫到 binlog 中,而 statement 只會寫一次,這會導致頻繁發生 binlog 的寫並發請求;
      UDF 產生的大 BLOB 值會導致復制變慢;
      不能從 binlog 中看到都復制了寫什麽語句(加密過的);
      當在非事務表上執行一段堆積的 SQL 語句時,最好采用 statement 模式,否則很容易導致主從服務器的數據不一致情況發生;
      另外,針對系統庫 MySQL 裏面的表發生變化時的處理準則如下:
      如果是采用 INSERT,UPDATE,DELETE 直接操作表的情況,則日誌格式根據 binlog_format 的設定而記錄;
      如果是采用 GRANT,REVOKE,SET PASSWORD 等管理語句來做的話,那麽無論如何都要使用 statement 模式記錄;
      使用 statement 模式後,能處理很多原先出現的主鍵重復問題;

常見錯誤
mysql主從復制,經常會遇到錯誤而導致slave端復制中斷,這個時候一般就需要人工幹預,跳過錯誤才能繼續
跳過錯誤有兩種方式:
1.跳過指定數量的事務:
mysql>slave stop;
mysql>SET GLOBAL SQL_SLAVE_SKIP_COUNTER = 1; #跳過一個事務
mysql>slave start;

2.修改mysql的配置文件,通過slave_skip_errors參數來跳所有錯誤或指定類型的錯誤
vi /etc/my.cnf
[mysqld]
#slave-skip-errors=1062,1053,1146 #跳過指定error no類型的錯誤
#slave-skip-errors=all #跳過所有錯誤

Mysql Binlog三種格式介紹及分析
一.Mysql Binlog格式介紹
Mysql binlog日誌有三種格式,分別為Statement,MiXED,以及ROW!
1.Statement:每一條會修改數據的sql都會記錄在binlog中。
優點:不需要記錄每一行的變化,減少了binlog日誌量,節約了IO,提高性能。(相比row能節約多少性能與日誌量,這個取決於應用的SQL情況,正常同一條記錄修改或者插入row格式所產生的日誌量還小於Statement產生的日誌量,但是考慮到如果帶條件的update操作,以及整表刪除,alter表等操作,ROW格式會產生大量日誌,因此在考慮是否使用ROW格式日誌時應該跟據應用的實際情況,其所產生的日誌量會增加多少,以及帶來的IO性能問題。)
缺點:由於記錄的只是執行語句,為了這些語句能在slave上正確運行,因此還必須記錄每條語句在執行的時候的一些相關信息,以保證所有語句能在slave得到和在master端執行時候相同 的結果。另外mysql 的復制,像一些特定函數功能,slave可與master上要保持一致會有很多相關問題(如sleep()函數, last_insert_id(),以及user-defined functions(udf)會出現問題).
使用以下函數的語句也無法被復制:

  • LOAD_FILE()
  • UUID()
  • USER()
  • FOUND_ROWS()
  • SYSDATE() (除非啟動時啟用了 --sysdate-is-now 選項)
    同時在INSERT ...SELECT 會產生比 RBR 更多的行級鎖
    2.Row:不記錄sql語句上下文相關信息,僅保存哪條記錄被修改。
    優點: binlog中可以不記錄執行的sql語句的上下文相關的信息,僅需要記錄那一條記錄被修改成什麽了。所以rowlevel的日誌內容會非常清楚的記錄下每一行數據修改的細節。而且不會出現某些特定情況下的存儲過程,或function,以及trigger的調用和觸發無法被正確復制的問題
    缺點:所有的執行的語句當記錄到日誌中的時候,都將以每行記錄的修改來記錄,這樣可能會產生大量的日誌內容,比如一條update語句,修改多條記錄,則binlog中每一條修改都會有記錄,這樣造成binlog日誌量會很大,特別是當執行alter table之類的語句的時候,由於表結構修改,每條記錄都發生改變,那麽該表每一條記錄都會記錄到日誌中。
    3.Mixedlevel: 是以上兩種level的混合使用,一般的語句修改使用statment格式保存binlog,如一些函數,statement無法完成主從復制的操作,則采用row格式保存binlog,MySQL會根據執行的每一條具體的sql語句來區分對待記錄的日誌形式,也就是在Statement和Row之間選擇一種.新版本的MySQL中隊row level模式也被做了優化,並不是所有的修改都會以row level來記錄,像遇到表結構變更的時候就會以statement模式來記錄。至於update或者delete等修改數據的語句,還是會記錄所有行的變更。

二.Binlog基本配制與格式設定
1.基本配制
Mysql BInlog日誌格式可以通過mysql的my.cnf文件的屬性binlog_format指定。如以下:
binlog_format = MIXED //binlog日誌格式
log_bin =目錄/mysql-bin.log //binlog日誌名
expire_logs_days = 7 //binlog過期清理時間
max_binlog_size 100m //binlog每個日誌文件大小
2.Binlog日誌格式選擇
Mysql默認是使用Statement日誌格式,推薦使用MIXED.
由於一些特殊使用,可以考慮使用ROWED,如自己通過binlog日誌來同步數據的修改,這樣會節省很多相關操作。對於binlog數據處理會變得非常輕松,相對mixed,解析也會很輕松(當然前提是增加的日誌量所帶來的IO開銷在容忍的範圍內即可)。
3.mysqlbinlog格式選擇
mysql對於日誌格式的選定原則:如果是采用 INSERT,UPDATE,DELETE 等直接操作表的情況,則日誌格式根據 binlog_format 的設定而記錄,如果是采用 GRANT,REVOKE,SET PASSWORD 等管理語句來做的話,那麽無論如何 都采用 SBR 模式記錄

三.Mysql Binlog日誌分析
通過MysqlBinlog指令查看具體的mysql日誌,如下:
///////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////
SET TIMESTAMP=1350355892/!/;
BEGIN
/!/;

at 1643330

#121016 10:51:32 server id 1 end_log_pos 1643885 Query thread_id=272571 exec_time=0 error_code=0
SET TIMESTAMP=1350355892/!/;
Insert into T_test….)
/!/;

at 1643885

#121016 10:51:32 server id 1 end_log_pos 1643912 Xid = 0
COMMIT/!/;
///////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////
1.開始事物的時間:
SET TIMESTAMP=1350355892/!/;
BEGIN
2.sqlevent起點
#at 1643330 :為事件的起點,是以1643330字節開始。
3.sqlevent 發生的時間點
#121016 10:51:32:是事件發生的時間,
4.serverId
server id 1 :為master 的serverId
5.sqlevent終點及花費時間,錯誤碼
end_log_pos 1643885:為事件的終點,是以1643885 字節結束。
execTime 0: 花費的時間
error_code=0:錯誤碼
Xid:事件指示提交的XA事務
Mixed日誌說明:
在slave日誌同步過程中,對於使用now這樣的時間函數,MIXED日誌格式,會在日誌中產生對應的unix_timestamp()*1000的時間字符串,slave在完成同步時,取用的是sqlEvent發生的時間來保證數據的準確性。另外對於一些功能性函數slave能完成相應的數據同步,而對於上面指定的一些類似於UDF函數,導致Slave無法知曉的情況,則會采用ROW格式存儲這些Binlog,以保證產生的Binlog可以供Slave完成數據同步。

Mysql 服務器主從 主主配置