2. 程式人生 > >mysql主從不同步處理過程分享

mysql主從不同步處理過程分享

阿新 • • 發佈：2019-08-16

背景  8月7日15：58收到報障資料庫出現不同步：資料庫共四臺，分別為10.255.70.11，10.255.70.12，10.255.70.13，10.255.70.14（ip為虛擬ip）

資料庫結構為：

              

故障時不同步現為：（1）70.11和70.13之間主主不同步 ，（2）70.11和70.12之間主從不同步，（3）70.11和70.14之間主從是同步的

（1）由於my.cnf檔案中有slave-skip-errors=all配置，所以在出現不同步錯誤時跳過，檢查同步引數Slave_IO_Running: Yes/Slave_SQL_Running: Yes均為yes，實際資料是不同步的

（2）70.11和70.12之間不同步，同步引數為Slave_IO_Running: NO/Slave_SQL_Running: Yes，報錯1062，截圖如下：

 

在70.12上操作如下：

mysql>stop slave ;

mysql>SET GLOBAL SQL_SLAVE_SKIP_COUNTER = 1 

mysql>slave start

檢視資料同步引數：發現已經同步

至此70.11和70.12的主從不同步問題已經解決，需要注意的是：跳過1062這個事務之後，雖然以後主從資料庫是同步的，但是不同步期間的資料將不再重新同步，即：不同步期間從庫的資料不完整

現在只存在70.11和70.13之間的主主資料庫不同步，在此期間發現70.11的庫db1資料丟失了，因為70.11和70.12，70.14的資料是同步的，所以這三個庫全部資料丟失

解決辦法思路如下：

（1）先將現有業務切至70.13上，將危害減少到最小

（2）首先恢復70.11的資料：檢視資料庫最近一次備份是當天凌晨3點半，3點半到下午15：58的資料通過binlog日誌進行恢復

（3）備份70.11的資料，匯入70.12/13/14的資料庫，並作主主/主從同步

具體操作：

恢復8月7日凌晨3點半之前的資料：

[root@7011]# gunzip db1_20190807.sql.gz
[root@7011]# mysql -h 10.255.70.11 -uroot -p
Enter password: 
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2039
Server version: 5.7.17-log MySQL Community Server (GPL)

Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| mysql |
|db1 |
+--------------------+
11 rows in set (0.00 sec)

mysql> use db1;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed, 1 warning
mysql> source db1.sql.gz;

通過binlog日誌恢復凌晨3：30~~16：30之間的資料：

（1）將時間段內的binlog日誌轉化為mysql可識別的語句

[root@7011]# mysqlbinlog  --no-defaults  --database=db1 --start-datetime='2019-08-07 03:30:00' --stop-datetime='2019-08-17 16:30:00' mysql-bin.000034 >temp20190807.sql
[root@7011]# ll temp20190807.sql
-rw-r--r-- 1 root root 655391529 8月   7 20:56 temp20190807.sql

（2）刪除binlog日誌中的drop語句

[root@7011]# sed -i -e '/DROP/d' temp20190807.sql

（3）資料恢復

[root@7011]# mysql -h 10.255.70.11 -uroot -p
Enter password: 
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2039
Server version: 5.7.17-log MySQL Community Server (GPL)

Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| mysql |
| db1 |
+--------------------+
11 rows in set (0.00 sec)

mysql> use db1;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed, 1 warning
mysql> source temp20190807.sql;

至此：70.11的資料恢復完全

接下來進行70.12和13，14的資料同步：

（1）備份70.11的資料庫

[root@7011 ~]# mysqldump -h 10.255.70.11 -uroot  -p  -R ottdb1 | gzip > /tmp/db120190807.sql.gz

（2）將70.11的備份資料copy給70.12/13/14

[root@7011 tmp]# scp db120190807.sql.gz 10.255.70.12:/tmp/
The authenticity of host '10.255.70.12 (10.255.70.12)' can't be established.
RSA key fingerprint is aa:56:33:d3:aa:a8:af:a3:a9:c9:6e:26:6b:05:7f:b3.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '10.255.70.12' (RSA) to the list of known hosts.
[email protected]'s password: 
ottdb120190807.sql.gz        

[root@7011 tmp]# scp db120190807.sql.gz 10.255.70.13:/tmp/
The authenticity of host '10.255.70.13 (10.255.70.13)' can't be established.
RSA key fingerprint is aa:56:33:d3:aa:a8:af:a3:a9:c9:6e:26:6b:05:7f:b3.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '10.255.70.13' (RSA) to the list of known hosts.
[email protected]'s password: 
ottdb120190807.sql.gz   

[root@7011 tmp]# scp db120190807.sql.gz 10.255.70.14:/tmp/
The authenticity of host '10.255.70.14 (10.255.70.14)' can't be established.
RSA key fingerprint is aa:56:33:d3:aa:a8:af:a3:a9:c9:6e:26:6b:05:7f:b3.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '10.255.70.14' (RSA) to the list of known hosts.
[email protected]'s password: 
ottdb120190807.sql.gz

（3）恢復70.12/13/14資料，以70.12為例，13和14也進行如下操作：

[root@7012]# mysql -h 10.255.70.12 -uroot -p
Enter password: 
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2039
Server version: 5.7.17-log MySQL Community Server (GPL)

Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| mysql |
| db1 |
+--------------------+
11 rows in set (0.00 sec)

mysql> use db1;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed, 1 warning
mysql> source db120180807.sql;

（4）記錄70.11和70.13的file和position

[root@7011]# mysql -h 10.255.70.11 -uroot -p
Enter password: 
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2039
Server version: 5.7.17-log MySQL Community Server (GPL)

Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show master status;
+------------------------+-----------+--------------+------------------+-------------------+
| File                   | Position  | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------------+-----------+--------------+------------------+-------------------+
| mysql-bin.000048         278032567 |    db1       | mysql            |                   |
+------------------------+-----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

mysql>

[root@7013]# mysql -h 10.255.70.13 -uroot -p
Enter password: 
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2039
Server version: 5.7.17-log MySQL Community Server (GPL)

Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show master status;
+------------------------+-----------+--------------+------------------+-------------------+
| File                   | Position  | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------------+-----------+--------------+------------------+-------------------+
| mysql-bin.000055         622032567 |    db1       | mysql            |                   |
+------------------------+-----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

mysql>

（5）實現70.11和70.13之間的主主同步，具體步驟如下：

在70.11上執行：

mysql> change master to master_host='10.255.70.13',master_user='root',master_password='123456',master_log_file='mysql-bin.000055',master_log_pos=622032567;

在70.13上執行：

mysql> change master to master_host='10.255.70.11',master_user='root',master_password='123456',master_log_file='mysql-bin.000048',master_log_pos=278032567;

資料庫同步完成，檢視資料庫同步情況

[root@7011]# mysql -h 10.255.70.11 -uroot -p
Enter password: 
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2039
Server version: 5.7.17-log MySQL Community Server (GPL)

Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show slave status\G;
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 10.255.70.13
                  Master_User: root
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: mysql-bin.000049
          Read_Master_Log_Pos: 612239326
               Relay_Log_File: mysq-relay-bin.000014
                Relay_Log_Pos: 1301
        Relay_Master_Log_File: mysql-bin.000049
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB: db1
          Replicate_Ignore_DB: mysql

接下來進行70.11和70.12和14的主從同步：

在70.12和70.14上執行：

mysql> change master to master_host='10.255.70.11',master_user='root',master_password='123456',master_log_file='mysql-bin.000048',master_log_pos=278032567;

檢視資料庫同步情況：

[root@7012]# mysql -h 10.255.70.12 -uroot -p
Enter password: 
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2039
Server version: 5.7.17-log MySQL Community Server (GPL)

Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show slave status\G;
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 10.255.70.11
                  Master_User: root
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: mysql-bin.000049
          Read_Master_Log_Pos: 612239326
               Relay_Log_File: mysq-relay-bin.000014
                Relay_Log_Pos: 1301
        Relay_Master_Log_File: mysql-bin.000049
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB: db1
          Replicate_Ignore_DB: mysql

資料庫恢復完成，修改業務地址到VIP地址，此次故障解決

資料同步過程中報錯處理：

   Last_IO_Errno: 1236
                Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: 'Could not find first log file name in binary log index file'
處理方式：

flush logs;
show master status;

記下File, Position

重新進行同步

 Got fatal error 1236 from master when reading data from binary log

&n

相關推薦

mysql主從不同步處理過程分享

背景  8月7日15：58收到報障資料庫出現不同步：資料庫共四臺，分別為10.255.70.11，10.255.70.12，10.255.70.13，10.255.70.14（ip為虛擬ip） 資料庫結構為：             &nb

MySQL主從說明詳解、MySQL主從不同步處理方案

mysql mysql主從 mysql復制 mysql主從不同步 MySQL主從說明 同步問題 mysqldump：此工具適用於10G以下數據庫或幾個表percona-Xtrabackup備份工具：適用於100G-500GLVM快照：更大的數據量，或分庫分表 主從復制目的 讀寫分離，減

MYSQL主從不同步延遲原理分析及解決方案

run 步長 syn class ati 可能 16px 一點 表示 1.網絡的延遲由於mysql主從復制是基於binlog的一種異步復制，通過網絡傳送binlog文件，理所當然網絡延遲是主從不同步的絕大多數的原因，特別是跨機房的數據同步出現這種幾率非常的大，所以做讀寫分離

mysql主從不同步如何解決

mysqlSlave_IO_Running: Yes Slave_SQL_Running: No一、數據相差不大直接跳過一步stop slave；set global sql_slave_skip_counter =1; start slave；二、數據相差很大，需要重新做主從同步1，先鎖表mysql>

記錄一次Mysql主從不同步事故問題於事故解決辦法

count cover counter img 一次 png 過去 stop set 首先在昨天的時候我可能在優化zabbix庫的時候動了庫中的events表。導致了接下來的問題。經過查看未解決前問題呈現如下：我們可以看到從庫與主庫不同步的原因是這個：這個問題的學名叫：外鍵

修復Mysql主從不同步shell

restore 主從不同步 replicat sta recover rep master variables report 使用第三方工具MySQL Enterprise Monitor，MySQL企業版監控工具。MONyog – MySQL Monior and Adv

mysql主從不同步如何做

今天發現Mysql的主從資料庫沒有同步  先上Master庫：  mysql>show processlist; 檢視下程序是否Sleep太多。發現很正常。  show master status; 也正常。  mysql> show master

mysql主從不同步、資料不一致解決辦法

提示報錯： Could not execute Write_rows event on table injured_dataplatform.injurysite; Duplicate entry '6864' for key 'PRIMARY', Error_code: 1062; handl

記一次MHA主從不同步恢復過程

背景： 根據生產環境故障模擬，由於生產環境主機mysql資料目錄滿，造成業務側連線mysql異常。維護人員在排查時，誤將MHA中主master的二進位制日誌全部清除，造成兩個從庫向主庫同步拉取日誌失敗，報找不到日誌錯誤。為解決該問題，同時又考慮到生產庫不能停庫，所以準備在主master庫上對相關

mysql主從不同步問題 Error_code: 1197

首先檢視從的狀態   mysql> show slave status \G *************************** 1. row *************************** Slave_IO_Sta

解決Mysql主從不同步問題

今天Mysql的主從資料庫沒有同步導致網頁讀不到資料， 當網頁不能讀到資料時，猜想上資料庫的原因。 首先在Master上用 

mysql主從不同步，不復制的解決辦法

mysql的從庫，檢查一個表的最新的記錄，發現主從不同步了 。主庫的資料比從庫的資料要多很多。 通過show slave STATUS;命令檢查，發下如下的錯誤： Error 'Cannot add or update a child row: a f

一種粗暴快速的解決mysql主從不同步錯誤的思路

通過 大量 word mysql 影響 簡單 posit code change mysql主從經常會出現主從數據不同步的問題，臟數據會造成主從同步中斷， 出現大量ERROR，如1032，1062等錯誤。常規方法是逐條刪除臟數據或者 重做

redis主從不同步問題處理

近期遇到的問題如下： 1 在主上setex的key即使過期後在從上也始終get的到。 重現： 主： setex abc 20 test 從： get abc >> test ttl abc >> 18 ... ttl abc >

MySQL主從不一致的幾種故障總結分析、解決和預防

pre .info mysql主從 寫入 stop 不一致 .cn 刪除 err (1).主從不一致故障，從庫宕機，從庫啟動後重復寫入數據報錯解決與預防:relay_log_info_repository=TABLE(InnoDB)參數解釋說明:若relay_log_i

mysql主從從同步

---恢復內容開始--- 不足在所難免，懇請大神指教。 在虛擬機器上完成:centos7 環境：51為主庫，52即主又從，53從庫，50客戶端 先看配置檔案：cat /etc/my.cnf           //省略一部分 51： 52：

Windows上進行mysql主從資料庫同步總結

主要步驟：主從資料庫同步步驟 解決問題思路： 1.檢查my.ini檔案是否多次設定server-id，my.ini檔案修改不對將導致無法啟動mysql server； 2.檢視C:\ProgramData\MySQL\MySQL Server 5.7\Data資料夾下.err檔案

linux上 mysql主從報錯處理常見方式

1：mysql從庫上，重置slave,重新指定master資訊    RESET SLAVE;    change master to master_host='主庫ip',master_user='zzh',master_password='Zzh91121

一種解決MySQL主從不一致的方法

這裡分享一個MySQL主從庫因為某張表資料不一致的解決方法，我們可能會遇到這種情況：例項A和B是主從，可能由於誤操作或者某種原因導致A和B某張表資料不一致，可能就會導致主從複製停止，這時我們有很多種解決辦法，比如忽略掉某個錯誤，跳過events，設定slave_exec_m

mysql主從只同步部分庫或表

同步部分資料有兩個思路，1.master只發送需要的；2.slave只接收想要的。 master端： binlog-do-db      二進位制日誌記錄的資料庫（多資料庫用逗號，隔開） bin