1. 程式人生 > >MySQL Proxy 實現 MySQL 讀寫分離提高併發負載

MySQL Proxy 實現 MySQL 讀寫分離提高併發負載

工作拓撲:

110018378.jpg

MySQL Proxy有一項強大功能是實現“讀寫分離”,基本原理是讓主資料庫處理寫方面事務,讓從庫處理SELECT查詢。

Amoeba for MySQL是一款優秀的中介軟體軟體,同樣可以實現讀寫分離,負載均衡等功能,並且穩定性也高於MySQL Proxy,有興趣的可以測試一下。

環境描述:

  • 作業系統:CentOS6.3_x64
  • 主伺服器Master:192.168.0.202
  • 從伺服器Slave:192.168.0.203
  • 排程伺服器MySQL-Proxy:192.168.0.204

一、mysql主從複製

工作原理圖:

105353509.jpg

主從複製的原理:

分為同步複製和非同步複製,實際複製架構中大部分為非同步複製。 複製的基本過程如下:

1).Slave上面的IO程序連線上Master,並請求從指定日誌檔案的指定位置(或者從最開始的日誌)之後的日誌內容;

2).Master接收到來自Slave的IO程序的請求後,通過負責複製的IO程序根據請求資訊讀取制定日誌指定位置之後的日誌資訊,返回給Slave 的IO程序。返回資訊中除了日誌所包含的資訊之外,還包括本次返回的資訊已經到Master端的bin-log檔案的名稱以及bin-log的位置;

3).Slave的IO程序接收到資訊後,將接收到的日誌內容依次新增到Slave端的relay-log檔案的最末端,並將讀取到的Master端的 bin-log的檔名和位置記錄到master-info檔案中,以便在下一次讀取的時候能夠清楚的告訴Master“我需要從某個bin-log的哪個位置開始往後的日誌內容,請發給我”;

4).Slave的Sql程序檢測到relay-log中新增加了內容後,會馬上解析relay-log的內容成為在Master端真實執行時候的那些可執行的內容,並在自身執行。

環境描述

  • 作業系統:CentOS6.3_x64
  • 主伺服器master:192.168.0.202
  • 從伺服器slave:192.168.0.203

一、mysql主從複製

1、主從安裝mysql,版本一致

我們裝的是 mysql-5.5.30.tar.gz 這裡省略…

2、修改master,slave伺服器

1

2

3

4

5

6

7

8

9

10

11

12

13

master伺服器配置:

vi /usr/local/mysql/etc/my.cnf

[mysqld]

server-id=202     #設定伺服器唯一的id,預設是1,我們設定ip最後一段,slave設定203

log-bin=mysql-bin # 啟用二進位制日誌

binlog-ignore-db = mysql,information_schema  #忽略寫入binlog的庫

slave伺服器配置:

vi /usr/local/mysql/etc/my.cnf

[mysqld]

server-id=203

replicate-do-db = abc     #只同步abc庫

slave-skip-errors = all   #忽略因複製出現的所有錯誤

3、重啟主從伺服器mysql

1

/etc/init.d/mysqld restart

4、在主伺服器上建立帳戶並授權slave

1

2

mysql> mysql -u root -p123.com

mysql> GRANT REPLICATION SLAVE ON *.* to ‘sync’@‘192.168.1.2’ identified by ‘1234.com’; #replication:複製

5、檢視主資料庫狀態

1

2

3

4

5

6

mysql> show master status;

+------------------+----------+--------------+------------------+

| File  | Position | Binlog_Do_DB | Binlog_Ignore_DB |

+------------------+----------+--------------+------------------+

| mysql-bin.000002 | 263 |  |   |

+------------------+----------+--------------+------------------+

6、配置從資料庫

1

2

3

4

5

6

7

mysql> change master to

 -> master_host='192.168.0.202',

 -> master_user='sync',

 -> master_password='1234.com',

 -> master_log_file='mysql-bin.000002',

 -> master_log_pos=263;

#Log和pos是master上隨機獲取的。這段也可以寫到my.cnf裡面。

7、啟動slave同步程序並檢視狀態

1

mysql> start slave;

103403849.jpg

其中Slave_IO_Running 與 Slave_SQL_Running 的值都必須為YES,才表明狀態正常。

8、驗證主從同步

在主mysql建立資料庫abc,再從mysql檢視已經同步成功!

1

2

3

4

5

6

7

8

9

10

11

mysql> create database abc;

mysql> show databases;

+--------------------+

| Database   |

+--------------------+

| information_schema |

| abc    |

| mysql    |

| performance_schema |

| test    |

+--------------------+

在slave啟動報錯:

“Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: ‘Could not find first log file name in binary log index file’”

解決:報錯的原因主要是slave設定master的二進位制檔名或pos值不對應!

先flush logs;清空日誌,在檢視下主資料庫的狀態 show master status;看下日誌檔名字和position值;

再在slave中,執行:CHANGE MASTER TO MASTER_LOG_FILE=‘二進位制日誌名’,MASTER_LOG_POS=值;

最後啟動同步程序:start slave;

二、mysql-proxy實現讀寫分離

1、安裝mysql-proxy

實現讀寫分離是有lua指令碼實現的,現在mysql-proxy裡面已經整合,無需再安裝

1

2

tar zxvf mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit.tar.gz

mv mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit /usr/local/mysql-proxy

2、配置mysql-proxy,建立主配置檔案

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

cd /usr/local/mysql-proxy

mkdir lua #建立指令碼存放目錄

mkdir logs #建立日誌目錄

cp share/doc/mysql-proxy/rw-splitting.lua ./lua #複製讀寫分離配置檔案

cp share/doc/mysql-proxy/admin-sql.lua ./lua #複製管理指令碼

vi /etc/mysql-proxy.cnf   #建立配置檔案

[mysql-proxy]

user=root #執行mysql-proxy使用者

admin-username=proxy #主從mysql共有的使用者

admin-password=123.com #使用者的密碼

proxy-address=192.168.0.204:4000 #mysql-proxy執行ip和埠,不加埠,預設4040

proxy-read-only-backend-addresses=192.168.0.203 #指定後端從slave讀取資料

proxy-backend-addresses=192.168.0.202 #指定後端主master寫入資料

proxy-lua-script=/usr/local/mysql-proxy/lua/rw-splitting.lua #指定讀寫分離配置檔案位置

admin-lua-script=/usr/local/mysql-proxy/lua/admin-sql.lua #指定管理指令碼

log-file=/usr/local/mysql-proxy/logs/mysql-proxy.log #日誌位置

log-level=info #定義log日誌級別,由高到低分別有(error|warning|info|message|debug)

daemon=true    #以守護程序方式執行

keepalive=true #mysql-proxy崩潰時,嘗試重啟

儲存退出!

chmod 660 /etc/mysql-porxy.cnf

3、修改讀寫分離配置檔案

1

2

3

4

5

6

7

8

vi /usr/local/mysql-proxy/lua/rw-splitting.lua

if not proxy.global.config.rwsplit then

 proxy.global.config.rwsplit = {

  min_idle_connections = 1, #預設超過4個連線數時,才開始讀寫分離,改為1

  max_idle_connections = 1, #預設8,改為1

  is_debug = false

 }

end

4、啟動mysql-proxy

1

2

3

4

/usr/local/mysql-proxy/bin/mysql-proxy --defaults-file=/etc/mysql-proxy.cnf

netstat -tupln | grep 4000 #已經啟動

tcp 0 0 192.168.0.204:4000 0.0.0.0:* LISTEN 1264/mysql-proxy

關閉mysql-proxy使用:killall -9 mysql-proxy

5、測試讀寫分離

1>.在主伺服器建立proxy使用者用於mysql-proxy使用,從伺服器也會同步這個操作

1

mysql> grant all on *.* to 'proxy'@'192.168.0.204' identified by '123.com';

2>.使用客戶端連線mysql-proxy

1

mysql -u proxy -h 192.168.0.204 -P 4000 -p123.com

建立資料庫和表,這時的資料只寫入主mysql,然後再同步從slave,可以先把slave的關了,看能不能寫入,這裡我就不測試了,下面測試下讀的資料!

1

2

3

mysql> create table user (number INT(10),name VARCHAR(255));

mysql> insert into test values(01,'zhangsan');

mysql> insert into user values(02,'lisi');

3>.登陸主從mysq檢視新寫入的資料如下,

1

2

3

4

5

6

7

8

9

mysql> use test;

Database changed

mysql> select * from user;

+--------+----------+

| number | name |

+--------+----------+

| 1 | zhangsan |

| 2 | lisi |

+--------+----------+

4>.再登陸到mysql-proxy,查詢資料,看出能正常查詢

1

2

3

4

5

6

7

8

9

mysql -u proxy -h 192.168.0.204 -P 4000 -p123.com

mysql> use test;

mysql> select * from user;

+--------+----------+

| number | name |

+--------+----------+

| 1 | zhangsan |

| 2 | lisi |

+--------+----------+

5>.登陸從伺服器關閉mysql同步程序,這時再登陸mysql-proxy肯定會查詢不出資料

1

slave stop;

6>.登陸mysql-proxy查詢資料,下面看來,能看到表,查詢不出資料

1

2

3

4

5

6

7

8

9

10

mysql> use test;

Database changed

mysql> show tables;

+----------------+

| Tables_in_test |

+----------------+

| user |

+----------------+

mysql> select * from user;

ERROR 1146 (42S02): Table 'test.user' doesn't exist

配置成功!真正實現了讀寫分離的效果!

來源http://www.cnblogs.com/luckcs/articles/2543607.html