2. 程式人生 > >Atlas實現mysql主從分離

Atlas實現mysql主從分離

阿新 • • 發佈：2018-07-11
load 修改 log res install 修改配置文件 hub top 代碼

目錄.... 1

文檔格式：.... 1

一.介紹Atlas及架構圖.... 2

二.實驗環境.... 3

三.實施案例.... 3

1.目錄結構... 3

2.配置Mysql主從... 4

3.安裝配置Atlas. 8

4.啟動Atlas. 12

5.查看讀寫分離效果... 13

一.介紹Atlas及架構圖

Atlas源代碼用C語言編寫，它對於Web Server相當於是DB,相對於DB相當於是Client,如果把Atlas的邏輯放到Web Server程序裏去處理，這樣會大大增加Web Server程序的復雜度，同時Web Server和DB之間的耦合度也相當高，因為只要DB增加/減少服務，Web Server就有可能要發生代碼改變，若代碼不改變，就得通過中間關系表與心跳機制來維護Server之間的關系，這樣會帶來性能的損耗，而Atlas是架設在Web Server與DB之間的一個中間件，Web Server與DB之間的耦合關系放到了Atlas來處理，既做到了靈活也保留了性能，這也是Atlas存在的價值。

Atlas支持表的水平切分，支持讀寫分離，對數據實時性要求較高的項目可以在select語句前增加/*master*/強制讀主庫

技術分享圖片

二.實驗環境

mysql master：192.168.200.101
mysql slave ：192.168.200.102
atlas ：192.168.200.103

atlas有兩個port，分別為

工作端口： proxy-address項配置，例如proxy-address = 0.0.0.0:1234代表客戶端應該使用1234這個端口連接Atlas來發送SQL請求。

管理端口： admin-address項配置，例如admin-address = 0.0.0.0:2345代表DBA應該使用2345這個端口連接Atlas來執行運維管理操作。

二.安裝Atlas

註意：只能安裝在64位的Linux操作系統上，CentOS官方建議rpm安裝方式

三.實施案例

1.目錄結構

bin： 該目錄存放atlas啟動程序，還有加密腳本

conf： 該目錄則存放atlas.conf配置檔，可以有多個實例

lib： 該目錄存放程序的一些庫文件及依賴文件

log： 該目錄則存放實例產生的日誌

安裝位置：

/usr/local/mysql-proxy

配置文件：

/usr/local/mysql-proxy/conf/test.cnf

2.配置Mysql主從

全部主機關閉防火墻和SElinux

[root@zha ~]# /etc/init.d/iptables stop

iptables: Setting chains to policy ACCEPT: filter [ OK ]

iptables: Flushing firewall rules: [ OK ]

iptables: Unloading modules: [ OK ]

[root@zha ~]# setenforce 0

setenforce: SELinux is disabled

修改主機名（200.101）

[root@zha ~]# hostname master

[root@zha ~]# bash

[root@master ~]# vim /etc/sysconfig/network

NETWORKING=yes

HOSTNAME=master

（200.102）

[root@zha ~]# hostname slave

[root@zha ~]# bash

[root@slave ~]# vim /etc/sysconfig/network

（200.103）

[root@zha ~]# hostname Atlas

[root@zha ~]# bash

[root@Atlas ~]# vim /etc/sysconfig/network

NETWORKING=yes

HOSTNAME=zha

主從分別用yum安裝mysql

[root@master ~]# yum -y install mysql mysql-server

[root@slave ~]# yum -y install mysql mysql-server

主從分別修改配置文件並啟動服務

[root@master ~]# vim /etc/my.cnf

[mysqld]

datadir=/var/lib/mysql

socket=/var/lib/mysql/mysql.sock

user=mysql

# Disabling symbolic-links is recommended to prevent assorted security risks

symbolic-links=0

log-error=/var/lib/mysql/mysql.err

log=/var/lib/mysql/mysql_log.log

log-slow-queries=/var/lib/mysql/mysql_slow_queris.log

default-character-set=utf8

log-bin=mysql-bin

server-id=1

log-slave-updates

sync_binlog=1

auto_increment_increment=2

auto_increment_offset=1

[client]

default-character-set=utf8

[mysqld_safe]

log-error=/var/log/mysqld.log

pid-file=/var/run/mysqld/mysqld.pid

#註意server-id不能相同

[root@master ~]# /etc/init.d/mysqld start

配置主從復制

master操作：

查看file和pos值

mysql> show master status;

+------------------+----------+--------------+------------------+

| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |

+------------------+----------+--------------+------------------+

| mysql-bin.000003 | 106 | | |

+------------------+----------+--------------+------------------+

1 row in set (0.00 sec)

mysql> grant replication slave on *.* to ‘replication‘@‘192.168.200.%‘ identified by ‘123456‘;

Query OK, 0 rows affected (0.04 sec)

mysql> flush privileges;

slave操作：

mysql> change master to master_host=‘192.168.200.101‘,master_user=‘replication‘,master_password=‘123456‘,master_log_file=‘mysql-bin.000003‘,master_log_pos=106;

Query OK, 0 rows affected (0.09 sec)

mysql> slave start;

Query OK, 0 rows affected (0.00 sec)

mysql> show slave status\G

Slave_IO_Running: Yes

Slave_SQL_Running: Yes

（確保這倆線程為YES）

主從配置完成！

3.安裝配置Atlas

下載地址：https://github.com/Qihoo360/Atlas/releases

[root@Atlas ~]# rpm -ivh Atlas-2.2.1.el5.x86_64.rpm

Preparing... ########################################### [100%]

1:Atlas ########################################### [100%]

[root@Atlas ~]# vim /usr/local/mysql-proxy/conf/test.cnf

#管理接口的用戶名

admin-username = user

#管理接口的密碼

admin-password = pwd

#Atlas後端連接的MySQL主庫的IP和端口，可設置多項，用逗號分隔

proxy-backend-addresses = 192.168.200.101:3306

#Atlas後端連接的MySQL從庫的IP和端口，@後面的數字代表權重，用來作負載均衡，若省略則默認為1，可設置多項，用逗號分隔

proxy-read-only-backend-addresses = 192.168.200.102:3305@1

#用戶名與其對應的加密過的MySQL密碼，密碼使用PREFIX/bin目錄下的加密程序encrypt加密，下行的user1和user2為示例，將其替換為你的MySQL的用戶名和加密密碼！

pwds = user1:+jKsgB3YAG8=, user2:GS+tr4TPgqc=

#設置Atlas的運行方式，設為true時為守護進程方式，設為false時為前臺方式，一般開發調試時設為false，線上運行時設為true,true後面不能有空格。

daemon = true

#設置Atlas的運行方式，設為true時Atlas會啟動兩個進程，一個為monitor，一個為worker，monitor在worker意外退出後會自動將其重啟，設為false時只有worker，沒有monitor，一般開發調試時設為false，線上運行時設為true,true後面不能有空格。

keepalive = true

#工作線程數，對Atlas的性能有很大影響，可根據情況適當設置

event-threads = 8

#日誌級別，分為message、warning、critical、error、debug五個級別

log-level = message

#日誌存放的路徑

log-path = /usr/local/mysql-proxy/log

#SQL日誌的開關，可設置為OFF、ON、REALTIME，OFF代表不記錄SQL日誌，ON代表記錄SQL日誌，REALTIME代表記錄SQL日誌且實時寫入磁盤，默認為OFF

#sql-log = OFF

#慢日誌輸出設置。當設置了該參數時，則日誌只輸出執行時間超過sql-log-slow（單位：ms)的日誌記錄。不設置該參數則輸出全部日誌。

#sql-log-slow = 10

#實例名稱，用於同一臺機器上多個Atlas實例間的區分

#instance = test

#Atlas監聽的工作接口IP和端口

proxy-address = 0.0.0.0:1234

#Atlas監聽的管理接口IP和端口

admin-address = 0.0.0.0:2345

#分表設置，此例中person為庫名，mt為表名，id為分表字段，3為子表數量，可設置多項，以逗號分隔，若不分表則不需要設置該項

#tables = person.mt.id.3

#默認字符集，設置該項後客戶端不再需要執行SET NAMES語句

charset = utf8

#允許連接Atlas的客戶端的IP，可以是精確IP，也可以是IP段，以逗號分隔，若不設置該項則允許所有IP連接，否則只允許列表中的IP連接

#client-ips = 127.0.0.1, 192.168.1

#Atlas前面掛接的LVS的物理網卡的IP(註意不是虛IP)，若有LVS且設置了client-ips則此項必須設置，否則可以不設置

#lvs-ips = 192.168.1.1

改工作端口和管理端口ip為masterip

4.啟動Atlas

[root@Atlas ~]# /usr/local/mysql-proxy/bin/mysql-proxyd test start

OK: MySQL-Proxy of test is started

如果報錯：

/usr/local/mysql-proxy/bin/mysql-proxy: error while loading shared libraries: libcrypto.so.6: cannot open shared object file: No such file or directory

error: failed to start MySQL-Proxy of test

那麽[root@Atlas ~]# yum provides */libcrypto.so.6 #尋找包含 libcrypto.so.6 的安裝包

發現缺少這個

openssl098e-0.9.8e-17.el6.centos.2.x86_64 : A

...: compatibility version of a general

...: cryptography and TLS library

Repo : c6-media

Matched from:

Filename : /usr/lib64/libcrypto.so.6

安裝 [root@Atlas ~]# yum -y install openssl098e-0.9.8e-17.el6.centos.2.x86_64

[root@Atlas ~]# ln -s libcrypto.so.0.9.8e libcrypto.so.6 #創建連接文件

給Atlas默認用戶授權

master和slave操作：

mysql> grant replication slave on *.* to ‘user‘@‘192.168.200.%‘ identified by ‘pwd‘;

Query OK, 0 rows affected (0.04 sec)

mysql> flush privileges;

Query OK, 0 rows affected (0.12 sec)

5.查看讀寫分離效果

[root@Atlas ~]# cat /usr/local/mysql-proxy/log/test.log

2018-05-04 16:40:53: (message) proxy listening on port 0.0.0.0:1234

2018-05-04 16:40:53: (message) added read/write backend: 192.168.200.101:3306

2018-05-04 16:40:53: (message) added read-only backend: 192.168.200.102:3305

Atlas實現mysql主從分離

相關推薦

Atlas實現mysql主從分離

load 修改 log res install 修改配置文件 hub top 代碼 目錄.... 1 文檔格式：.... 1 一.介紹Atlas及架構圖.... 2 二.實驗環境.... 3 三.實施案例.... 3 1.目錄結構... 3 2.配置Mysql主從... 4

Mycat實現Mysql主從讀寫分離

pan 權限 程序 連接 file 只讀 wrapper linux. table 一、概述 關於Mycat的原理網上有很多，這裏不再詳述，對於我來說Mycat的功能主要有如下幾種： 1.Mysql主從的讀寫分離 2.Mysql大表分片 3.其他數據庫例如Oracle，MS

Amoeba搭建高可用Mysql集群(實現Mysql主從復制、讀寫分離、負載均衡)

proc 分布式數據庫 啟動 parent 分布 技術分享 事務 admin str Amoeba是什麽？ Amoeba(變形蟲)項目,該開源框架於2008年 開始發布一款 Amoeba for Mysql軟件。這個軟件致力於MySQL的分布式數據庫前端代理層，它主要在應用

利用Amoeba實現MySQL主從復制和讀寫分離

生產環境 層級 cal 目錄名 發現 slaves zxvf 同步服務 code 在實際生產環境中，如果對數據庫的讀和寫都在同一個數據庫服務器中操作，無論是在安全性、高可用性，還是高並發等各個方面都是完全不能滿足實際需求的，因此，一般來說都是通過主從復制（Master-Sl

【純幹貨】Amoeba實現MySQL主從同步與讀寫分離

exec strong arc all abstract a star status utf prop 【純幹貨】Amoeba實現MySQL主從同步與讀寫分離 一、簡介 amoeba簡介 Amoeba(變形蟲)項目,該開源框架於2008年開始發布一款 Amoeba f

生產環境實踐Mysql5.7主從+Atlas實現讀寫分離

pro c-c creators 日誌 可執行 公眾 var timeout 錯誤信息 Mysql主從搭建 主從復制可以使MySQL數據庫主服務器的主數據庫，復制到一個或多個MySQL從服務器從數據庫，默認情況下，復制異步; 根據配置，可以復制數據庫中的所有數據庫，選定的

【Mycat】資料庫效能提升利器（三）——Mycat實現Mysql主從複製和讀寫分離

一、前言       在前一篇文章中，小編向大家 介紹了使用Mycat水平切分資料庫。可以說，使用了水平分庫後，資料庫提升還是很高的。如果想更高的提高資料庫效能，就可以考慮對Mysql進行主從複製和讀寫分離了。       在這篇部落格中，小編就向大家介紹基於Mycat的M

Mysql中間件Proxysql實現mysql主從架構讀寫分離

指標 yum源 check 查看 app 數據庫 進行 sql mysq 實驗主機 Master: 192.168.0.17 Slave: 192.168.0.20 Proxysql:192.168.0.30建議關閉防火墻建立Master: 192.168.0.17與Sl

MySQL主從分離實現

## 前言   大型網站為了減輕伺服器處理海量的併發訪問，所產生的效能問題，採用了很多解決方案，其中最主流的解決方案就是讀寫分離，即將讀操作和寫操作分別導流到不同的伺服器叢集執行，到了資料業務層，資料訪問層，如果還是傳統的單靠一臺伺服器去扛，面對如此多的資料庫連線操作，必然會崩潰，如果造成

基於MySql主從分離的程式碼層實現

## 前言   該文是基於上篇《MySQL主從分離的實現》的程式碼層實現，所以本文配置的主資料庫和從資料庫的資料來源都是在上篇博文中已經介紹了的。 ## 動態選擇資料來源的配置   由於我們在寫資料的時候需要使用主庫的資料來源，讀的時候需要從庫的資料來源，我們可以在Sp

keepalived+MHA實現mysql主從高可用集群

keepalived mha mysql主從集群 高可用 本節索引原理分析實驗環境準備主從復制集群安裝MHA包初始化MHA配置Keepalived故障出現故障恢復總結 一 原理分析1 MHA簡介：MHA（Master High Availability）目前在MySQL高可用方面是一個相對成熟

MySQL(三)：MHA實現MySQL主從架構中主服務器的高可用，zabbix完成manager重啟

code parallel 可以登錄 authorize sudo word systemctl 命令 nag MHA（Master High Availability）是目前在MySQL高可用方面相對成熟的一個解決方案，MHA在監控到master節點故障時，會提升其中擁有

Centos6.4 + mysql-5.6.38-linux-glibc2.12-x86_64.tar 實現mysql主從復制

ide mysql-bin log_file color log-bin mysq fig isam 直接 mysql安裝方法:http://www.cnblogs.com/lin3615/p/4376224.html 用到的是兩臺服務器 主：192.168.1.1

基於pt-table-checksum和pt-table-sync實現MySQL主從數據一致性校驗

MySQL 一致性校驗 在基於MySQL邏輯復制原理的下的主從架構，經常會由於某些緣故產生主從數據不一致，從而導致主從復制進程報錯中斷。而基於定期去檢查從庫的show slave status\G的IO線程和SQL線程的狀態，只能確認當前replication是正常的，卻無法確認當前主從數據是否一致。

Docker實現MySQL主從復制（主主復制同理）

clas 文件 mysql的安裝 -- 雙向 res 嘗試 4.0 用戶名 　　因為最近在學習MySQL，看到很多地方有“分庫分表”，“讀寫分離”的字眼，就想嘗試一下吧！ 首先，因為本人經濟能力有限，買不起那麽多服務器，所以就借用Docker來搭建虛擬機來作為兩臺服務器

實現mysql主從

cte lin Owner mes urn http .com grant log_file 主從作用：1）實時災備，用於故障切換2）讀寫分離，提供查詢服務3）備份，避免影響業務主從形式：1）一主一從2）主主復制3）一主多從 （偏向於讀）4）多主一從 （分表機制，偏向於寫，

Linux系統實現MySQL主從複製

Linux系統實現mysql主從複製 1、主從伺服器分別作以下操作： 1.1、版本一致 1.2、初始化表，並在後臺啟動mysql 1.3、修改root的密碼 *2、修改主伺服器master: 1 #vi /etc/my.cnf 2 [mysqld] 3 log-bin=mysql-b

mysql主從分離庫的配置

前言           大型網站為了軟解大量的併發訪問，除了在網站實現分散式負載均衡，遠遠不夠。到了資料業務層、資料訪問層，如果還是傳統的資料結構，或者只是單單靠一臺伺服器扛，如此多的資料庫連線操作，資料庫必然會崩潰，資料丟失的話，後果更是 不堪設想。這時候，我們會考

windows下實現mysql主從複製

MySQL的主從複製是通過binlog日誌來實現的，主從複製中的“主”指的是MySQL主伺服器上的資料庫，“從”指的是MySQL從伺服器上的資料庫，且這種複製是基於資料庫級別的，為此從伺服器中的資料庫名稱必須和主伺服器中的資料庫名稱保持一致，那麼，要想實現主從複製，我們至少要有兩個MySQL伺服器（

docker-compose 實現mysql主從配置

step1:首先docker-compose搭建三個mysql, 基礎操作 version: '2' services: mysql-master: image: mysql:5.7.18 networks: mysq