1. 程式人生 > >MySQL+MMM 高可用叢集部署(二)

MySQL+MMM 高可用叢集部署(二)

接上期,MySQL主從同步我們已經部署完成,接下來,我們開始部署本期的核心---MMM高可用叢集


四、MMM高可用叢集部署

    1、安裝依賴包

    由於mmm 是用perl語言寫的指令碼程式,因此需要在5臺伺服器中分別安裝 perl 和 perl-CPAN

    [[email protected] ~]# yum -y install perl perl-CPAN

    2、yum 安裝 mmm

        a、在4臺 MySQL 伺服器中安裝 mysql-mmm-agent

        [[email protected] ~]# yum -y install gcc gcc-c++ mysql-mmm-agent

        b、在 monitor 伺服器中安裝 mysql-mmm-monitor

        [[email protected] ~]# yum -y install gcc gcc-c++ mysql-mmm-monitor

    3、配置 mmm

        mysql-mmm 的配置檔案在 /etc/mysql-mmm目錄下,進入該目錄

        mysql-mmm-agent 配置檔案

        圖片.png

        mysql-mmm-monitor 配置檔案

        圖片.png

        如圖,mysql-mmm-agent 的配置檔案只有2個,mmm_agent.conf 和 mmm_common.conf,而 mysql-mmm-monitor 的配置檔案有4個,原本是3個,因為我這裡安裝了 mysql-mmm-tools ,因此多了一個mmm_tools.conf

        a、修改公共配置檔案 mmm_common.conf

        [[email protected] mysql-mmm]# vim mmm_common.conf

        圖片.png

        如圖:

        (1)、欄位解釋

            active_master_role      writer                                           #主動的master角色標示,所有資料庫伺服器都需要開啟 read_only 引數,而對於 Write 伺服器,監控伺服器會自動將 read_only 屬性關閉,也就是將其值設為1

            <host default>
            cluster_interface       eth0                                               #叢集網路介面
            pid_path                /run/mysql-mmm-agent.pid            #mmm-agent程序pid檔案路徑
            bin_path                /usr/libexec/mysql-mmm/               #可執行檔案路徑
            replication_user        slaveuser                                       #複製使用者
            replication_password    123456                                      #複製使用者的密碼
            agent_user              mmmagent                                     #代理使用者
            agent_password          123456                                       #代理使用者的密碼
            </host>

            <host mastera>                                                              #這裡寫 mastera 的主機名
            ip      192.168.20.134                                                       #mastera 的 IP 地址
            mode    master                                                                #角色模式:master   表示主庫
            peer    masterb                                                                #與 mastera 同等的主庫的主機名稱,也就是說向 mastera 同步資料的資料庫的主機的名稱,因此為 masterb
            </host>

            <host masterb>                                                              #這裡的屬性同 mastera
            ip      192.168.20.128
            mode    master
            peer    mastera
            </host>

            <host slavea>                                                                  #從庫的主機名稱
            ip      192.168.20.129                                                        #從庫的 IP 地址
            mode    slave                                                                    #角色模式:該主機為 masterb 的從資料庫,因此為 slave
            </host>

            <host slaveb>                                                                  #這裡的屬性同 slavea
            mode    slave
            </host>

            <role writer>                                                                    #Write 角色配置
            hosts   mastera, masterb  #具有寫操作的主機名稱,這裡的配置可以寫單個,也可以寫多個,寫單個的時候,可以避免在網路延遲過大時切換Write,但是當master出現故障時,就無法進行write了,只能對外提供read操作了
            ips     192.168.20.254                                           #對外提供寫操作的虛擬 IP 地址
            mode    exclusive                                                 #模式,exclusive 表示只允許存在一個主資料庫,也就是隻能寫 一個虛擬 IP 地址
            </role>

            <role reader>                                                                    #read 角色配置
            hosts   slavea, slaveb                                                         #對外提供 read 操作的伺服器的主機的名稱,這裡也可以寫master進來,寫進來時,master也對外提供 read 操作
            ips     192.168.20.253, 192.168.20.252                               #對外提供 read 操作的虛擬 IP 地址,為了實現負載均衡,這裡的虛擬 IP 地址至少應該和 read 資料庫伺服器數量相同
            mode    balanced                                                               #模式,balanced 表示負載均衡
            </role>

        (2)、mmm_common.conf配置檔案修改

                如果在伺服器中有多張網絡卡,則需要在 cluster_interface 欄位中指定網絡卡名稱

                按照上面的格式修改公共配置檔案,修改完後複製到其他4臺伺服器中

                scp /etc/mysql-mmm/mmm_common.conf [email protected]:/etc/mysql-mmm

                scp /etc/mysql-mmm/mmm_common.conf [email protected]:/etc/mysql-mmm

                scp /etc/mysql-mmm/mmm_common.conf [email protected]:/etc/mysql-mmm

                scp /etc/mysql-mmm/mmm_common.conf [email protected]:/etc/mysql-mmm

        (3)、mmm_agent.conf配置檔案修改

            [[email protected] mysql-mmm]# vim mmm_agent.conf

            圖片.png

            如圖,改配置檔案只需要修改圖中標示部分,因此,如果伺服器是 mastera ,就改為 this mastera ,如果伺服器是 masterb ,就改為 this masterb ,以此類推

        (4)、修改 mysql-mmm-monitor 的配置檔案 mmm_mon.conf

        [[email protected] mysql-mmm]# vim mmm_mon.conf

        圖片.png

        如上圖,欄位解釋

      include mmm_common.conf                                                                                                 #呼叫 mmm_common.conf 配置檔案
      <monitor>
      ip                  192.168.20.131                                                                                                  #監控主機 IP 地址
      pid_path            /run/mysql-mmm-monitor.pid                                                                    #監控程序 pid 檔案目錄
      bin_path            /usr/libexec/mysql-mmm                                                                            #可執行檔案目錄
      status_path         /var/lib/mysql-mmm/mmm_mond.status                                                 
      ping_ips            192.168.20.134, 192.168.20.128, 192.168.20.129, 192.168.20.130               #這裡寫4臺數據庫伺服器的 IP 地址
      auto_set_online     60

      # The kill_host_bin does not exist by default, though the monitor will
      # throw a warning about it missing.  See the section 5.10 "Kill Host
      # Functionality" in the PDF documentation.
      #
      # kill_host_bin     /usr/libexec/mysql-mmm/monitor/kill_host
      #
     </monitor>

     <host default>
      monitor_user        monitor                                                                              #監控使用者
      monitor_password    123456                                                                          #監控使用者密碼
     </host>

      debug 0

        按照上面的格式,配置好 mmm_mond.conf

    b、啟動 mmm 服務

        在4臺 MySQL 伺服器中啟動 mysql-mmm-agent 服務

        [[email protected] mysql-mmm]# mmm_agentd start

        在監控伺服器中驅動 mysql-mmm-monitor 服務

        [[email protected] mysql-mmm]# mmm_mond start

    c、在 monitor 伺服器檢視其他4臺伺服器的狀態

        [[email protected] mysql-mmm]# mmm_control show

        圖片.png

        如上圖,表示4臺數據庫伺服器配置 mmm 配置 OK。

    d、測試虛擬 IP 地址是否能夠 ping 通

        如果能夠 ping 通,說明 mysql-mmm 部署成功,如果無法 ping 通,則說明在主機上虛擬 IP 地址沒有設定成功,這時候,我們需要在 5 臺數據庫伺服器上執行以下命令

        [[email protected] mysql-mmm]# perl -MCPAN -e shell

        如圖:

        圖片.png

        cpan[1]> install Net::ARP

        如果在執行 perl -MCPAN -e shell 該命令時報錯   Can't locate CPAN.pm in @INC (@INC contains: /usr/local/lib/perl5 /usr/local/share/perl5 /usr/lib/perl5/vendor_perl /usr/share/perl5/vendor_perl /usr/lib/perl5 /usr/share/perl5 .).



        說明,我們沒有安裝 perl-CPAN,用 yum 安裝即可

        執行完上述命令之後,在分別在4臺伺服器中執行下列命令

        mastera

        [[email protected] mysql-mmm]# /usr/libexec/mysql-mmm/agent/configure_ip /etc/mysql-mmm/mmm_common.conf ens33 192.168.20.254

        masterb

        [[email protected] mysql-mmm]# /usr/libexec/mysql-mmm/agent/configure_ip /etc/mysql-mmm/mmm_common.conf ens33 192.168.20.254

        slavea
        [[email protected] mysql-mmm]# /usr/libexec/mysql-mmm/agent/configure_ip /etc/mysql-mmm/mmm_common.conf ens33 192.168.20.253

        slaveb

        [[email protected] mysql-mmm]# /usr/libexec/mysql-mmm/agent/configure_ip /etc/mysql-mmm/mmm_common.conf ens33 192.168.20.252

        執行上面命令之後,在 ping 虛擬 IP 地址,ping 測試 OK,能夠 ping 通

        最後,在檢視4臺數據庫伺服器的狀態

        [[email protected] mysql-mmm]# mmm_control checks all

        如圖:

        圖片.png

        如果全是 OK ,說明我們的 mysql-mmm 服務部署成功

        上面的地2列的意思分別是:

        ping:ping 測試,可以 ping 通時 OK,否則,請按照上述操作檢查

        mysql:mysql server 線上時 OK,否則,請檢查 mysql server 是否有停止

        rep_threadh:複製執行緒正在執行時 OK,否則請排查複製執行緒未執行的原因,常見可能原因為:1、監控和複製所用的使用者名稱、密碼錯誤;2、主從同步出現故障

        rep_backlog:複製擠壓的日誌很少時 OK,否則可能是伺服器處理速度太慢或者資料量太大

    e、mmm_control 名詞解釋

        如圖:

        圖片.png

        check:檢視指定 host 或者所有主機的指定狀態或者所有狀態

        show:檢視當前叢集狀態

        set_online:把 host 的狀態由AWAITING_RECOVERY或者ADMIN_OFFLINE恢復到ONLINE

        set_offline:把 host 的狀態手動設定為ADMIN_OFFLINE,並且會停止mysql複製

        mode:列印當前monitor的執行模式

        set_active:切換monitor程序為主動模式

        set_passive:切換monitor程序為被動模式

        set_manual:切換monitor程序為手動模式

        move_role:將write角色切換到其他主機

    f、測試mysql-mmm在服務故障情況下是否能夠自動切換,這裡值提供方法

        測試方法為:

        停止 mastera 的 mysql 服務,檢視 writer(192.168.20.254) 是否能夠切換到 masterb,隨後開啟 mastera 的 mysql 服務,在手動停止 masterb 的 mysql 服務,檢視 writer(192.168.20.254) 是否能夠切換到 mastera ,如果都能,則說明,我們的mysql-mmm叢集部署時OK的,如果不能,請檢查mmm_common.conf配置檔案是否有錯。當然還有其他測試思路,這裡就不一一列舉了。

        

五、連線MMM叢集

    部署完 mysql-mmm 叢集,這時候我們就迫不及待的想要用我們現有的應用服務去連線

    首先,我們在mastera新建一個MySQL賬號game

    mysql> grant all privileges on *.* to [email protected]"%" identified by "123456";

    mysql> flush privileges;

    然後,我們在我們的應用伺服器上連線虛擬 IP(192.168.20.254、192.168.20.253、192.168.20.252)

        a、連線192.168.20.254建立一個數據庫

        [[email protected] ~]# mysql -h192.168.20.254 -ugame -p123456

        圖片.png

        MySQL [(none)]> create database web;

        圖片.png

        b、連線192.168.20.253、192.168.20.252檢視剛才建立的資料庫是否存在

        [[email protected] ~]# mysql -h192.168.20.253 -ugame -p123456

        圖片.png

        [[email protected] ~]# mysql -h192.168.20.252 -ugame -p123456

        圖片.png

        有圖可見,我們連線192.168.20.254建立的資料庫,在連線192.168.20.253和192.168.20.252後也能看得到,說明一切OK

        注意:連線192.168.20.254時,最好能夠切換 mastera 和 masterb 進行連線建庫測試,在這期間有可能會出現以下報錯:

                  1209 - The MySQL server is running with the --read-only option so it cannot execute this statement

                  出現這個錯誤原因是,mmm 將主資料庫設定成了只讀模式,我們只需要執行 set global read_only=0; 即可

                 

        到此為止,我們的MySQL主從同步+MMM高可用叢集部署完成,我們也列舉了一些在部署過程中可能會踩到的坑,但是,在線上部署中,需要具體問題具體分析,所以,在以後的生活中,小弟還會和大佬們共同成長。


本節完。