1. HAProxy簡介

• HAProxy 是一款提供高可用性、負載均衡以及基於TCP（第四層）和HTTP（第七層）應用的代理軟體，支援虛擬主機，它是免費、快速並且可靠的一種解決方案。 HAProxy特別適用於那些負載特大的web站點，這些站點通常又需要會話保持或七層處理。HAProxy執行在時下的硬體上，完全可以支援數以萬計的 併發連線。並且它的執行模式使得它可以很簡單安全的整合進您當前的架構中， 同時可以保護你的web伺服器不被暴露到網路上。
• HAProxy 實現了一種事件驅動、單一程序模型，此模型支援非常大的併發連線數。多程序或多執行緒模型受記憶體限制 、系統排程器限制以及無處不在的鎖限制，很少能處理數千併發連線。事件驅動模型因為在有更好的資源和時間管理的使用者端(User-Space) 實現所有這些任務，所以沒有這些問題。此模型的弊端是，在多核系統上，這些程式通常擴充套件性較差。這就是為什麼他們必須進行優化以 使每個CPU時間片(Cycle)做更多的工作。
• HAProxy 支援連線拒絕 : 因為維護一個連線的開啟的開銷是很低的，有時我們很需要限制攻擊蠕蟲（attack bots），也就是說限制它們的連線開啟從而限制它們的危害。 這個已經為一個陷於小型DDoS攻擊的網站開發了而且已經拯救了很多站點，這個優點也是其它負載均衡器沒有的。

2. haproxy 配置

拓撲：
haproxy 伺服器 server2ip：172.25.21.2，server3:172.25.21.4
httpd 伺服器 Server7,server13

1. 進行haprox 的安裝

換取haproxy 原始碼包，並進行安裝

• 將原碼包編譯成rpm包
  原碼包中需要包含 .spec 檔案，其中寫入了原碼編譯成rpm包的規則
  find -name *.spec 通過此命令來查詢是否存在
  然後將原碼包編譯成 rpm 包

 [root@server3 haproxy-1.6.11]# rpmbuild -tb haproxy-1.6.11.tar.gz 

可看到rpm 包被建立的為位置
然後執行 rpm -ivh 加安裝包 進行安裝

可在其啟動指令碼中檢視配置檔案，然後在原碼包中獲取
進入原碼包獲取配置檔案
啟動指令碼

原始碼包，配置檔案模版

/mnt/haproxy-1.6.11/examples

2. 配置haproxy

生成haproxy配置檔案

 [[email protected] examples]# cp content-sw-sample.cfg /etc/haproxy/haproxy.cfg 
 

 [[email protected] ~]vim /etc/haproxy/haproxy.cfg
 對配置檔案進行編輯
 內容如下：
 global
         maxconn         10000   # 最大連線數
         stats socket    /var/run/haproxy.stat mode 600 level admin
         log             127.0.0.1 local0
         uid             200      # 使用者ID 如果沒有，需要手動新增使用者
         gid             200
         chroot          /var/empty  
                        # 監牢，保護機制，讓訪問的使用者在此目錄內，無法對其他目錄進行操作
         daemon 

 defaults                   # 定義預設配置
         mode            http    # 負載均衡軟體，7層協議
         log             global
         option          httplog
         option          dontlognull
         monitor-uri     /monitoruri   # 本機狀態的健康檢查
         maxconn         8000     # 最大連機數，會覆蓋gloab 中的設定
         timeout client  30s

         stats uri       /admin/stats   uri 狀態，全域性狀態，包含本機與後端服務

         option prefer-last-server
         retries         2    
         option redispatch
         timeout connect 5s   
         timeout server  5s
 # The public 'www' address in the DMZ
 frontend public            # 前端配置
         bind            *:80 name clear   # 監聽本機所有IP 
         #bind            192.168.1.10:443 ssl crt /etc/haproxy/haproxy.pem



         #use_backend     static if { hdr_beg(host) -i img }
         #use_backend     static if { path_beg /img /css   }
         default_backend static         # 預設後端的名稱

 # The static backend backend for 'Host: img', /img and /css.
 backend static            # 後端
         mode            http      # http 協議
         balance         roundrobin   # 演算法rr

         server          statsrv1 172.25.21.7:80 check inter 1000   # 後端伺服器
         server          statsrv2 172.25.21.13:80 check inter 1000

編輯完成，重啟服務：

 [root@server2 ~]# /etc/init.d/haproxy restart
 Shutting down haproxy:                                     [  OK  ]
 Starting haproxy:                                          [  OK  ]

在瀏覽取中檢視狀態
輸入 172.25.21.2/monitoruri # 本機狀態的健康檢查

輸入 172.25.21.2/adminstats # monitoruri # 本機狀態的健康檢查

開啟後端伺服器，進行負載均衡的檢視

 [root@server7 ~]# /etc/init.d/httpd start
 [root@server13 ~]# /etc/init.d/httpd start

瀏覽器中檢視

3 設定日誌記錄

在配置檔案中可看到日誌記錄規定

  log             127.0.0.1 local0
 Local0 為日誌記錄

編輯/etc/rsyslog.conf 進行設定

[root@server2 log]# vim /etc/rsyslog.conf
 編輯如下：
 允許UDP 日誌接收
 # Provides UDP syslog reception
 $ModLoad imudp
 $UDPServerRun 514

 *.info;mail.none;authpriv.none;cron.none;local0.none                /var/log/messages
 不將日誌傳送到/var/log/messages
 local0.*                                             /var/log/haproxy.log
 # 定義日誌接收點

編輯完成，重啟日誌服務

檢視日誌

4. haproxy動靜分離：

定義多個後端

 frontend public
         bind            *:80 name clear
         #bind            192.168.1.10:443 ssl crt /etc/haproxy/haproxy.pem

         #use_backend     static if { hdr_beg(host) -i img }
         #use_backend     static if { path_beg /img /css   }
         use_backend     static2 if { path_end -i .php   }   
         # 如過訪問的頁面以 .php 結尾，則訪問後端 static2
         default_backend static1   # 預設訪問的後端 static1

 # The static backend backend for 'Host: img', /img and /css.
 backend static1     # 後端1
         mode            http
         balance         roundrobin

         server          statsrv1 172.25.21.7:80 check inter 1000
 backend static2    # 後端2
         mode            http
         balance         roundrobin

         server          statsrv2 172.25.21.13:80 check inter 1000

編輯如下：

在瀏覽器檢視
預設後端

訪問.php

5. haproxy訪問控制：

在前端定義

編輯配置檔案，進行訪問控制設定

 [[email protected] log]# vim /etc/haproxy/haproxy.cfg

 # The public 'www' address in the DMZ
 frontend public
         bind            *:80 name clear
         #bind            192.168.1.10:443 ssl crt /etc/haproxy/haproxy.pem

         acl black_lsit src 172.25.21.250  
         # 訪問控制列表 black_list 為自定義，前後一致即可
         http-request deny if black_list    
         # http-request deny 訪問控制黑名單
 errorloc 403 http://172.25.1:8080  
         # 重定向，將錯誤顯示型別，重新定向到指定頁面

172.25.21.250 主機訪問效果如下：

根據錯誤型別將訪問重定向：

172.25.25.2:8080 為該172.25.21.2主機http 的埠
編輯預設釋出檔案，並重新啟動服務

172.25.21.250 主機訪問效果如下：

編輯配置檔案，進行訪問重定向（crul 命令不支援重定向）

redirect location 重定向，將訪問的頁面重新定向到指定頁面

 [[email protected] log]# vim /etc/haproxy/haproxy.cfg

 frontend public
         bind            *:80 name clear
         #bind            192.168.1.10:443 ssl crt /etc/haproxy/haproxy.pem

 #       acl black_list src 172.25.21.250
 #       http-request deny if black_list
 #       errorloc 403 http://172.25.21.2:8080  # 重定向

         acl blacklist src 172.25.21.250
         redirect location http://www.nba.com  
         # 將上述訪問的源地址重定向到 www.nba.com

編輯完成重新載入配置檔案

 [root@server2 log]# /etc/init.d/haproxy reload

172.25.21.250 主機訪問效果如下：直接被重新定向到www.nba.com

6. haproxy讀寫分離：

通過haproxy 實現網頁的讀寫分離

編輯 /etc/haproxy/haproxy.cfg

 [[email protected] ~]# vim /etc/haproxy/haproxy.cfg
 編輯內容如下：

 frontend public
         bind            *:80 name clear
         #bind            192.168.1.10:443 ssl crt /etc/haproxy/haproxy.pem

 #       acl black_list src 172.25.21.250
 #       http-request deny if black_list
 #       errorloc 403 http://172.25.21.2:8080  # 重定向 

 #       acl blacklist src 172.25.21.250
 #       redirect location http://www.nba.com  # 重定向
         acl write method POST      # 控制表寫，方法為PSOT
         acl write method PUT       # 控制表寫，方法為PUT

         #use_backend     static if { hdr_beg(host) -i img }
         #use_backend     static if { path_beg /img /css   }
         use_backend     static2 if { path_end -i .php   }
         use_backend     static2 if write   # 執行寫的方法時，訪問static2
.........................省略...............................
backend static1
        mode            http
        balance         roundrobin

        server          statsrv1 172.25.21.7:80 check inter 1000
backend static2
        mode            http
        balance         roundrobin

        server          statsrv2 172.25.21.13:80 check inter 1000

編輯完成重啟服務
給haproxy 服務端安裝 php ，來進行對.php的解析

 [root@server2 ~]# /etc/init.d/haproxy reload

在後端伺服器進行配置
在172.25.21.7，與172.25.21.13 /var/www/html/載入下載安裝目錄
Upload 目錄，中實現簡單的upload

兩個後端http伺服器都進行此操作

在兩個後端伺服器進行php服務的安裝
然後重啟httpd 服務
為172.25.21.7主機的/var/www/html/images/ 新增圖片

 [root@server7 html]# yum install -y php
 [root@server7 html]# /etc/init.d/httpd restart
 [root@server13 html]# yum install -y php
 [root@server13 html]# /etc/init.d/httpd restart

在服務端進行測試：
訪問172.25.21.7/images/中的檔案

訪問haproxy主機
進行上傳操作

進行上傳檔案的選擇

選擇上傳

上傳成功

2. Pacemaker + haproxy 實現高可用叢集

• 基本配置：
  給兩個節點安裝 haproxy ，pacemaker，corosync，crmsh，pssh
  安裝完成後，進行 corosync 的配置：

編輯主配置檔案：

 compatibility: whitetank

 totem {   
         version: 2
         secauth: off
         threads: 0
         interface {   # 需要根據你的環境設定以下值
                 ringnumber: 0
                 bindnetaddr: 172.25.21.0     # 叢集網段
                 mcastaddr: 226.94.1.21    # 多播地址，保證與其他叢集伺服器不 同，否則會造成衝突
                 mcastport: 5405   # 多播埠
                 ttl: 1
         }
 }

 ..................省略.........................
 service {
         name: pacemaker   # 新增服務名稱
         ver: 0               # 
 }

 編輯成功，兩節點同時啟動corosync 
 可通過 crm 命令來進行對配置進行管理
 Crm recurce
 Crm_verify -VL

首先檢測配置檔案是否異常

這是因為stonith,目前,我們禁用這個特性,然後在 配置STONISH 章節來配置它。這裡要指出,使用STONITH是非常有必要的。關閉這個特性就是告訴叢集:假裝故障的節點已經安全的關機了。一些供應商甚至不允許這個特性被關閉。
我們將 stonith-enabled設定為 false 來關閉STONITH

 # crm configure property stonith-enabled=false
 # crm_verify -L

設定完這個選項以後,校驗配置檔案就正常了。

進行Fence的安裝

進行fence的安裝

 [root@server3 ~]# yum install -y fence-virt-0.2.3-15.el6.x86_64

在真實主機安裝fence 服務，並生成金鑰，傳到兩個節點主機的/etc/cluster下

 通過crm configure 進行配置
 crm(live)configure# primitive vmfence stonith:fence_xvm params  pcmk_host_map="server2:Server2;server3:Server4" op monitor interval=30s

 # pcmk_host_map=“節點名+節點所在主機的域名；節點名+節點所在主機域名”
 crm(live)configure# property stonith-enabled=ture
 # 啟用 stonith 
 crm(live)configure# commit 
 # 儲存配置
 [root@server2 cluster]# crm configure
 crm(live)configure# show
 檢視最終配置

 在節點處檢視狀態
 crm_mon

進行測試fence(高可用測試)
手動讓server2 服務所在機器崩潰

 Echo c > /proc/sysrq-trigger  手動讓核心崩潰

Server2 宕機，服務全部移動至server3,fence 重新啟動server2