2. 程式人生 > >keepalived+nginx雙機熱備+負載均衡

keepalived+nginx雙機熱備+負載均衡

阿新 • • 發佈：2017-07-30
ethernet auth 超時任務 collision boot .rpm ocl bnl host

keepalived+nginx雙機熱備+負載均衡

最近因業務擴展，需要將當前的apache 轉為nginx(web), 再在web前端放置nginx(負載均衡)。同時結合keepalived 對前端nginx實現HA。
nginx進程基於於Master+Slave(worker)多進程模型，自身具有非常穩定的子進程管理功能。在Master進程分配模式下，Master進程永遠不進行業務處理，只是進行任務分發，從而達到Master進程的存活高可靠性，Slave(worker)進程所有的業務信號都 由主進程發出，Slave(worker)進程所有的超時任務都會被Master中止，屬於非阻塞式任務模型。
Keepalived是Linux下面實現VRRP 備份路由的高可靠性運行件。基於Keepalived設計的服務模式能夠真正做到主服務器和備份服務器故障時IP瞬間無縫交接。二者結合，可以構架出比較穩定的軟件lb方案。

技術分享




準備4臺電腦來做這個實驗:

192.168.232.132 web服務器
192.168.232.133 web服務器
192.168.232.134 keepalived nginx
192.168.232.135 keepalived nginx

虛擬IP (VIP)：192.168.232.16

134\135兩個主機配置虛擬IP


下面以135為例：

vi /etc/sysconfig/network-scripts/ifcfg-eth2:0

[plain] view plain copy print?
  1. DEVICE=eth2:0
  2. TYPE=Ethernet
  3. ONBOOT=yes
  4. BOOTPROTO=static
  5. DNS1=192.168.232.2
  6. IPADDR=192.168.232.16
  7. NETMASK=255.255.255.0
  8. GETWAY=192.168.232.2




service network restart

使用ifconfig查看效果：

[plain] view plain copy print?
  1. eth2 Link encap:Ethernet HWaddr 00:0C:29:49:90:5B
  2. inet addr:192.168.232.135 Bcast:192.168.232.255 Mask:255.255.255.0
  3. inet6 addr: fe80::20c:29ff:fe49:905b/64 Scope:Link
  4. UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:1
  5. RX packets:66322 errors:0 dropped:0 overruns:0 frame:0
  6. TX packets:31860 errors:0 dropped:0 overruns:0 carrier:0
  7. collisions:0 txqueuelen:1000
  8. RX bytes:67624991 (64.4 MiB) TX bytes:2723877 (2.5 MiB)
  9. Interrupt:19 Base address:0x2000
  11. eth2:0 Link encap:Ethernet HWaddr 00:0C:29:49:90:5B
  12. inet addr:192.168.232.16 Bcast:192.168.232.255 Mask:255.255.255.0
  13. UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:1
  14. Interrupt:19 Base address:0x2000
  16. lo Link encap:Local Loopback
  17. inet addr:127.0.0.1 Mask:255.0.0.0
  18. inet6 addr: ::1/128 Scope:Host
  19. UP LOOPBACK RUNNING MTU:16436 Metric:1
  20. RX packets:22622 errors:0 dropped:0 overruns:0 frame:0
  21. TX packets:22622 errors:0 dropped:0 overruns:0 carrier:0
  22. collisions:0 txqueuelen:0
  23. RX bytes:1236328 (1.1 MiB) TX bytes:1236328 (1.1 MiB)




說明生效了。

134\135兩個主機安裝keepalived和nginx


nginx安裝：

1、導入外部軟件庫
rpm -Uvh http://dl.iuscommunity.org/pub/ius/stable/Redhat/6/i386/epel-release-6-5.noarch.rpm
rpm -Uvh http://dl.iuscommunity.org/pub/ius/stable/Redhat/6/i386/ius-release-1.0-10.ius.el6.noarch.rpm
rpm -Uvh http://nginx.org/packages/centos/6/noarch/RPMS/nginx-release-centos-6-0.el6.ngx.noarch.rpm
以下添加註釋
mirrorlist=http://dmirr.iuscommunity.org/mirrorlist?repo=ius-el6&arch=$basearch
以下刪除註釋
#baseurl=http://dl.iuscommunity.org/pub/ius/stable/Redhat/5/$basearch
2、yum安裝nginx
yum install nginx

keepalived安裝：

安裝依賴
yum -y install gcc gcc+ gcc-c++
yum install popt-devel openssl openssl-devel libssl-dev libnl-devel popt-devel

安裝內核
yum -y install kernel kernel-devel
當前kernel代碼建立連接 ln -s /usr/src/kerners/2.6....../ /usr/src/linux

安裝keepalived
wget http://www.keepalived.org/software/keepalived-1.2.2.tar.gz
tar -zxvf keepalived-1.2.2.tar.gz
cd keepalived-1.2.2
./configure
make
make install

拷貝相應的文件

cp /usr/local/sbin/keepalived /usr/sbin/
cp /usr/local/etc/rc.d/init.d/keepalived /etc/init.d/
cp /usr/local/etc/sysconfig/keepalived /etc/sysconfig/
cp -r /usr/local/etc/keepalived/ /etc/

配置keeplived和nginx主機


134/135執行都執行以下操作：
vi /etc/nginx/conf.d/default.conf

[plain] view plain copy print?
  1. server {
  2. listen 8088;
  3. server_name localhost;
  5. location / {
  6. root /var/www/html;
  7. index index.html index.htm;
  8. }
  10. error_page 500 502 503 504 /50x.html;
  11. location = /50x.html {
  12. root /usr/share/nginx/html;
  13. }
  14. }


135執行以下操作：
vi /var/www/html/index.html

[plain] view plain copy print?
  1. <html>
  2. <head>
  3. <title>Welcome to nginx!</title>
  4. </head>
  5. <body bgcolor="white" text="black">
  6. <center><h1>Welcome to nginx! 192.168.232.135</h1></center>
  7. </body>
  8. </html>


134執行以下操作：
vi /var/www/html/index.html

[plain] view plain copy print?
  1. <html>
  2. <head>
  3. <title>Welcome to nginx!</title>
  4. </head>
  5. <body bgcolor="white" text="black">
  6. <center><h1>Welcome to nginx! 192.168.232.134</h1></center>
  7. </body>
  8. </html>


134執行以下操作：
vi /etc/keepalived/keepalived.conf

[plain] view plain copy print?
  1. ! Configuration File for keepalived
  3. global_defs {
  4. notification_email {
  5. [email protected]
  6. [email protected]
  7. [email protected]
  8. }
  9. #notification_email_from [email protected]
  10. #smtp_server 192.168.200.1
  11. #smtp_connect_timeout 30
  12. router_id LVS_DEVEL
  13. }
  15. vrrp_script chk_http_port {
  16. script "</dev/tcp/127.0.0.1/8088"
  17. interval 1
  18. weight -2
  19. }
  21. vrrp_instance VI_1 {
  22. state MASTER
  23. interface eth2
  24. virtual_router_id 51
  25. priority 100
  26. advert_int 1
  27. authentication {
  28. auth_type PASS
  29. auth_pass 1111
  30. }
  31. virtual_ipaddress {
  32. 192.168.232.16
  33. }
  34. track_script {
  35. chk_http_port
  36. }
  37. }


135執行以下操作：
vi /etc/keepalived/keepalived.conf

[plain] view plain copy print?
  1. ! Configuration File for keepalived
  3. global_defs {
  4. notification_email {
  5. [email protected]
  6. [email protected]
  7. [email protected]
  8. }
  9. #notification_email_from [email protected]
  10. #smtp_server 192.168.200.1
  11. #smtp_connect_timeout 30
  12. router_id LVS_DEVEL
  13. }
  15. vrrp_script chk_http_port {
  16. script "</dev/tcp/127.0.0.1/8088"
  17. interval 1
  18. weight -2
  19. }
  21. vrrp_instance VI_1 {
  22. state BACKUP
  23. interface eth2
  24. virtual_router_id 51
  25. priority 99
  26. advert_int 1
  27. authentication {
  28. auth_type PASS
  29. auth_pass 1111
  30. }
  31. virtual_ipaddress {
  32. 192.168.232.16
  33. }
  34. track_script {
  35. chk_http_port
  36. }
  37. }


Tips：

state 參數值：主的是MASTER、備用的是BACKUP
priority 參數值： MASTER > BACKUP
virtual_router_id： 參數值要一樣

測試測試：


兩臺測試機134\135均啟動keepalived和nginx
service keepalived restart
service keepalived nginx

驗證nginx啟動正常：
訪問 master：http://192.168.232.134:8088/
訪問 backup: http://192.168.232.135:8088/

查看keepalived的日誌信息：

134\135均打開日誌信息方便查看keepalived動態：
tail -f /var/log/messages

瀏覽器打開虛擬ip訪問：http://192.168.232.16:8080/ ，此時顯示IP為192.168.232.134

服務器層的雙機熱備（比如服務器宕機、keepalived宕了）測試：


kill 192.168.232.134（master) 的keepalived進程
killall keepalived
134的日誌信息如下：

[plain] view plain copy print?
  1. Jun 11 18:03:10 localhost Keepalived_vrrp: VRRP_Instance(VI_1) Sending gratuitous ARPs on eth1 for 192.168.232.16
  2. Jun 11 18:03:15 localhost Keepalived_vrrp: VRRP_Instance(VI_1) Sending gratuitous ARPs on eth1 for 192.168.232.16
  3. Jun 11 19:30:44 localhost Keepalived: Terminating on signal
  4. Jun 11 19:30:44 localhost Keepalived: Stopping Keepalived v1.2.2 (06/10,2014)
  5. Jun 11 19:30:44 localhost Keepalived_vrrp: Terminating VRRP child process on signal
  6. Jun 11 19:30:44 localhost Keepalived_healthcheckers: Terminating Healthchecker child process on signal



135的日誌信息如下：

[plain] view plain copy print?
  1. Jun 11 19:30:50 localhost Keepalived_vrrp: VRRP_Instance(VI_1) setting protocol VIPs.
  2. Jun 11 19:30:50 localhost Keepalived_vrrp: VRRP_Instance(VI_1) Sending gratuitous ARPs on eth2 for 192.168.232.16
  3. Jun 11 19:30:50 localhost Keepalived_healthcheckers: Netlink reflector reports IP 192.168.232.16 added
  4. Jun 11 19:30:55 localhost Keepalived_vrrp: VRRP_Instance(VI_1) Sending gratuitous ARPs on eth2 for 192.168.232.16




刷新http://192.168.232.16:8080/ ， 此時顯示IP為192.168.232.135。

再次啟動192.168.232.134的keepalived進程，192.168.232.134會自動接管成為master，192.168.232.135自動轉為backup，從測試結果看，備機能成功接管，已經實現了熱備。

應用層（web）的雙機熱備（比如nginx進程被意外kill、web端口不通）試驗：


關閉192.168.232.134（master) 的nginx服務：
service nginx stop

134的日誌信息如下：

[plain] view plain copy print?
  1. Jun 11 19:38:49 localhost Keepalived_vrrp: VRRP_Script(chk_http_port) failed
  2. Jun 11 19:38:51 localhost Keepalived_vrrp: VRRP_Instance(VI_1) Received higher prio advert
  3. Jun 11 19:38:51 localhost Keepalived_vrrp: VRRP_Instance(VI_1) Entering BACKUP STATE
  4. Jun 11 19:38:51 localhost Keepalived_vrrp: VRRP_Instance(VI_1) removing protocol VIPs.
  5. Jun 11 19:38:51 localhost Keepalived_healthcheckers: Netlink reflector reports IP 192.168.232.16 removed


135的日誌信息如下：

[plain] view plain copy print?
  1. Jun 11 19:38:52 localhost Keepalived_vrrp: VRRP_Instance(VI_1) forcing a new MASTER election
  2. Jun 11 19:38:53 localhost Keepalived_vrrp: VRRP_Instance(VI_1) Transition to MASTER STATE
  3. Jun 11 19:38:54 localhost Keepalived_vrrp: VRRP_Instance(VI_1) Entering MASTER STATE
  4. Jun 11 19:38:54 localhost Keepalived_vrrp: VRRP_Instance(VI_1) setting protocol VIPs.
  5. Jun 11 19:38:54 localhost Keepalived_vrrp: VRRP_Instance(VI_1) Sending gratuitous ARPs on eth2 for 192.168.232.16
  6. Jun 11 19:38:54 localhost Keepalived_healthcheckers: Netlink reflector reports IP 192.168.232.16 added
  7. Jun 11 19:38:59 localhost Keepalived_vrrp: VRRP_Instance(VI_1) Sending gratuitous ARPs on eth2 for 192.168.232.16



刷新http://192.168.232.16:8080/ ， 此時顯示IP為192.168.232.135。

再次啟動192.168.232.134的nginx進程，192.168.232.134會自動接管成為master，192.168.232.135自動轉為backup，從測試結果看，備機能成功接管，已經實現了熱備。

為什麽主備的參數state都是MASTER，對的你沒有看錯確實要都設置成一樣的，不然並不能實現我們想要的VIP漂浮的效果，我測試很久才發現的.state都設置成MASTER後，會根據priority的值大小競爭來決定誰是真正的MASTER，腳本檢測也是在失敗的時候會把權重減去相應的值，比如原來master（181）的priority=100，如果腳本檢測到端口8088無法連接，就會priority-2=98，< S-B（150）的priority（99），此時 S-B（150） 將競爭成為master，這樣就實現了web應用的熱備。

如果以上實驗都沒有問題了，那麽就該nginx負載均衡的配置了，配置修改參見如下：http://blog.csdn.NET/e421083458/article/details/30086413

keepalived+nginx雙機熱備+負載均衡

相關推薦

keepalived+nginx雙機熱備+負載均衡

ethernet auth 超時任務 collision boot .rpm ocl bnl host keepalived+nginx雙機熱備+負載均衡最近因業務擴展，需要將當前的apache 轉為nginx(web), 再在web前端放置nginx(負載均衡)。同時結合

Linux學習總結（五十四）keepalived+lvs 雙機熱備負載均衡架構

DR LVS keepalived+lvs 一 LVS IP tunnel 模式介紹 IP隧道(IP tunneling)是將一個IP報文封裝在另一個IP報文的技術，這可以使得目標為一個IP地址的數據報文能被封裝和轉發到另一個IP地址。IP隧道技術亦稱為IP封裝技術(IP encapsulatio

LVS+KeepAlived搭建雙機熱備負載均衡

從下載內容包中找到ipvsadm-1.24.tar.gz，執行如下命令（執行命令出錯的說明編譯環境存在問題，請更新下載GCC） #tar -zxvf keepalived-1.1.15.tar.gz #cd keepalived-1.1.15 #./configure --prefix=/usr/local

華為防火牆 雙機熱備負載均衡實驗

雙機熱備 FW1的配置 FW2的配置 interface GigabitEthernet 1/0/1  ip address 10.1.1.2 255.255.255.0  vrrp vrid 1 v

Nginx+keepalived做雙機熱備，實現負載均衡（主主模式）

nginx keepalive Keepalived: 簡介：Keepalived的作用是檢測服務器的狀態，如果有一臺web服務器宕機，或工作出現故障，Keepalived將檢測到，並將有故障的服務器從系統中剔除，同時使用其他服務器代替該服務器的工作，當服務器工作正常後Keepali

解決Nginx + Keepalived主從雙機熱備+自動切換，實現負載均衡及高可用

解決Nginx + Keepalived主從雙機熱備+自動切換，實現負載均衡及高可用 IP 伺服器 服務 192.168.1.10 lb-node1 Nginx、kee

Nginx+keepalived主從雙機熱備自動切換架構

1:安裝 keepalived 安裝 keepalived 非常的簡單和容易，這跟安裝其他 GNU 原始碼軟體步驟是以模一樣的。下面 給出其安裝過程 下載最新穩定版  wget http://www.keepalived.org/software/keepaliv

keepalived實現雙機熱備

lin fire per 安裝 arp index 正常 綁定 type 　　keepalived的作用是檢測後端TCP服務的狀態，如果有一臺提供TCP服務的後端節點死機，或者工作出現故障，keepalived會及時檢測到，並將有故障的節點從系統中剔除，當提供TCP服務的節

使用keepalived實現雙機熱備

figure 設置 dha boa message mtu hat 並不是 pid 通常說的雙機熱備是指兩臺機器都在運行，但並不是兩臺機器都同時在提供服務。當提供服務的一臺出現故障的時候，另外一臺會馬上自動接管並且提供服務，而且切換的時間非常短。下面來以keepalived

Nginx雙機熱備

enable fir firewall 可用 網絡故障 如果能 1.5 RoCE priority Nginx雙機熱備 Keepalived高可用概述 1.什麽是高可用 什麽是高可用雙擊熱備, 一般指2臺機器啟動著相同的業務系統,當有一臺機器down機了, 另外一臺服務器能

Haproxy+Keepalived（雙機熱備）搭建高可用web架構

ise mark 高可用web keepalive email protocol rip 火墻 詳情 1、目的搭建web高可用架構，用haproxy作為前段負載均衡分攤後端web服務器壓力，Keepalived保證haproxy的存活（雙機熱備：一臺haproxy掛了，自動

keepalived（雙機熱備）深度解析

以下內容為親自研究得出的結果： 雙機熱備切換時間： 主機interval*主機fail+檢測時間（檢測指令碼執行時間）與備機interval*備機rise+檢測時間（檢測指令碼執行時間）中較大的那個

Keepalived + Nginx 實現高可用(雙機熱備) Web 負載均衡 安裝測試筆記

system ati 根據 properly 節點配置 sys .gz ive error: keepalived是什麽 keepalived是集群管理中保證集群高可用的一個服務軟件，其功能類似於heartbeat，用來防止單點故障。 keepalived工作原理 k

nginx+tomcat實現負載均衡以及雙機熱備（tomcat宕機導致客戶端無法訪問）

首先，在這裡分享一個java技術交流群，純粹技術交流，拒絕廣告，歡迎各位進群交流。QQ群：817997079 大家都知道nginx可以代理多臺伺服器（以tomcat為例），那麼當被nginx代理的tomcat伺服器宕機時，我們怎麼保證客戶端能繼續訪問系統？接下來就說一下ng

Nginx+keepalived雙機熱備（主主模式）

實現 nginx keepalived Nginx+keepalived實現高可用負載均衡的主主模式由於網站的訪問需求不斷加大，負載越來越高。現需要在web前端放置nginx負載均衡,同時結合keepalived對前端nginx實現HA高可用。1、nginx進程基於Master+Slave(wor

Nginx+keepalived雙機熱備

nginx ha keepalive 一、nginx簡介Nginx是一款輕量級的Web 服務器/反向代理服務器及電子郵件（IMAP/POP3）代理服務器，並在一個BSD-like 協議下發行。其特點是占有內存少，並發能力強，事實上nginx的並發能力確實在同類型的網頁服務器中表現較好，中國大陸使用

Nginx + keepalived 雙機熱備（主從模式）

綁定 html 負載均衡 基於 模式 主備 class 接管 主主 雙機高可用一般是通過虛擬IP（飄移IP）方法來實現的，基於Linux/Unix的IP別名技術。 雙機高可用方法目前分為兩種： 1）雙機主從模式：即前端使用兩臺服務器，一臺主服務器和一臺熱備服務器，正常情況

群集架構篇——nginx反向代理+keepalived雙機熱備+tomcat伺服器池+後端資料庫

群集架構篇——nginx反向代理+keepalived雙機熱備+tomcat伺服器池+後端資料庫 實驗所需   兩臺nginx都佈置了keepalived   漂移地址 192.168.30.100  Nginx    

群集架構篇 ——nginx反向代理+keepalived雙機熱備+tomcat伺服器池+後端資料庫

首先準備好兩臺nginx，兩臺tomcat,一臺mysql資料庫,如下NginxIP地址：192.168.20.39（lvs01）192.168.20.40（lvs02）漂移地址：192.168.20.66TomcatIP地址：192.168.20.41（TM01）192.168.20.42（TM02）Mys

群集架構篇 ?——nginx反向代理+keepalived雙機熱備+tomcat服務器池+後端數據庫

rest ipaddress base oot kill tomcat8 orm caf 1.4 首先準備好兩臺nginx，兩臺tomcat,一臺mysql數據庫,如下NginxIP地址：192.168.20.39（lvs01）192.168.20.40（lvs02）漂移地