一、redis集群說明

集群采用一主三從，總共3主9從，總共12臺，每個機房中放置一主三從

每個機房中放置其他機房的一從，達到高可用性

二、集群搭建

1.redis集群的搭建

1.1修改系統參數

1.使用root賬戶修改

　　/etc/security/limits.conf

　　添加

　　* soft nofile 102400

　　* hard nofile 102400

　　修改 /etc/sysctl.

　　添加net.core.somaxconn=32767

　　sysctl -p 生效

　　2.創建redis用戶

1.2 redis的安裝

1.下載並編譯

　　主節點機器上創建文件

　　mkdir -p /home/redis/redis/bin

　　mkdir -p /home/redis/redis/bin

　　mkdir -p /home/redis/redis/log

在主節點下

在redis目錄下

wget http://download.redis.io/releases/redis-3.2.5.tar.gz

tar xzf redis-3.2.5.tar.gz

cd redis-3.2.5

make

cp src/redis-server ../redis/bin

cp src/redis-cli ../redis/bin

cp src/redis-trib.rb ../redis/bin

cp redis.conf ../redis/conf

touch /home/redis/redis/conf/cluster.conf

2.修改參數redis.conf，具體參數配置見後面附件

3.在其他機器上創建redis用戶

4.發送到其他機器上去

scp -r /home/redis/redis [email protected]:/home/redis/
5.登錄到各機器上，啟動redis

(1)修改cluster.conf配置

配置文件結構

redis.conf---

|---cluster.conf(master)

|---cluster.conf(slave1)

|---cluster.conf(slave2)

|---cluster.conf(slave3)

修改master,slave1,slave2,slave3節點中cluster.conf配置，在cluster.conf配置首行添加參數（各節點cluster.conf參數見附件）

include /home/redis/redis/conf/redis.conf

（2）啟動redis

cd /home/redis/redis/

./bin/redis-server ./conf/cluster.conf

1.3集群操作

1.集群創建

（1）添加redis server到cluster

1） 增加主節點

./bin/redis-trib.rb create master1，master2,master3

2）登錄redis客戶端

./bin/redis-cli -c -p 6379

3）查看master node id(類似這種：3eb099e326bc4c3d763223743d4dc90caa975cc8)

cluster nodes

4）添加從節點

./bin/redis-trib.rb add-node --salve -master-id nodeid /

slaveip:port ip:port(ip:port為任意一加入集群中的節點ip和port)

註意：安裝中可能遇到問題報：

/usr/bin/env: ruby: No such file or directory

則需要安裝ruby

yum install ruby

yum install rubygems

wget https://rubygems.global.ssl.fastly.net/gems/redis-3.2.1.gem

gem install -l ./redis-3.2.1.gem

(2)驗證集群搭建成功

./bin/redis-cli -c -p 6379

cluster info

查看cluster_state:ok則為成功

2.集群的節點增加

（1）master節點增加

1）啟動新增的節點

2）加入到集群中

./bin/redis-trib.rb add-node 新增節點ip:port 集群中已存在任意節點ip:prot

3）為新節點分配slot

./bin/redis-trib.rb reshard

顯示如下內容：

#根據提示選擇要遷移的slot數量

How many slots do you want to move (from 1 to 16384)? 500

#選擇要接受這些slot的node-id

What is the receiving node ID? f51e26b5d5ff74f85341f06f28f125b7254e61bf

#選擇slot來源:

#all表示從所有的master重新分配，

#或者數據要提取slot的master節點id,最後用done結束

Please enter all the source node IDs.

Type ‘all‘ to use all the nodes as source nodes for the hash slots.

Type ‘done‘ once you entered all the source nodes IDs.

Source node #1:all

#打印被移動的slot後，輸入yes開始移動slot以及對應的數據.

#Do you want to proceed with the proposed reshard plan (yes/no)? yes

#結束

（2）slave節點增加

./bin/redis-trib.rb add-node --salve -master-id nodeid /

slaveip:port ip:port(ip:port為任意一加入集群中的節點ip和port)

3.集群節點的重新負載

./bin/redis-trib.rb reshard 舊的masterip:port

#從該節點移動slot到其他master節點

How many slots do you want to move (from 1 to 16384)? 500

#接受slot的節點id

What is the receiving node ID? f51e26b5d5ff74f85341f06f28f125b7254e61bf

Please enter all the source node IDs.

Type ‘all‘ to use all the nodes as source nodes for the hash slots.

Type ‘done‘ once you entered all the source nodes IDs.

#輸入all則分配給所有的master,done則為指定的master

Source node #1:done

4.節點的刪除

（1）master節點的刪除

1）清空master上的slot

#把要刪除的master節點slot和數據遷移到隨意一臺master上

redis-trib.rb reshard 192.168.1.151:6379

#根據提示選擇要遷移的slot數量

How many slots do you want to move (from 1 to 16384)? 500(被刪除master的所有slot數量)

#選擇要接受這些slot的node-id(192.168.1.152:6379)

What is the receiving node ID? c4a31c852f81686f6ed8bcd6d1b13accdc947fd2

Please enter all the source node IDs.

Type ‘all‘ to use all the nodes as source nodes for the hash slots.

Type ‘done‘ once you entered all the source nodes IDs.

Source node #1:f51e26b5d5ff74f85341f06f28f125b7254e61bf(被刪除master的node-id)

Source node #2:done

#打印被移動的slot後，輸入yes開始移動slot以及對應的數據.

#Do you want to proceed with the proposed reshard plan (yes/no)? yes

2）刪除節點

./bin/redis-trib.rb del-node 192.168.1.151:6379 \

‘f51e26b5d5ff74f85341f06f28f125b7254e61bf‘

（2）slave節點的刪除

./bin/redis-trib.rb del-node 192.168.1.151:6380 \

’5d664f56fb2e7763bfca89754271378a0ac3b657’

4.client中關於cluster的命令

5.

2.redis的運維

實時監控命令

watch -n 1 -d "/home/redis/redis/bin/redis-cli -c -p 6379 info | grep -e "connected_clients" -e "blocked_clients" -e "used_memory_human" -e "used_memory_peak_human" -e "rejected_connections" -e "evicted_keys" -e "instantaneous""

監控參數：

#連接數

connected_clients:1

#阻塞連接數

blocked_clients:0

#使用內存

used_memory_human:799.66K

#使用內存峰值

used_memory_peak_human:852.35K

#每秒執行命令個數

instantaneous_ops_per_sec:0

#每秒讀字節數

instantaneous_input_kbps:0.01

#每秒寫字節數

instantaneous_output_kbps:1.23

#拒絕連接數

rejected_connections:0

#因內存大小限制，被驅逐的鍵個數

evicted_keys:0

附件：

redis.conf配置文件

主節點cluster.conf配置文件

從節點1 cluster.conf 配置文件

從節點2 cluster.conf配置文件

從節點3 cluster.conf 配置文件

redis集群搭建