1. 程式人生 > >redis安裝與調試

redis安裝與調試

details 數量 acc dir window 關閉連接 pkill 一個 rdb

一、Redis與memache的區別 和Memcache一樣,Redis數據都是緩存在計算機內存中,不同的是,Memcache只能將數據緩存到內存中,無法自動定期寫入硬盤,這就表示,一斷電或重啟,內存清空,數據丟失。所以Memcache的應用場景適用於緩存無需持久化的數據。而Redis不同的是它會周期性的把更新的數據寫入磁盤或者把修改操作寫入追加的記錄文件,實現數據的持久化。 二、Redis的安裝 1、首先上官網下載Redis 壓縮包, 註意,偶數表示穩定版 http://download.redis.io/releases/redis-4.0.11.tar.gz 2、通過遠程管理工具,將壓縮包拷貝到Linux服務器中,執行解壓操作
tar zxvf redis-4.0.11.tar.gz -C /usr/local/
3、建立一個redis目錄的軟連接,指向redis-4.0.11。
# ln -sv redis-4.0.6/ redis
建立了一個redis目錄的軟鏈接,這 樣做是為了不把redis目錄固定在指定版本上,有利於Redis未來版本升級, 算是安裝軟件的一種好習慣。 4、進入redis目錄 cd redis 5、 yum list installed | grep gcc 查看是否安裝 yum install gcc 由於redis是由C編寫的,要編譯得先安裝gcc 執行make對解壓後的文件進行編譯(編譯之前確保操作系統已經安裝gcc)。
make redis安裝-致命錯誤:jemalloc/jemalloc.h:沒有那個文件或目錄 執行命令:make MALLOC=libc

註意:Redis並沒有自己實現內存池,沒有在標準的系統內存分配器上再加上自己的東西。

redis-2.4以上自帶jemalloc,你不需要加任何參數,通過zmalloc.c源碼中我們可以看到,Redis在編譯時,會先判斷是否使用tcmalloc,如果是,會用tcmalloc對應的函數替換掉標準的libc中的函數實現。其次會判斷jemalloc是否使得,最後如果都沒有使用才會用標準的libc中的內存管理函數。所以用tcmalloc優化請謹慎使用,這兩著分配器碎片率相差不大,建議用自帶jemalloc。

6、安裝。

編譯完成之後,可以看到解壓文件redis中會有對應的src、conf等文件夾,這和windows下安裝解壓的文件一樣,大部分安裝包都會有對應的類文件、配置文件和一些命令文件。 編譯成功後,進入src文件夾,執行make install進行Redis安裝 cd /use/local/redis/src make install PREFIX=/usr/local/redis make install

make命令執行完成後,會在src目錄下生成5個可執行文件,分別是redis-server、redis-cli、redis-benchmark、redis-check-aof、redis-check-dump,它們的作用如下:
redis-server:Redis服務器的daemon啟動程序
redis-cli:Redis命令行操作工具。當然,你也可以用telnet根據其純文本協議來操作
redis-benchmark:Redis性能測試工具,測試Redis在你的系統及你的配置下的讀寫性能
redis-check-aof:更新日誌檢查

redis-check-dump:用於本地數據庫檢查

為什麽沒用標準的Linux安裝三板斧呢?官方維基是這樣說的:Redis can run just fine without a configuration file (when executed without a config file a standard configuration is used). With the default configuration Redis will log to the standard output so you can check what happens. Later, you can change the default settings.

也可以make install,這樣就是把可運行文件復制到/usr/local/bin裏而已。

三、Redis的部署 1、首先為了方便管理,將Redis文件中的conf配置文件和常用命令移動到統一文件中

a)創建bin和etc文件夾

代碼如下:

mkdir -p /usr/local/redis/bin
mkdir -p /usr/local/redis/ect
將Redis的相關運行文件放到/usr/local/bin/下,這樣就可以在任意目錄下執行Redis的命令。例如安裝後,可以在任何目錄執行redis-cli–v查看Redis的版本。

b)執行Linux文件移動命令:

復制代碼代碼如下:

[root@CentOS6 redis]# mv redis.conf etc/
[root@CentOS6 redis]# cd src/
[root@CentOS6 src]# mv mkreleasehdr.sh redis-benchmark redis-check-aof redis-cli redis-server /usr/local/redis/bin

註意:移動是為了防止運行時運行到默認配置 所以建議保存一個配置信息

2、後臺啟動redis服務

a) 切換到/usr/local/redis/etc目錄,編輯redis.conf文件,將daemonize屬性改為yes(表明需要在後臺運行)

#vim redis.conf

b)切換到/usr/local/redis/bin目錄下執行Redis-server 命令,使用/usr/local/redis/etc/redis.conf 配置文件來啟動Redis 服務

[root@CentOS6 redis]# cd bin/
[root@CentOS6 bin]# ls
mkreleasehdr.sh  redis-benchmark  redis-check-aof  redis-cli  redis-server
[root@CentOS6 bin]# ./redis-server /usr/local/redis/etc/redis.conf

技術分享圖片

查看redis進程#ps aux |grep redis

3、服務端啟動成功後,執行redis-cli啟動Redis 客戶端,查看端口號,默認是6379。

技術分享圖片

6.將redis加入到開機啟動

  vi /etc/rc.local //在裏面添加內容:/usr/local/redis/bin/redis-server /usr/local/redis/etc/redis.conf (意思就是開機調用這段開啟redis的命令)

4、[待測]編輯服務啟動腳本

在Redis源代碼的utils目錄下有一個 redis_init_script 初始化啟動腳本。

# cd /usr/local/redis/utils

# cp redis_init_script /etc/init.d/redis

# vi /etc/init.d/redis

技術分享圖片
vim /etc/init.d/redis

#!/bin/sh
#
# redis        Startup script for Redis Server
#
# chkconfig: - 80 12
# description: Redis is an open source, advanced key-value store.
#
# processname: redis-server
# config: /usr/local/redis/etc/redis.conf
# pidfile: /var/run/redis.pid
source /etc/init.d/functions
BIN="/usr/local/redis/bin"
CONFIG="/usr/local/redis/etc/redis.conf"
PIDFILE="/var/run/redis.pid"
### Read configuration
[ -r "$SYSCONFIG" ] && source "$SYSCONFIG"
RETVAL=0
prog="redis-server"
desc="Redis Server"
start() {
        if [ -e $PIDFILE ];then
             echo "$desc already running...."
             exit 1
        fi
        echo -n $"Starting $desc: "
        daemon $BIN/$prog $CONFIG
        RETVAL=$?
        echo
        [ $RETVAL -eq 0 ] && touch /var/lock/subsys/$prog
        return $RETVAL
}
stop() {
        echo -n $"Stop $desc: "
        killproc $prog
        RETVAL=$?
        echo
        [ $RETVAL -eq 0 ] && rm -f /var/lock/subsys/$prog $PIDFILE
        return $RETVAL
}
restart() {
        stop
        start
}
case "$1" in
  start)
        start
        ;;
  stop)
        stop
        ;;
  restart)
        restart
        ;;
  condrestart)
        [ -e /var/lock/subsys/$prog ] && restart
        RETVAL=$?
        ;;
  status)
        status $prog
        RETVAL=$?
        ;;
   *)
        echo $"Usage: $0 {start|stop|restart|condrestart|status}"
        RETVAL=1
esac
exit $RETVAL

 

chmod +x /etc/init.d/redis

service redis start
service redis stop

chkconfig --add redis
技術分享圖片

5、[待測]設置環境變量,並使之生效

技術分享圖片
vim /etc/profile.d/redis.sh

export REDIS_HOME=/usr/local/redis
export PATH=$PATH:$REDIS_HOME/bin

#source /etc/profile.d/redis.sh
技術分享圖片

6、[待測]配置下面的內核參數,否則Redis腳本在重啟或停止redis時,將會報錯,並且不能自動在停止服務前同步數據到磁盤上/etc/sysctl.conf加上

#vim /etc/sysctl.conf

vm.overcommit_memory = 1 

#sysctl -p 

四、總結Redis 操作常用命令

Redis-server /usr..../redis.conf 啟動redis服務,並指定配置文件
Redis-cli 啟動redis 客戶端
Pkill redis-server 關閉redis服務
Redis-cli shutdown 關閉redis客戶端
Netstat -tunpl|grep 6379 查看redis 默認端口號6379占用情況

redis-server /usr/local/redis/etc/redis.conf //啟動redis

  pkill redis //停止redis

關閉redis 命令ps -ef|grep redis

kill -9 pid

  卸載redis:

    rm -rf /usr/local/redis //刪除安裝目錄

    rm -rf /usr/bin/redis-* //刪除所有redis相關命令腳本

    rm -rf /root/download/redis-4.0.4 //刪除redis解壓文件夾

五、 Redis的配置

1. Redis默認不是以守護進程的方式運行,可以通過該配置項修改,使用yes啟用守護進程

daemonize no

2. 當Redis以守護進程方式運行時,Redis默認會把pid寫入/var/run/redis.pid文件,可以通過pidfile指定

pidfile /var/run/redis.pid

3. 指定Redis監聽端口,默認端口為6379,為什麽選用6379作為默認端口,因為6379在手機按鍵上MERZ對應的號碼,而MERZ取自意大利歌女Alessia Merz的名字

port 6379

4. 綁定的主機地址

bind 127.0.0.1

5.當客戶端閑置多長時間後關閉連接,如果指定為0,表示關閉該功能

timeout 300

6. 指定日誌記錄級別,Redis總共支持四個級別:debug、verbose、notice、warning,默認為verbose

loglevel verbose

7. 日誌記錄方式,默認為標準輸出,如果配置Redis為守護進程方式運行,而這裏又配置為日誌記錄方式為標準輸出,則日誌將會發送給/dev/null

logfile stdout

8. 設置數據庫的數量,默認數據庫為0,可以使用SELECT <dbid>命令在連接上指定數據庫id

databases 16

9. 指定在多長時間內,有多少次更新操作,就將數據同步到數據文件,可以多個條件配合

save <seconds> <changes>

Redis默認配置文件中提供了三個條件:

save 900 1

save 300 10

save 60 10000

分別表示900秒(15分鐘)內有1個更改,300秒(5分鐘)內有10個更改以及60秒內有10000個更改。

下面的配置二選一

###### SNAPSHOTTING ######內存快照方式:

默認的內存快照策略是,

在900秒(15分鐘)內,至少有1次數據變更;

或者300秒內,有至少10次數據變更;

或者60秒內,有至少1000次數據變更;時間+數據變更次數,共同影響內存快照的出現。

###### APPEND ONLY MODE ###### AOF方式

appendfsync everysec 每秒同步。這裏可以註釋掉,打開下面的選項appendfsync no

10. 指定存儲至本地數據庫時是否壓縮數據,默認為yes,Redis采用LZF壓縮,如果為了節省CPU時間,可以關閉該選項,但會導致數據庫文件變的巨大

rdbcompression yes

11. 指定本地數據庫文件名,默認值為dump.rdb

dbfilename dump.rdb

12. 指定本地數據庫存放目錄

dir ./

13. 設置當本機為slav服務時,設置master服務的IP地址及端口,在Redis啟動時,它會自動從master進行數據同步

slaveof <masterip> <masterport>

14. 當master服務設置了密碼保護時,slav服務連接master的密碼

masterauth <master-password>

15. 設置Redis連接密碼,如果配置了連接密碼,客戶端在連接Redis時需要通過AUTH <password>命令提供密碼,默認關閉

requirepass foobared

16. 設置同一時間最大客戶端連接數,默認無限制,Redis可以同時打開的客戶端連接數為Redis進程可以打開的最大文件描述符數,如果設置 maxclients 0,表示不作限制。當客戶端連接數到達限制時,Redis會關閉新的連接並向客戶端返回max number of clients reached錯誤信息

maxclients 128

17. 指定Redis最大內存限制,Redis在啟動時會把數據加載到內存中,達到最大內存後,Redis會先嘗試清除已到期或即將到期的Key,當此方法處理 後,仍然到達最大內存設置,將無法再進行寫入操作,但仍然可以進行讀取操作。Redis新的vm機制,會把Key存放內存,Value會存放在swap區

maxmemory <bytes>

18. Redis有兩種存儲方式,默認是snapshot方式,實現方法是定時將內存的快照(snapshot)持久化到硬盤,這種方法缺點是持久化之後如果出現crash則會丟失一段數據。因此在完美主義者的推動下作者增加了aof方式。aof即append only mode,在寫入內存數據的同時將操作命令保存到日誌文件。

指定是否在每次更新操作後進行日誌記錄,Redis在默認情況下是異步的把數據寫入磁盤,如果不開啟,可能會在斷電時導致一段時間內的數據丟失。因為 redis本身同步數據文件是按上面save條件來同步的,所以有的數據會在一段時間內只存在於內存中。默認為no

appendonly no

19. 指定更新日誌文件名,默認為appendonly.aof

appendfilename appendonly.aof

20. 指定更新日誌條件,共有3個可選值:
no:表示等操作系統進行數據緩存同步到磁盤(快)
always:表示每次更新操作後手動調用fsync()將數據寫到磁盤(慢,安全)
everysec:表示每秒同步一次(折衷,默認值)

appendfsync everysec

21. 指定是否啟用虛擬內存機制,默認值為no,簡單的介紹一下,VM機制將數據分頁存放,由Redis將訪問量較少的頁即冷數據swap到磁盤上,訪問多的頁面由磁盤自動換出到內存中(在後面的文章我會仔細分析Redis的VM機制)

vm-enabled no

22. 虛擬內存文件路徑,默認值為/tmp/redis.swap,不可多個Redis實例共享

vm-swap-file /tmp/redis.swap

23. 將所有大於vm-max-memory的數據存入虛擬內存,無論vm-max-memory設置多小,所有索引數據都是內存存儲的(Redis的索引數據 就是keys),也就是說,當vm-max-memory設置為0的時候,其實是所有value都存在於磁盤。默認值為0

vm-max-memory 0

24. Redis swap文件分成了很多的page,一個對象可以保存在多個page上面,但一個page上不能被多個對象共享,vm-page-size是要根據存儲的 數據大小來設定的,建議如果存儲很多小對象,page大小最好設置為32或者64bytes;如果存儲很大大對象,則可以使用更大的page,如果不確定,就使用默認值

vm-page-size 32

25. 設置swap文件中的page數量,由於頁表(一種表示頁面空閑或使用的bitmap)是在放在內存中的,,在磁盤上每8個pages將消耗1byte的內存。

vm-pages 134217728

26. 設置訪問swap文件的線程數,最好不要超過機器的核數,如果設置為0,那麽所有對swap文件的操作都是串行的,可能會造成比較長時間的延遲。默認值為4

vm-max-threads 4

27. 設置在向客戶端應答時,是否把較小的包合並為一個包發送,默認為開啟

glueoutputbuf yes

28. 指定在超過一定的數量或者最大的元素超過某一臨界值時,采用一種特殊的哈希算法

hash-max-zipmap-entries 64

hash-max-zipmap-value 512

29. 指定是否激活重置哈希,默認為開啟(後面在介紹Redis的哈希算法時具體介紹)

activerehashing yes

30. 指定包含其它的配置文件,可以在同一主機上多個Redis實例之間使用同一份配置文件,而同時各個實例又擁有自己的特定配置文件

include /path/to/local.conf

六、設置redis 外網訪問

修改配置文件redis.conf

  • 將 bind 127.0.0.1 註釋掉

  • 設置 protected-mode 為no

  • 設置requirepass xxx 密碼

  • 啟動redis

  • cd bin   進入開始創建的bin 文件下
     ./redis-server  ./redis.conf   啟動命令
     ./redis-cli -h 123.xxx.xx.xxx(訪問的ip地址) -p 6379 -a root(密碼)
     輸入 ping
     返回 PONG

驗證外網是否能鏈接,成功鏈接後如下圖 windows 客戶端下載 redisclient
  1. 修改dir ./為絕對路徑,默認的話redis-server啟動時會在當前目錄生成或讀取dump.rdb,所以如果在根目錄下執行redis-server /etc/redis.conf的話,讀取的是根目錄下的dump.rdb,為了使redis-server可在任意目錄下執行,所以此處將dir改為絕對路徑 dir /usr/local/redis
  2. 修改appendonly為yes 指定是否在每次更新操作後進行日誌記錄,Redis在默認情況下是異步的把數據寫入磁盤,如果不開啟,可能會在斷電時導致一段時間內的數據丟失。因為redis本身同步數據文件是按上面save條件來同步,所以有的數據會在一段時間內只存在於內存中。默認為no appendonly yes
  3. 將redis添加到自啟動中 echo "/usr/local/bin/redis-server /etc/redis.conf" >> /etc/rc.d/rc.local 啟動redis redis-server /etc/redis.conf 查看redis是否己啟動 ps -ef | grep redis

七、[待測]開放redis端口

  1. #關閉防火墻 service iptables stop
  2. vi /etc/sysconfig/iptables #添加 -A INPUT -m state --state NEW -m tcp -p tcp --dport 6379 -j ACCEPT #重啟防火墻 service iptables restart

八、[待測]安裝phpredis擴展

  1. tar -zxvf owlient-phpredis-2.1.1-1-g90ecd17.tar.gz
  2. cd owlient-phpredis-90ecd17
  3. /usr/local/php/bin/phpize
  4. ./configure --with-php-config=/usr/local/php/bin/php-config
  5. make
  6. make install
  7. #執行完make install後會生成
  8. #Installing shared extensions: /usr/local/php//lib/php/extensions/no-debug-non-zts-20060613/
  9. #修改php.ini
  10. vi /usr/local/php/etc/php.ini
  11. #查找extension_dir,修改為
  12. extension_dir = "/usr/local/php/lib/php/extensions/no-debug-non-zts-20060613/"
  13. #添加redis
  14. extension = redis.so
  15. #重啟apache
  16. service httpd restart

九、基準測試

第一先用啟動命令啟動redis,然後在任意目錄使用命令:

# redis-benchmark -h localhost -p 6379 -c 100 -n 100000

模擬100個並發連接,100000個請求,檢測host為localhost 端口為6379的redis服務器性能

------------待修改完善--------------

redis安裝與調試