Redis的初識以及win10環境下的安裝
目錄
Redis介紹
remote dictionary server(redis) 是一個由Salvatore Sanfilippo 寫的key-value儲存系統。
Redis是一個完全開源免費的,是使用ANSI C語言編寫、遵守BSD協議、支援網路、可基於記憶體亦可持久化的日誌型、高效能的key-value資料庫,並提供多種語言的API。通常被稱為資料結構伺服器,因為值(value)可以是 字串(String),雜湊(Map),列表(list),集合(sets)和有序集合(sorted sets)等型別。
Redis是有名的Nosql資料庫,一般Linux都會預設支援。但是在windows環境中,需要手動安裝設定才能有效使用。在Windows環境下的安裝下面會一一講解,我這裡學習也主要是以Windows為主,等涉及到Linux的時候自會補充。
Redis 與其它 key-value 快取產品有以下三個特點:
- Redis 支援資料持久化,可以將記憶體中的資料儲存到從盤中,重啟的時候可以再次載入進行使用。
- Redis 不僅僅支援簡單的 key-value 型別的資料。同時還提供list , set , zset , hash 等資料結構的儲存。
- Redis 支援資料的備份,即 master-slave模式資料備份。
Redis的優點
- 效能高 - Redis 能讀的速度是110000次/s,寫的速度是81000次/s。
- 豐富的資料型別 - Redis 支援二進位制案例的 String , Lists , Hashes , Sets及Ordered Sets資料型別操作。
- 原子 - Redis的所有操作都是原子性的,意思就是要麼成功執行,要麼失敗完全不執行。單個操作是原子性的。多個操作也支援事務,及原子性,通過MULTI 和 EXEC 指令包起來。
- 豐富的特性 - Redis 還支援publish/suscribe,通知,key 過期等等特性。
Redis 與其它key-value儲存有什麼不同
- Redis 有著更為複雜的資料結構,並且提供了對他們的原子性操作,這是一個不同於其它資料庫的進化路徑。Redis 的資料型別都是基於資料結構的同時對程式設計師透明,無需進行額外的抽象。
- Redis 執行在記憶體中,但是可以持久化到磁碟,所以在對不同資料集進行高速讀寫時需要權衡記憶體,因為資料量不能大於硬體記憶體。在記憶體資料庫方面的另一個優點是:相比在磁碟上相同的複雜的資料結構,在記憶體中操作起來非常簡單,這樣 Redis 可以做很多內部複雜性很強的事情。同時,在磁碟格式方面,他們是緊湊的以追加的方式產生的,因為他們並不需要進行隨機訪問。
Redis 的八大特性
- 速度快
Redis 使用C語言實現的;
Redis 的所有資料儲存在記憶體中。
- 持久化
Redis 的所有資料儲存在記憶體中,對資料的更新將非同步地儲存到磁碟上。
- 支援多種資料結構
Redis 支援五種資料結構:String , List , Set , Hash , Zset
- 支援多種程式語言
java , php , Python , Ruby , Lua , Node.js
- 功能豐富
除了支援物種資料結構之外,還支援事務、流水線、釋出/訂閱、訊息佇列等功能。
- 原始碼簡單
約23000行C語言原始碼。
- 主從複製
主伺服器(master)執行新增、修改、刪除,服從伺服器執行查詢。
- 高可用及分散式
Redis-Sentinel (v2.8)支援高可用
一臺伺服器掛掉會有另一臺伺服器立馬頂上,Redis-Sentine監聽所有的監聽Redis主從伺服器,一旦發現主伺服器掛掉了,他會從若干伺服器中選擇一臺新的機器作為master,其它從伺服器會成為這臺新master的從伺服器。
Redis-Cluster (v3.0)支援分散式
在一臺物理計算機上,把資料A放到資料庫D1,把資料B放到資料庫D2,把資料C放到資料庫D3屬於分散式,但由於資料庫的訪問連線池是有限的,所以這種分散式解決方案存在效能瓶頸;把資料A放到計算機C1的資料庫D1,把資料B放到計算機C1的資料庫D2,把資料C放到計算機C3的資料庫D3也屬於分散式,這種分散式解決方案擴充套件性好,如果系統增加了新業務X , X產生的資料Y可以放到計算機C4的資料庫D4中,理論上來說這種方式可以無限擴充套件,從而保證系統的效能最大化。存在瓶頸且價格較高的高效能單臺伺服器-->可無限擴充套件的分散式叢集
Redis 在window下安裝
託管在GitHub上的下載地址:https://github.com/MSOpenTech/redis/releases。
Redis 支援 32 位和 64 位。這個需要根據你係統平臺的實際情況選擇,這裡我下載 Redis-x64-3.2.100.zip壓縮包到 D 盤,解壓後,將資料夾重新命名為 redis。 Redis-x64-3.2.100.msi的安裝需要配置環境,其他操作也是一樣的,這裡我就選擇簡單一種。
下載後解壓到要安裝的檔案目錄下:
其中各個檔案的作用
檔名 | 簡要 |
redis-benchmark.exe | 基準測試 |
redis-check-aof.exe | aof |
redischeck-dump.exe | dump |
redis-cli.exe | 客戶端 |
redis-server.exe | 伺服器 |
redis.windows.conf | 配置檔案 |
開啟一個 cmd 視窗 使用 cd 命令切換目錄到 D:\xuexi\redis\Redis-x64-3.2.100 執行:
redis-server.exe redis.windows.conf
如果想方便的話,可以把 redis 的路徑加到系統的環境變數裡,這樣就省得再輸路徑了,後面的那個 redis.windows.conf 可以省略,如果省略,會啟用預設的。輸入之後,會顯示如下介面:
這時候另啟一個 cmd 視窗,原來的不要關閉,不然就無法訪問服務端了。
切換到 D:\xuexi\redis\Redis-x64-3.2.100 目錄下執行:
redis-cli.exe -h 127.0.0.1 -p 6379
設定鍵值對:
set myKey abc
取出鍵值對:
get myKey
此時第一個cmd的變化:
Redis 的配置
Redis 的配置檔案位於 Redis 安裝目錄下,檔名為 redis.windows.conf。
你可以通過 CONFIG 命令檢視或設定配置項。
語法
Redis CONFIG 命令格式如下:
redis 127.0.0.1:6379> CONFIG GET CONFIG_SETTING_NAME
使用*號獲取所有配置項:
例項:
Microsoft Windows [版本 10.0.17134.407]
(c) 2018 Microsoft Corporation。保留所有權利。
C:\Windows\system32>cd D:\xuexi\redis\Redis-x64-3.2.100
C:\Windows\system32>D:
D:\xuexi\redis\Redis-x64-3.2.100>redis-cli.exe -h 127.0.0.1 -p 6379
127.0.0.1:6379> set mykey abc
OK
127.0.0.1:6379> get mykey
"abc"
127.0.0.1:6379> CONFIG GET *
1) "dbfilename"
2) "dump.rdb"
3) "requirepass"
4) ""
5) "masterauth"
6) ""
7) "unixsocket"
8) ""
9) "logfile"
10) ""
11) "pidfile"
12) ""
13) "maxmemory"
14) "0"
15) "maxmemory-samples"
16) "5"
17) "timeout"
18) "0"
19) "auto-aof-rewrite-percentage"
20) "100"
21) "auto-aof-rewrite-min-size"
22) "67108864"
23) "hash-max-ziplist-entries"
24) "512"
25) "hash-max-ziplist-value"
26) "64"
27) "list-max-ziplist-size"
28) "-2"
29) "list-compress-depth"
30) "0"
31) "set-max-intset-entries"
32) "512"
33) "zset-max-ziplist-entries"
34) "128"
35) "zset-max-ziplist-value"
36) "64"
37) "hll-sparse-max-bytes"
38) "3000"
39) "lua-time-limit"
40) "5000"
41) "slowlog-log-slower-than"
42) "10000"
43) "latency-monitor-threshold"
44) "0"
45) "slowlog-max-len"
46) "128"
47) "port"
48) "6379"
49) "tcp-backlog"
50) "511"
51) "databases"
52) "16"
53) "repl-ping-slave-period"
54) "10"
55) "repl-timeout"
56) "60"
57) "repl-backlog-size"
58) "1048576"
59) "repl-backlog-ttl"
60) "3600"
61) "maxclients"
62) "10000"
63) "watchdog-period"
64) "0"
65) "slave-priority"
66) "100"
67) "min-slaves-to-write"
68) "0"
69) "min-slaves-max-lag"
70) "10"
71) "hz"
72) "10"
73) "cluster-node-timeout"
74) "15000"
75) "cluster-migration-barrier"
76) "1"
77) "cluster-slave-validity-factor"
78) "10"
79) "repl-diskless-sync-delay"
80) "5"
81) "tcp-keepalive"
82) "0"
83) "cluster-require-full-coverage"
84) "yes"
85) "no-appendfsync-on-rewrite"
86) "no"
87) "slave-serve-stale-data"
88) "yes"
89) "slave-read-only"
90) "yes"
91) "stop-writes-on-bgsave-error"
92) "yes"
93) "daemonize"
94) "no"
95) "rdbcompression"
96) "yes"
97) "rdbchecksum"
98) "yes"
99) "activerehashing"
100) "yes"
101) "protected-mode"
102) "yes"
103) "repl-disable-tcp-nodelay"
104) "no"
105) "repl-diskless-sync"
106) "no"
107) "aof-rewrite-incremental-fsync"
108) "yes"
109) "aof-load-truncated"
110) "yes"
111) "maxmemory-policy"
112) "noeviction"
113) "loglevel"
114) "notice"
115) "supervised"
116) "no"
117) "appendfsync"
118) "everysec"
119) "appendonly"
120) "no"
121) "dir"
122) "D:\\xuexi\\redis\\Redis-x64-3.2.100"
123) "save"
124) "jd 900 jd 300 jd 60"
125) "client-output-buffer-limit"
126) "normal 0 0 0 slave 268435456 67108864 60 pubsub 33554432 8388608 60"
127) "unixsocketperm"
128) "0"
129) "slaveof"
130) ""
131) "notify-keyspace-events"
132) ""
133) "bind"
134) "127.0.0.1"
127.0.0.1:6379>
編輯配置
你可以通過修改 redis.conf 檔案或使用 CONFIG set 命令來修改配置。
語法
CONFIG SET 命令基本語法:
redis 127.0.0.1:6379> CONFIG SET CONFIG_SETTING_NAME NEW_CONFIG_VALUE
Redis 配置檔案引數說明
redis.windows.conf 配置項說明如下:
1. Redis預設不是以守護程序的方式執行,可以通過該配置項修改,使用yes啟用守護程序
daemonize no
2. 當Redis以守護程序方式執行時,Redis預設會把pid寫入/var/run/redis.pid檔案,可以通過pidfile指定
pidfile /var/run/redis.pid
3. 指定Redis監聽埠,預設埠為6379,作者在自己的一篇博文中解釋了為什麼選用6379作為預設埠,因為6379在手機按鍵上MERZ對應的號碼,而MERZ取自義大利歌女Alessia Merz的名字
port 6379
4. 繫結的主機地址
bind 127.0.0.1
5.當 客戶端閒置多長時間後關閉連線,如果指定為0,表示關閉該功能
timeout 300
6. 指定日誌記錄級別,Redis總共支援四個級別:debug、verbose、notice、warning,預設為verbose
loglevel verbose
7. 日誌記錄方式,預設為標準輸出,如果配置Redis為守護程序方式執行,而這裡又配置為日誌記錄方式為標準輸出,則日誌將會發送給/dev/null
logfile stdout
8. 設定資料庫的數量,預設資料庫為0,可以使用SELECT <dbid>命令在連線上指定資料庫id
databases 16
9. 指定在多長時間內,有多少次更新操作,就將資料同步到資料檔案,可以多個條件配合
save <seconds> <changes>
Redis預設配置檔案中提供了三個條件:
save 900 1
save 300 10
save 60 10000
分別表示900秒(15分鐘)內有1個更改,300秒(5分鐘)內有10個更改以及60秒內有10000個更改。
10. 指定儲存至本地資料庫時是否壓縮資料,預設為yes,Redis採用LZF壓縮,如果為了節省CPU時間,可以關閉該選項,但會導致資料庫檔案變的巨大
rdbcompression yes
11. 指定本地資料庫檔名,預設值為dump.rdb
dbfilename dump.rdb
12. 指定本地資料庫存放目錄
dir ./
13. 設定當本機為slav服務時,設定master服務的IP地址及埠,在Redis啟動時,它會自動從master進行資料同步
slaveof <masterip> <masterport>
14. 當master服務設定了密碼保護時,slav服務連線master的密碼
masterauth <master-password>
15. 設定Redis連線密碼,如果配置了連線密碼,客戶端在連線Redis時需要通過AUTH <password>命令提供密碼,預設關閉
requirepass foobared
16. 設定同一時間最大客戶端連線數,預設無限制,Redis可以同時開啟的客戶端連線數為Redis程序可以開啟的最大檔案描述符數,如果設定 maxclients 0,表示不作限制。當客戶端連線數到達限制時,Redis會關閉新的連線並向客戶端返回max number of clients reached錯誤資訊
maxclients 128
17. 指定Redis最大記憶體限制,Redis在啟動時會把資料載入到記憶體中,達到最大記憶體後,Redis會先嚐試清除已到期或即將到期的Key,當此方法處理 後,仍然到達最大記憶體設定,將無法再進行寫入操作,但仍然可以進行讀取操作。Redis新的vm機制,會把Key存放記憶體,Value會存放在swap區
maxmemory <bytes>
18. 指定是否在每次更新操作後進行日誌記錄,Redis在預設情況下是非同步的把資料寫入磁碟,如果不開啟,可能會在斷電時導致一段時間內的資料丟失。因為 redis本身同步資料檔案是按上面save條件來同步的,所以有的資料會在一段時間內只存在於記憶體中。預設為no
appendonly no
19. 指定更新日誌檔名,預設為appendonly.aof
appendfilename appendonly.aof
20. 指定更新日誌條件,共有3個可選值:
no:表示等作業系統進行資料快取同步到磁碟(快)
always:表示每次更新操作後手動呼叫fsync()將資料寫到磁碟(慢,安全)
everysec:表示每秒同步一次(折中,預設值)
appendfsync everysec
21. 指定是否啟用虛擬記憶體機制,預設值為no,簡單的介紹一下,VM機制將資料分頁存放,由Redis將訪問量較少的頁即冷資料swap到磁碟上,訪問多的頁面由磁碟自動換出到記憶體中(在後面的文章我會仔細分析Redis的VM機制)
vm-enabled no
22. 虛擬記憶體檔案路徑,預設值為/tmp/redis.swap,不可多個Redis例項共享
vm-swap-file /tmp/redis.swap
23. 將所有大於vm-max-memory的資料存入虛擬記憶體,無論vm-max-memory設定多小,所有索引資料都是記憶體儲存的(Redis的索引資料 就是keys),也就是說,當vm-max-memory設定為0的時候,其實是所有value都存在於磁碟。預設值為0
vm-max-memory 0
24. Redis swap檔案分成了很多的page,一個物件可以儲存在多個page上面,但一個page上不能被多個物件共享,vm-page-size是要根據儲存的 資料大小來設定的,作者建議如果儲存很多小物件,page大小最好設定為32或者64bytes;如果儲存很大大物件,則可以使用更大的page,如果不 確定,就使用預設值
vm-page-size 32
25. 設定swap檔案中的page數量,由於頁表(一種表示頁面空閒或使用的bitmap)是在放在記憶體中的,,在磁碟上每8個pages將消耗1byte的記憶體。
vm-pages 134217728
26. 設定訪問swap檔案的執行緒數,最好不要超過機器的核數,如果設定為0,那麼所有對swap檔案的操作都是序列的,可能會造成比較長時間的延遲。預設值為4
vm-max-threads 4
27. 設定在向客戶端應答時,是否把較小的包合併為一個包傳送,預設為開啟
glueoutputbuf yes
28. 指定在超過一定的數量或者最大的元素超過某一臨界值時,採用一種特殊的雜湊演算法
hash-max-zipmap-entries 64
hash-max-zipmap-value 512
29. 指定是否啟用重置雜湊,預設為開啟(後面在介紹Redis的雜湊演算法時具體介紹)
activerehashing yes
30. 指定包含其它的配置檔案,可以在同一主機上多個Redis例項之間使用同一份配置檔案,而同時各個例項又擁有自己的特定配置檔案
include /path/to/local.conf
參考資料
http://www.runoob.com/redis/redis-conf.html
https://www.cnblogs.com/zxtceq/p/7676911.html
https://www.cnblogs.com/happyday56/p/3916388.html
https://www.cnblogs.com/756623607-zhang/p/6859540.html
https://www.cnblogs.com/springlight/p/6288902.html