Redis學習筆記(八)——持久化
一、介紹
Redis的所有的數據都存在內存中,然後不定期的通過異步方式保存到磁盤上(這稱為"半持久化模式");也可以把每一次數據變化都寫入到一個append only file(aof)裏面(這稱為"全持久化模式")。
由於Redis的數據都是存放在內存中,如果沒有配置持久化,Redis重啟後數據就全丟失了,於是許亞萍開啟Redis的持久化功能,將數據保存到磁盤上,當Redis重啟後,可以從磁盤中恢復數據。Redis提供兩種方式進行持久化,一種是RDB持久化(原理是將Redis在內存中的數據記錄定時dump到磁盤上的RDB持久化;另一個中是AOF(append only file)持久化(原理是將Redis的操作日誌以追加的方式寫入文件)。
- 兩者的區別:
1、RDB持久化是指在指定的時間間隔內將內存中的數據快照寫入磁盤,實際操作過程是fork一個子進程,先將數據集寫入臨時文件,寫入成功後,在替換之前的文件,用二進制壓縮存儲。
2、AOF持久化日誌的形式記錄服務器所處理的每一個寫、刪除操作,查詢操作不回記錄,以文本的方式記錄,可以打開文件看到詳細的操作記錄。
- 兩者的優缺點:
RDB方式:
優點:
1、一旦采用該方式,那麽你的整個Redis數據庫將只包含一個文件,這對於文件備份而言是非常完美的。比如,你可能打算每個小時歸檔一次最近24小時的數據,同時還要每天歸檔一次最近30天的數據。通過這樣的備份策略,一旦系統出現災難性故障,我們可以非常簡單的進行恢復。
2、對於災難恢復而言,RDB是非常不錯的選擇。因為我們可以非常輕松的將一個單獨的文件壓縮後再轉移到其他存儲介質上。
3、性能最大優化;對於Redis的服務進程而言,在開始持久化時,它唯一需要做的只是fork出子進程,之後再由子進程完成這些持久化工作,這樣就可以極大的避免服務進程執行IO操作了。
4、相比於AOF機制,如果數據集很大,RDB的啟動效率會更高。
缺點:
1、如果你想保證數據的高可用性,即最大限度的避免數據丟失,那麽RDB將不是一個很好的選擇。因為系統一旦再定時持久化之前出現宕機現象,此前沒有來得及寫入磁盤的數據都將丟失。
2、由於RDB是通過fork子進程來協助完成數據持久化工作的,因此,如果數據集較大時,可能會導致整個服務器停止服務幾百毫秒,甚至幾秒鐘。
AOF方式:
優點:
1、該機制可以帶來更高的數據安全性,即數據持久性。Redis中提供了三種同步策略,即每秒同步、每修改同步和不同步。事實上,每秒同步也是異步完成的,其效率也非常高,所差的是一旦系統出現宕機現象,那麽這一秒鐘之內修改的數據將會丟失。而每修改同步,我們可以將其視為同步持久化,即每次發生的數據變化都立即記錄到磁盤中,可以預見,這種方式在效率上是最低的。至於無同步,就是數據不會進行持久化。
2、由於該機制對日誌文件的寫入操作采用的是append模式,因此到寫入過程中即使出現宕機現象,也不會破壞日誌文件已經存在的內容。然而如果我們本次操作只是寫入了一半數據就出現了系統崩潰問題,不用擔心,在Redis下一次啟動之前,我們可以通過redis-check-aof工具來幫助我們解決數數據一致性的問題。
3、如果日誌過大,Redis可以自動啟用rewirte機制。即Redis以append模式不斷的將修改數據寫入到老的磁盤文件中,同時Redis還會創建一個新的文件用於記錄此期間有哪些修改命令被執行。因此在進行rewirte切換時可以更好的保證數據安全性。
4、AOF包含一個格式清晰、易於理解的日誌文件用於記錄所有的修改操作。事實上,我們也可以通過該文件完成數據的重建。
缺點:
1、對於相同數量的數據集而言,AOF文件通常要大於RDB文件。RDB在恢復大數據集時的速度比AOF恢復速度要快。
2、根據同步策略的不同,AOF在運行效率上往往會慢於RDB。總之,每秒同步策略的效率是比較高的,同步禁用策略的效率和RDB一樣高效。
兩者的選擇標準,就是看系統是願意犧牲一些性能,換取更高的緩存一致性(AOF),還是願意寫操作頻率的時候,不啟用備份來換取更高的性能,待手動save的時候,再做備份(RDB)。
二、實現
1、RDB方式
1.1、配置redis.conf
在redis目錄下,打開redis.conf配置文件,命令:vi redis.conf
找到紅圈的配置部分
這裏的save 900 1 表示:每900秒內至少有一個key發生變化,就持久化;
save 300 10 表示:每300秒內至少有10個key發生變化,就持久化;
save 60 100 表示:每60秒內至少有100個key發生變化,就持久化;
再往下拉:
這裏有個dbfilename配置是保存持久化的文件名,默認是dump.rdb
再往下拉:
dir ./ 表示文件存儲路徑是當前路徑(你也可以選擇修改);
我們退出,查看redis目錄
當前路徑裏確實有dump.rdb這個文件。
1.2、RDB備份和恢復數據
假如我們遇到斷電、宕機等現象,我們需要恢復數據,下面來模擬下:
我們先重置下數據,把redis服務先關掉
刪除dump.rdb文件
啟動redis,進入客戶端
這時啟動,是沒有數據的
我們新增幾個key,然後shutdown save 保存退出
假如這個時候,我們重啟redis,這時候啟動過程會進行rdb check驗證,
然後加載redis目錄下的rdb文件,加載數據;我們驗證下:
數據加載出來了
這時我們把redis下的rdb文件剪切到其他地方去,然後再重啟試下
剪切文件
把rdb文件剪切後,發現數據不存在了
如果要恢復數據的話,我們需要把剛才剪切掉的rdb文件拷貝回redis目錄下即可
復制rdb文件
啟動服務,這時候數據就有了,這就是恢復過程
2、AOF方式
2.1、配置redis.conf
appendonly no:默認關閉AOF方式,我們修改成yes,就開啟
appendfilename "appendonly.aof":是默認的AOF文件名
再往下拉:
這裏是三種同步策略:
always:是只要發生修改,立即同步(推薦使用,安全性最高)
everysec:是每秒同步一次
no:是不同步
我們修改成always
然後保存退出。
啟動Redis,隨便加幾個key
退出來後,redis目錄下就多了一個appendonly.aof文件。
2.2、數據備份和恢復
我們先把原有數據的appendonly.aof文件剪切到別的目錄,啟動reids,又生成一個新的aof文件,但是查看數據的時候是空的
退出,把原AOF文件拷貝回來
啟動redis,這時數據已經恢復過來了
三、常用配置(上面也有講過)
1、RDB持久化配置
Redis會將數據集的快照dump到dump.rdb文件中。此外我們也可以通過配置文件修改Redis服務器dump快照的頻率,打開redis.conf文件之後,搜索save,可以看到下面的配置信息:
save 900 1 #在900秒(15分鐘)之後,如果至少有1個key發生變化,則dump內存快照。
save 300 10 #在300秒(5分鐘)之後,如果至少有10個key發生變化,則dump內存快照。
save 60 10000 #在60秒(1分鐘)之後,如果至少有10000個key發生變化,則dump內存快照。
2、AOF持久化配置
在Redis的配置文件(redis.conf)中存在三種同步方式,它們分別是:
appendfsync always #每次有數據修改發生時都會寫入AOF文件。
appendfsync everysec #每秒鐘同步一次,該策略為AOF的缺省策略。
appendfsync no #從不同步。高效但是數據不會被持久化。
Redis學習筆記(八)——持久化