redis持久化

今天博客主講redis持久化以及redis主從複製(讀寫分離)和哨兵理論+Docker下redis的主從配置實操,希望可以給大家帶來一些幫助。

redis持久化

Redis是一種高級key-value數據庫。它跟memcached類似,不過數據可以持久化,而且支持的數據類型很豐富。有字符串,鏈表,集合和有序集合。支持在服務器端計算集合的並,交和補集(difference)等,還支持多種排序功能。所以Redis也可以被看成是一個數據結構服務器。

Redis的所有數據都是保存在內存中,然後不定期的通過異步方式保存到磁盤上(這稱爲“半持久化模式”),append only file(aof)“全持久化模式”。

Redis的常見本地存儲方式

redis提供兩種方式進行持久化:
1.RDB持久化(原理是將Reids在內存中的數據庫記錄定時dump到磁盤上的RDB持久化).
2.AOF(append only file)持久化(原理是將Reids的操作日誌以追加的方式寫入文件)。

區別:
RDB持久化:是指在指定的時間間隔內(定時)將內存中的數據集快照dump寫入磁盤,實際操作過程是fork一個子進程,先將數據集寫入臨時文件,寫入成功後,再替換之前的文件,用二進制壓縮存儲。(定時存儲)
在這裏插入圖片描述

AOF持久化:以日誌的形式記錄服務器所處理的每一個寫、刪除操作,查詢操作不會記錄,以文本的方式記錄,可以打開文件看到詳細的操作記錄。
(修改,刪除,增加都會進行持久化,但是查詢不會)
在這裏插入圖片描述

優缺點:

RDB
優點:

1.一旦採用該方式,那麼你的整個Redis數據庫將只包含一個文件,這對於文件備份而言是非常完美的。比如,你可能打算每個小時歸檔一次最近24小時的數據,同時還要每天歸檔一次最近30天的數據。通過這樣的備份策略,一旦系統出現災難性故障,我們可以非常容易的進行恢復。

2.對於災難恢復而言,RDB是非常不錯的選擇。因爲我們可以非常輕鬆的將一個單獨的文件壓縮後再轉移到其它存儲介質上。

3.性能最大化。對於Redis的服務進程而言,在開始持久化時,它唯一需要做的只是fork出子進程,之後再由子進程完成這些持久化的工作,這樣就可以極大的避免服務進程執行IO操作了。

4.相比於AOF機制,如果數據集很大,RDB的啓動效率會更高,恢復大數據集時的速度比 AOF 的恢復速度要快。

(RDB對數據集大的操作有明顯的優勢,能夠性能最大化,效率很高,並且有利於恢復災難性故障後的數據)

缺點:
1.如果你想保證數據的“高可用性”,即最大限度的避免數據丟失,那麼RDB將不是一個很好的選擇。因爲系統一旦在定時持久化之前出現宕機(單點故障)現象,此前沒有來得及寫入磁盤的數據都將丟失。

2.由於RDB是通過fork子進程來協助完成數據持久化工作的,因此,如果當數據集較大時,可能會導致整個服務器停止服務幾百毫秒,甚至是1秒鐘。

(會丟失一些數據,不適合一些重要數據的存儲。例如,某些門戶網站在1秒鐘有一大批用戶註冊,這個數據丟失的話會造成很大的損失。)

AOF
優點:

1.該機制可以帶來更高的數據安全性,即數據持久性。Redis中提供了3種同步策略,即’每秒同步’、‘每修改同步’和’不同步’。事實上,每秒同步也是異步完成的,其效率也是非常高的,所差的是一旦系統出現宕機現象,那麼這一秒鐘之內修改的數據將會丟失。而每修改同步,我們可以將其視爲同步持久化,即每次發生的數據變化都會被立即記錄到磁盤中。可以預見,這種方式在效率上是最低的。至於無同步,無需多言,我想大家都能正確的理解它。

2.由於該機制對日誌文件的寫入操作採用的是append模式,因此在寫入過程中即使出現宕機現象,也不會破壞日誌文件中已經存在的內容。然而如果我們本次操作只是寫入了一半數據就出現了系統崩潰問題,不用擔心,在Redis下一次啓動之前,我們可以通過redis-check-aof工具來幫助我們解決數據一致性的問題。

3.如果日誌過大,Redis可以自動啓用rewrite機制。即Redis以append模式不斷的將修改數據寫入到老的磁盤文件中,同時Redis還會創建一個新的文件用於記錄此期間有哪些修改命令被執行。因此在進行rewrite切換時可以更好的保證數據安全性。

4.AOF包含一個格式清晰、易於理解的日誌文件用於記錄所有的修改操作。事實上,我們也可以通過該文件完成數據的重建。

(aof具有更高的數據安全性,能有效的解決數據一致性問題)
缺點:

1.對於相同數量的數據集而言,AOF文件通常要大於RDB文件。RDB 在恢復大數據集時的速度比 AOF 的恢復速度要快。

2.根據同步策略的不同,AOF在運行效率上往往會慢於RDB。總之,每秒同步策略的效率是比較高的,同步禁用策略的效率和RDB一樣高效。

(相對來說數據存儲aof的文件更大,運行效率也要慢於rdb)

兩者的使用,就是看系統是願意犧牲一些性能,換取更高的緩存一致性(aof),還是願意寫操作頻繁的時候,不啓用備份來換取更高的性能,待手動運行bgsave的時候,再做備份(rdb)。rdb這個就更有些 eventually consistent的意思了。

對比來說,memcached僅僅只能實現緩存,但是不能持久化。且只具有string類型。

常用配置
RDB持久化配置
Redis會將數據集的快照dump到dump.rdb文件中。此外,我們也可以通過配置文件來修改Redis服務器dump快照的頻率,在打開6379.conf文件之後,我們搜索save,可以看到下面的配置信息:

save 900 1 #在900秒(15分鐘)之後,如果至少有1個key發生變化,則dump內存快照。

save 300 10 #在300秒(5分鐘)之後,如果至少有10個key發生變化,則dump內存快照。

save 60 10000 #在60秒(1分鐘)之後,如果至少有10000個key發生變化,則dump內存快照。

AOF持久化配置
在Redis的配置文件中存在三種同步方式,它們分別是:

appendfsync always #每次有數據修改發生時都會寫入AOF文件。

appendfsync everysec #每秒鐘同步一次,該策略爲AOF的缺省策略。

appendfsync no #從不同步。高效但是數據不會被持久化。

發佈了41 篇原創文章 · 獲贊 136 · 訪問量 1萬+
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章