redis概述,特點,與Memached的不同,生產環境主從配置,redis配置文件解析

Redis概述:

    是一個基於Key-Value的持久化數據庫存儲,支持豐富的數據類型,用C語言編寫,可基於內存又可持久化的日誌型、Key-Value數據庫,並提供多種語言的API


Redis特點

    1、Key-Value健值類型存儲

    2、支持數據可靠存儲及落地

    3、單進程單線程高性能服務器

    4、單機qps(每秒查詢率)可以達到10w

    5、適合小數據量高速讀寫訪問


Redis跟Memached的不同

    1、Redis可以持久化數據存儲

    2、性能高很,Redis能支持超過10W每秒的讀寫頻率

    3、豐富的數據類型,Redis支持二進制的String、Lists、Hashes、Sets及sorted Sets(有序集合)等數據類型操作

    4、Redis的所有操作都是原子性的

    5、支持發佈訂閱功能

    6、支持異步主從複製



【主從生產環境配置文件】


Master配置文件

daemonize yes 

pidfile /ryzc/redis/redis.pid 

port 30000

timeout 0       

databases 16 

maxclients 10000 

dir /ryzc/redis/ 

syslog-enabled no 

slowlog-log-slower-than -1 

appendonly no

auto-aof-rewrite-percentage 0

requirepass kik4asfljweiojlsfjlasjfc56uhj75Ojdw2fdf



Slave配置文件

daemonize yes

pidfile /ryzc/redis/redis.pid

port 90022

timeout 0

databases 16

maxclients 10000

dir /ryzc/redis/

syslog-enabled no

slowlog-log-slower-than -1

appendonly no

auto-aof-rewrite-percentage 0

requirepass kik4asfljweiojlsfjlasjfc56uhj75Ojdw2fdf

masterauth kik4asfljweiojlsfjlasjfc56uhj75Ojdw2fdf

slaveof 127.0.0.1 30000



【配置文件解析】

1. Redis默認不是以守護進程的方式運行,可以通過該配置項修改,使用yes啓用守護進程

    daemonize no

2. 當Redis以守護進程方式運行時,Redis默認會把pid寫入/var/run/redis.pid文件,可以通過pidfile指定

    pidfile /var/run/redis.pid

3. 指定Redis監聽端口,默認端口爲6379,作者在自己的一篇博文中解釋了爲什麼選用6379作爲默認端口,因爲6379在手機按鍵上MERZ對應的號碼,而MERZ取自意大利歌女Alessia Merz的名字

    port 6379

4. 綁定的主機地址

    bind 127.0.0.1

5.當 客戶端閒置多長時間後關閉連接,如果指定爲0,表示關閉該功能

    timeout 300

6. 指定日誌記錄級別,Redis總共支持四個級別:debug、verbose、notice、warning,默認爲verbose

    loglevel verbose

     debug:很詳細的信息,適合開發和測試

     verbose:包含許多不太有用的信息,但比debug要清爽一些

     notice:比較適合生產環境

     warning:警告信息


7. 日誌記錄方式,默認爲標準輸出,如果配置Redis爲守護進程方式運行,而這裏又配置爲日誌記錄方式爲標準輸出,則日誌將會發送給/dev/null

    logfile stdout

8. 設置數據庫的數量,默認數據庫爲0,可以使用SELECT <dbid>命令在連接上指定數據庫id

    databases 16

9. 指定在多長時間內,有多少次更新操作,就將數據同步到數據文件,可以多個條件配合

    save <seconds> <changes>

    Redis默認配置文件中提供了三個條件:

    save 900 1

    save 300 10

    save 60 10000

    分別表示900秒(15分鐘)內有1個更改,300秒(5分鐘)內有10個更改以及60秒內有10000個更改。

#   過了900秒並且有1個key發生了改變 就會觸發save動作

#   過了300秒並且有10個key發生了改變 就會觸發save動作

#   過了60秒並且至少有10000個key發生了改變 也會觸發save動作


10. 指定存儲至本地數據庫時是否壓縮數據,默認爲yes,Redis採用LZF壓縮,如果爲了節省CPU時間,可以關閉該選項,但會導致數據庫文件變的巨大

    rdbcompression yes

11. 指定本地數據庫文件名,默認值爲dump.rdb,數據會被持久化到這個目錄下的‘dbfilename’指定的文件中。

    dbfilename dump.rdb

12. 指定本地數據庫存放目錄,這裏指定的必須是目錄而不能是文件。

    dir ./

13. 設置當本機爲slav服務時,設置master服務的IP地址及端口,在Redis啓動時,它會自動從master進行數據同步

    slaveof <masterip> <masterport>

14. 當master服務設置了密碼保護時,slav服務連接master的密碼

    masterauth <master-password>

15. 設置Redis連接密碼,如果配置了連接密碼,客戶端在連接Redis時需要通過AUTH <password>命令提供密碼,默認關閉

    requirepass foobared

16. 設置同一時間最大客戶端連接數,默認無限制,Redis可以同時打開的客戶端連接數爲Redis進程可以打開的最大文件描述符數,如果設置 maxclients 0,表示不作限制。當客戶端連接數到達限制時,Redis會關閉新的連接並向客戶端返回max number of clients reached錯誤信息

    maxclients 128

17. 指定Redis最大內存限制,Redis在啓動時會把數據加載到內存中,達到最大內存後,Redis會先嚐試清除已到期或即將到期的Key,當此方法處理 後,仍然到達最大內存設置,將無法再進行寫入操作,但仍然可以進行讀取操作。Redis新的vm機制,會把Key存放內存,Value會存放在swap區

    maxmemory <bytes>

18. 指定是否在每次更新操作後進行日誌記錄,Redis在默認情況下是異步的把數據寫入磁盤,如果不開啓,可能會在斷電時導致一段時間內的數據丟失。因爲 redis本身同步數據文件是按上面save條件來同步的,所以有的數據會在一段時間內只存在於內存中。默認爲no

    appendonly no

19. 指定更新日誌文件名,默認爲appendonly.aof

     appendfilename appendonly.aof

20. 指定更新日誌條件,共有3個可選值: 
    no:表示等操作系統進行數據緩存同步到磁盤(快) 
    always:表示每次更新操作後手動調用fsync()將數據寫到磁盤(慢,安全) 
    everysec:表示每秒同步一次(折衷,默認值)

    appendfsync everysec

21. 指定是否啓用虛擬內存機制,默認值爲no,簡單的介紹一下,VM機制將數據分頁存放,由Redis將訪問量較少的頁即冷數據swap到磁盤上,訪問多的頁面由磁盤自動換出到內存中(在後面的文章我會仔細分析Redis的VM機制)

     vm-enabled no

22. 虛擬內存文件路徑,默認值爲/tmp/redis.swap,不可多個Redis實例共享

     vm-swap-file /tmp/redis.swap

23. 將所有大於vm-max-memory的數據存入虛擬內存,無論vm-max-memory設置多小,所有索引數據都是內存存儲的(Redis的索引數據 就是keys),也就是說,當vm-max-memory設置爲0的時候,其實是所有value都存在於磁盤。默認值爲0

     vm-max-memory 0

24. Redis swap文件分成了很多的page,一個對象可以保存在多個page上面,但一個page上不能被多個對象共享,vm-page-size是要根據存儲的 數據大小來設定的,作者建議如果存儲很多小對象,page大小最好設置爲32或者64bytes;如果存儲很大大對象,則可以使用更大的page,如果不 確定,就使用默認值

     vm-page-size 32

25. 設置swap文件中的page數量,由於頁表(一種表示頁面空閒或使用的bitmap)是在放在內存中的,,在磁盤上每8個pages將消耗1byte的內存。

     vm-pages 134217728

26. 設置訪問swap文件的線程數,最好不要超過機器的核數,如果設置爲0,那麼所有對swap文件的操作都是串行的,可能會造成比較長時間的延遲。默認值爲4

     vm-max-threads 4

27. 設置在向客戶端應答時,是否把較小的包合併爲一個包發送,默認爲開啓

    glueoutputbuf yes

28. 指定在超過一定的數量或者最大的元素超過某一臨界值時,採用一種特殊的哈希算法

    hash-max-zipmap-entries 64

    hash-max-zipmap-value 512

29. 指定是否激活重置哈希,默認爲開啓(後面在介紹Redis的哈希算法時具體介紹)

    activerehashing yes

30. 指定包含其它的配置文件,可以在同一主機上多個Redis實例之間使用同一份配置文件,而同時各個實例又擁有自己的特定配置文件

    include /path/to/local.conf

31. 'syslog-enabled'設置爲yes會把日誌輸出到系統日誌,默認是no

     syslog-enabled no

 

32. 指定syslog的標示符,如果'syslog-enabled'是no,則這個選項無效。

      syslog-ident redis


33.  指定syslog 設備(facility), 必須是user或者local0到local7.

       syslog-facility local

 

34. 複製冗餘

 Master-Slave replication. 使用slaveof把一個 Redis 實例設置成爲另一個Redis server的從庫(熱備). 注意: #配置只對當前slave有效。

因此可以把某個slave配置成使用不同的時間間隔來保存數據或者監聽其他端口等等。

命令格式:

slaveof <masterip> <masterport>

 

如果master有密碼保護,則在slave與master進行數據同步之前需要進行密碼校驗,否則master會拒絕slave的請#求。


masterauth <master-password>

 

當slave丟失與master的連接時,或者slave仍然在於master進行數據同步時(還沒有與master保持一致),#slave可以有兩種方式來響應客戶端請求:


1) 如果 slave-serve-stale-data 設置成 'yes' (the default) slave會仍然響應客戶端請求,此時可能會有問題。


2) 如果 slave-serve-stale data設置成  'no'  slave會返回"SYNC with master in progress"這樣的錯誤信息。 但 INFO 和SLAVEOF命令除外。


slave-serve-stale-data yes

 


35.  命令重命名,將get命令改成wget命令

        rename-command get wget


36.  同樣可以通過把一個命令重命名爲空串來徹底kill掉這個命令,屏蔽set命令,比如:

        rename-command set ""

 

37. 最大可使用內存。如果超過,Redis會試圖刪除EXPIRE集合中的keys,具體做法是:Redis會試圖釋放即將過期的#keys,而保護還有很長生命週期的keys。


如果這樣還不行,Redis就會報錯,但像GET之類的查詢請求還是會得到響應。


警告:如果你想把Redis視爲一個真正的DB的話,那不要設置<maxmemory>,只有你只想把Redis作爲cache或者

有狀態的server('state' server)時才需要設置。


 maxmemory <bytes>

 

內存清理策略:如果達到了maxmemory,你可以採取如下動作:

 

 volatile-lru -> 使用LRU算法來刪除過期的set

 allkeys-lru -> 刪除任何遵循LRU算法的key

 volatile-random ->隨機地刪除過期set中的key

 allkeys->random -> 隨機地刪除一個key

 volatile-ttl -> 刪除最近即將過期的key(the nearest expire time (minor TTL))

 noeviction -> 根本不過期,寫操作直接報錯

 

 默認策略:


 maxmemory-policy volatile-lru

 

 對於處理redis內存來說,LRU和minor TTL算法不是精確的,而是近似的(估計的)算法。所以我們會檢查某些樣本#來達到內存檢查的目的。默認的樣本數是3,你可以修改它。


 maxmemory-samples 3

 

 

38.  默認情況下,Redis會異步的把數據保存到硬盤。如果你的應用場景允許因爲系統崩潰等極端情況而導致最新數據丟失#的話,那這種做法已經很ok了。否則你應該打開‘append only’模式,開啓這種模式後,Redis會在#appendonly.aof文件中添加每一個寫操作,這個文件會在Redis啓動時被讀取來在內存中重新構建數據集。


注意:如果你需要,你可以同時開啓‘append only’模式和異步dumps模式(你需要註釋掉上面的‘save’表達式來禁#止dumps),這種情況下,Redis重建數據集時會優先使用appendonly.aof而忽略dump.rdb


appendonly no

 

 append only 文件名 (默認: "appendonly.aof")

 appendfilename appendonly.aof

 

 調用fsync()函數通知操作系統立刻向硬盤寫數據


 Redis支持3中模式:


 no:不fsync, 只是通知OS可以flush數據了,具體是否flush取決於OS.性能更好.

 always: 每次寫入append only 日誌文件後都會fsync . 性能差,但很安全.

 everysec: 沒間隔1秒進行一次fsync. 折中.


 默認是 "everysec"

 appendfsync always

 appendfsync everysec

 appendfsync no

 

 當AOF fsync策略被設置爲always或者everysec並且後臺保存進程(saving process)正在執行大量I/O操作時

 Redis可能會在fsync()調用上阻塞過長時間

 no-appendfsync-on-rewrite no

 

 39. append only 文件的自動重寫

 當AOF 日誌文件即將增長到指定百分比時,Redis可以通過調用BGREWRITEAOF 來自動重寫append only文件。


 它是這麼幹的:Redis會記住最近一次重寫後的AOF 文件size。然後它會把這個size與當前size進行比較,如果當前# size比指定的百分比大,就會觸發重寫。同樣,你需要指定AOF文件被重寫的最小size,這對避免雖然百分比達到了# 但是實際上文件size還是很小(這種情況沒有必要重寫)卻導致AOF文件重寫的情況很有用。


 auto-aof-rewrite-percentage 設置爲 0 可以關閉AOF重寫功能 

auto-aof-rewrite-percentage 100

auto-aof-rewrite-min-size 64mb

 

40. slow log

 

 Redis slow log用來記錄超過指定執行時間的查詢。

 

你可以指定兩個參數:一個是慢查詢的閥值,單位是毫秒;另外一個是slow log的長度,相當於一個隊列。

 

負數則關閉slow log,0則會導致每個命令都被記錄

slowlog-log-slower-than 10000

 

# 不設置會消耗過多內存,所以還是要設置一下。可以使用SLOWLOG RESET命令來回收slow log使用的內存

slowlog-max-len 1024

 


發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章