Redis備忘錄

看到別人寫了不少redis記錄,我也寫下總結。

0.  redis簡介

簡單介紹redis,redis是一種支持Key-Value等多種數據結構的存儲系統。可用於緩存,事件發佈或訂閱,高速隊列等場景。該數據庫使用ANSI C語言編寫,支持網絡,提供字符串,哈希,列表,隊列,集合結構直接存取,基於內存,可持久化。

1.  redis安裝

使用centos7時間比較長,我就介紹如何在centos7上安裝redis,請參考我的開源博文https://my.oschina.net/u/154866/blog/4306415

由於我的測試機器環境下已經安裝過了redis,就不具體演示了,但要留意它的配置文件redis.conf,因爲redis單獨使用的場景少,實際開發通過python、nodejs、golang、java客戶端(比如Jedis)連接,故里面幾個基本核心參數務必關注下

vim redis.conf

當然還有其他很多參數,就不一一舉例了。

1. Redis默認不是以守護進程的方式運行,可以通過該配置項修改,使用yes啓用守護進程
    daemonize no
2. 當Redis以守護進程方式運行時,Redis默認會把pid寫入/var/run/redis.pid文件,可以通過pidfile指定
    pidfile /var/run/redis.pid
3. 指定Redis監聽端口,默認端口爲6379,作者在自己的一篇博文中解釋了爲什麼選用6379作爲默認端口,因爲6379在手機按鍵上MERZ對應的號碼,而MERZ取自意大利歌女Alessia Merz的名字
    port 6379
4. 綁定的主機地址
    bind 127.0.0.1
5.當 客戶端閒置多長時間後關閉連接,如果指定爲0,表示關閉該功能
    timeout 300
6. 指定日誌記錄級別,Redis總共支持四個級別:debug、verbose、notice、warning,默認爲verbose
    loglevel verbose
7. 日誌記錄方式,默認爲標準輸出,如果配置Redis爲守護進程方式運行,而這裏又配置爲日誌記錄方式爲標準輸出,則日誌將會發送給/dev/null
    logfile stdout
8. 設置數據庫的數量,默認數據庫爲0,可以使用SELECT <dbid>命令在連接上指定數據庫id
    databases 16
9. 指定在多長時間內,有多少次更新操作,就將數據同步到數據文件,可以多個條件配合
    save <seconds> <changes>
    Redis默認配置文件中提供了三個條件:
    save 900 1
    save 300 10
    save 60 10000
    分別表示900秒(15分鐘)內有1個更改,300秒(5分鐘)內有10個更改以及60秒內有10000個更改。
 
10. 指定存儲至本地數據庫時是否壓縮數據,默認爲yes,Redis採用LZF壓縮,如果爲了節省CPU時間,可以關閉該選項,但會導致數據庫文件變的巨大
    rdbcompression yes
11. 指定本地數據庫文件名,默認值爲dump.rdb
    dbfilename dump.rdb
12. 指定本地數據庫存放目錄
    dir ./
13. 設置當本機爲slav服務時,設置master服務的IP地址及端口,在Redis啓動時,它會自動從master進行數據同步
    slaveof <masterip> <masterport>
14. 當master服務設置了密碼保護時,slav服務連接master的密碼
    masterauth <master-password>
15. 設置Redis連接密碼,如果配置了連接密碼,客戶端在連接Redis時需要通過AUTH <password>命令提供密碼,默認關閉
    requirepass foobared
16. 設置同一時間最大客戶端連接數,默認無限制,Redis可以同時打開的客戶端連接數爲Redis進程可以打開的最大文件描述符數,如果設置 maxclients 0,表示不作限制。當客戶端連接數到達限制時,Redis會關閉新的連接並向客戶端返回max number of clients reached錯誤信息
    maxclients 128
17. 指定Redis最大內存限制,Redis在啓動時會把數據加載到內存中,達到最大內存後,Redis會先嚐試清除已到期或即將到期的Key,當此方法處理 後,仍然到達最大內存設置,將無法再進行寫入操作,但仍然可以進行讀取操作。Redis新的vm機制,會把Key存放內存,Value會存放在swap區
    maxmemory <bytes>
18. 指定是否在每次更新操作後進行日誌記錄,Redis在默認情況下是異步的把數據寫入磁盤,如果不開啓,可能會在斷電時導致一段時間內的數據丟失。因爲 redis本身同步數據文件是按上面save條件來同步的,所以有的數據會在一段時間內只存在於內存中。默認爲no
    appendonly no
19. 指定更新日誌文件名,默認爲appendonly.aof
     appendfilename appendonly.aof
20. 指定更新日誌條件,共有3個可選值: 
    no:表示等操作系統進行數據緩存同步到磁盤(快) 
    always:表示每次更新操作後手動調用fsync()將數據寫到磁盤(慢,安全) 
    everysec:表示每秒同步一次(折衷,默認值)
    appendfsync everysec
 
21. 指定是否啓用虛擬內存機制,默認值爲no,簡單的介紹一下,VM機制將數據分頁存放,由Redis將訪問量較少的頁即冷數據swap到磁盤上,訪問多的頁面由磁盤自動換出到內存中(在後面的文章我會仔細分析Redis的VM機制)
     vm-enabled no
22. 虛擬內存文件路徑,默認值爲/tmp/redis.swap,不可多個Redis實例共享
     vm-swap-file /tmp/redis.swap
23. 將所有大於vm-max-memory的數據存入虛擬內存,無論vm-max-memory設置多小,所有索引數據都是內存存儲的(Redis的索引數據 就是keys),也就是說,當vm-max-memory設置爲0的時候,其實是所有value都存在於磁盤。默認值爲0
     vm-max-memory 0
24. Redis swap文件分成了很多的page,一個對象可以保存在多個page上面,但一個page上不能被多個對象共享,vm-page-size是要根據存儲的 數據大小來設定的,作者建議如果存儲很多小對象,page大小最好設置爲32或者64bytes;如果存儲很大大對象,則可以使用更大的page,如果不 確定,就使用默認值
     vm-page-size 32
25. 設置swap文件中的page數量,由於頁表(一種表示頁面空閒或使用的bitmap)是在放在內存中的,,在磁盤上每8個pages將消耗1byte的內存。
     vm-pages 134217728
26. 設置訪問swap文件的線程數,最好不要超過機器的核數,如果設置爲0,那麼所有對swap文件的操作都是串行的,可能會造成比較長時間的延遲。默認值爲4
     vm-max-threads 4
27. 設置在向客戶端應答時,是否把較小的包合併爲一個包發送,默認爲開啓
    glueoutputbuf yes
28. 指定在超過一定的數量或者最大的元素超過某一臨界值時,採用一種特殊的哈希算法
    hash-max-zipmap-entries 64
    hash-max-zipmap-value 512
29. 指定是否激活重置哈希,默認爲開啓(後面在介紹Redis的哈希算法時具體介紹)
    activerehashing yes
30. 指定包含其它的配置文件,可以在同一主機上多個Redis實例之間使用同一份配置文件,而同時各個實例又擁有自己的特定配置文件
    include /path/to/local.conf

啓動redis,執行以下命令

/dgm/redis/src/redis-server  /dgm/redis/redis.conf  &

檢查是否啓動成功

netstat -nutlp|grep 6379

說明redis啓動成功了!

如果不放心,那就通過客戶端連接redis

 redis-cli  -h 127.0.0.1 -p 6379 -a 123456

可以放心了,說明redis安裝成功了!!!

2.  redis 5種基本數據類型

redis支持以下五種數據類型:string(字符串),hash(哈希),list(列表),set(集合)及zset(sorted set:有序集合)。

2.1   String(字符串)

string 是 redis 最基本的類型,你可以理解成與 Memcached 一模一樣的類型,一個 key 對應一個 value。

string 類型是二進制安全的。意思是 redis 的 string 可以包含任何數據。比如jpg圖片或者序列化的對象。

string 類型是 Redis 最基本的數據類型,string 類型的值最大能存儲 512MB。

示例(前提通過客戶端連接上了redis服務器)

127.0.0.1:6379> ping
PONG
127.0.0.1:6379> set admin "mr2jF7ZgJX8rleIAOaOLH6gHi3az0FExcm24"
OK
127.0.0.1:6379> get admin
"mr2jF7ZgJX8rleIAOaOLH6gHi3az0FExcm24"
127.0.0.1:6379> 

2.2   Hash(哈希)

Redis hash 是一個鍵值(key=>value)對集合。

Redis hash 是一個 string 類型的 field 和 value 的映射表,hash 特別適合用於存儲對象。

示例:

127.0.0.1:6379> hmset user0 username "admin" level "0" appid "1" 
OK
127.0.0.1:6379> hget user0 username
"admin"
127.0.0.1:6379> hget user0 level
"0"
127.0.0.1:6379> hget user0 appid
"1"
127.0.0.1:6379> 

2.3   List(列表)

Redis 列表是簡單的字符串列表,按照插入順序排序。你可以添加一個元素到列表的頭部(左邊)或者尾部(右邊)。

示例:

127.0.0.1:6379> lpush tag Hadoop
(integer) 1
127.0.0.1:6379> lpush tag Hbase
(integer) 2
127.0.0.1:6379> lpush tag Spark
(integer) 3
127.0.0.1:6379> lpush tag Hive
(integer) 4
127.0.0.1:6379> lpush tag Storm
(integer) 5
127.0.0.1:6379> lrange tag 0 3
1) "Storm"
2) "Hive"
3) "Spark"
4) "Hbase"
127.0.0.1:6379> lrange tag 0 10
1) "Storm"
2) "Hive"
3) "Spark"
4) "Hbase"
5) "Hadoop"
127.0.0.1:6379> 

2.4  Set(集合)

Redis 的 Set 是 string 類型的無序集合。

集合是通過哈希表實現的,所以添加,刪除,查找的複雜度都是 O(1)。

sadd 命令

添加一個 string 元素到 key 對應的 set 集合中,成功返回 1,如果元素已經在集合中返回 0。

語法: sadd key member

示例:

127.0.0.1:6379> sadd catalog bigdata
(integer) 1
127.0.0.1:6379> sadd catalog ai
(integer) 1
127.0.0.1:6379> sadd catalog cloud
(integer) 1
127.0.0.1:6379> sadd catalog iot
(integer) 1
127.0.0.1:6379> sadd catalog ai
(integer) 0
127.0.0.1:6379> smembers catalog
1) "cloud"
2) "ai"
3) "bigdata"
4) "iot"
127.0.0.1:6379> 

特別注意:以上實例中 ai 添加了兩次,但根據集合內元素的唯一性,第二次插入的元素將被忽略。

2.5  zset(sorted set:有序集合)

Redis zset 和 set 一樣也是string類型元素的集合,且不允許重複的成員。

不同的是每個元素都會關聯一個double類型的分數。redis正是通過分數來爲集合中的成員進行從小到大的排序。

zset的成員是唯一的,但分數(score)卻可以重複。

zadd 命令

添加元素到集合,元素在集合中存在則更新對應score

語法: zadd key score member

示例:

127.0.0.1:6379> zadd catalogs 0 ai
(integer) 1
127.0.0.1:6379> zadd catalogs 1 bigdata
(integer) 1
127.0.0.1:6379> zadd catalogs 0 iot
(integer) 1
127.0.0.1:6379> zadd catalogs 2 cloud
(integer) 1
127.0.0.1:6379> zadd catalogs 0 ai
(integer) 0
127.0.0.1:6379> zrangebyscore catalogs 0 10
1) "ai"
2) "iot"
3) "bigdata"
4) "cloud"
127.0.0.1:6379> 

用法很多,就不一一敘述了,對於我們java碼農平時開發時掌握常用的就行,要不然要dba幹什麼呢,不要用java碼農挑戰dba的專業。附圖用到的表模型

不得不承認,redis很實用,因爲mysql部分表裏的數據基本不變,可以緩存到redis,省得動不動就查詢mysql數據庫。

 

時間有限,暫且寫這麼多,以後接着完善補充。

 

參考:

0、 Redis文檔  http://www.redis.cn/documentation.html

1.  Redis爲什麼這麼快?一文深入瞭解Redis!  https://www.sohu.com/a/250213991_262549

2. Redis原理詳解  https://blog.51cto.com/gudaoqing/1601114?source=drt

3. Redis是什麼?它的優點有哪些? http://c.biancheng.net/view/4504.html

4.  關於Redis你必須會的命令,值得收藏  https://www.sohu.com/a/321847307_120145691

5、 Redis In Action

裏面有很多高級功能,請自行研究。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章