看到別人寫了不少redis記錄,我也寫下總結。
0. redis簡介
簡單介紹redis,redis是一種支持Key-Value等多種數據結構的存儲系統。可用於緩存,事件發佈或訂閱,高速隊列等場景。該數據庫使用ANSI C語言編寫,支持網絡,提供字符串,哈希,列表,隊列,集合結構直接存取,基於內存,可持久化。
1. redis安裝
使用centos7時間比較長,我就介紹如何在centos7上安裝redis,請參考我的開源博文https://my.oschina.net/u/154866/blog/4306415
由於我的測試機器環境下已經安裝過了redis,就不具體演示了,但要留意它的配置文件redis.conf,因爲redis單獨使用的場景少,實際開發通過python、nodejs、golang、java客戶端(比如Jedis)連接,故里面幾個基本核心參數務必關注下
vim redis.conf
當然還有其他很多參數,就不一一舉例了。
1. Redis默認不是以守護進程的方式運行,可以通過該配置項修改,使用yes啓用守護進程
daemonize no
2. 當Redis以守護進程方式運行時,Redis默認會把pid寫入/var/run/redis.pid文件,可以通過pidfile指定
pidfile /var/run/redis.pid
3. 指定Redis監聽端口,默認端口爲6379,作者在自己的一篇博文中解釋了爲什麼選用6379作爲默認端口,因爲6379在手機按鍵上MERZ對應的號碼,而MERZ取自意大利歌女Alessia Merz的名字
port 6379
4. 綁定的主機地址
bind 127.0.0.1
5.當 客戶端閒置多長時間後關閉連接,如果指定爲0,表示關閉該功能
timeout 300
6. 指定日誌記錄級別,Redis總共支持四個級別:debug、verbose、notice、warning,默認爲verbose
loglevel verbose
7. 日誌記錄方式,默認爲標準輸出,如果配置Redis爲守護進程方式運行,而這裏又配置爲日誌記錄方式爲標準輸出,則日誌將會發送給/dev/null
logfile stdout
8. 設置數據庫的數量,默認數據庫爲0,可以使用SELECT <dbid>命令在連接上指定數據庫id
databases 16
9. 指定在多長時間內,有多少次更新操作,就將數據同步到數據文件,可以多個條件配合
save <seconds> <changes>
Redis默認配置文件中提供了三個條件:
save 900 1
save 300 10
save 60 10000
分別表示900秒(15分鐘)內有1個更改,300秒(5分鐘)內有10個更改以及60秒內有10000個更改。
10. 指定存儲至本地數據庫時是否壓縮數據,默認爲yes,Redis採用LZF壓縮,如果爲了節省CPU時間,可以關閉該選項,但會導致數據庫文件變的巨大
rdbcompression yes
11. 指定本地數據庫文件名,默認值爲dump.rdb
dbfilename dump.rdb
12. 指定本地數據庫存放目錄
dir ./
13. 設置當本機爲slav服務時,設置master服務的IP地址及端口,在Redis啓動時,它會自動從master進行數據同步
slaveof <masterip> <masterport>
14. 當master服務設置了密碼保護時,slav服務連接master的密碼
masterauth <master-password>
15. 設置Redis連接密碼,如果配置了連接密碼,客戶端在連接Redis時需要通過AUTH <password>命令提供密碼,默認關閉
requirepass foobared
16. 設置同一時間最大客戶端連接數,默認無限制,Redis可以同時打開的客戶端連接數爲Redis進程可以打開的最大文件描述符數,如果設置 maxclients 0,表示不作限制。當客戶端連接數到達限制時,Redis會關閉新的連接並向客戶端返回max number of clients reached錯誤信息
maxclients 128
17. 指定Redis最大內存限制,Redis在啓動時會把數據加載到內存中,達到最大內存後,Redis會先嚐試清除已到期或即將到期的Key,當此方法處理 後,仍然到達最大內存設置,將無法再進行寫入操作,但仍然可以進行讀取操作。Redis新的vm機制,會把Key存放內存,Value會存放在swap區
maxmemory <bytes>
18. 指定是否在每次更新操作後進行日誌記錄,Redis在默認情況下是異步的把數據寫入磁盤,如果不開啓,可能會在斷電時導致一段時間內的數據丟失。因爲 redis本身同步數據文件是按上面save條件來同步的,所以有的數據會在一段時間內只存在於內存中。默認爲no
appendonly no
19. 指定更新日誌文件名,默認爲appendonly.aof
appendfilename appendonly.aof
20. 指定更新日誌條件,共有3個可選值:
no:表示等操作系統進行數據緩存同步到磁盤(快)
always:表示每次更新操作後手動調用fsync()將數據寫到磁盤(慢,安全)
everysec:表示每秒同步一次(折衷,默認值)
appendfsync everysec
21. 指定是否啓用虛擬內存機制,默認值爲no,簡單的介紹一下,VM機制將數據分頁存放,由Redis將訪問量較少的頁即冷數據swap到磁盤上,訪問多的頁面由磁盤自動換出到內存中(在後面的文章我會仔細分析Redis的VM機制)
vm-enabled no
22. 虛擬內存文件路徑,默認值爲/tmp/redis.swap,不可多個Redis實例共享
vm-swap-file /tmp/redis.swap
23. 將所有大於vm-max-memory的數據存入虛擬內存,無論vm-max-memory設置多小,所有索引數據都是內存存儲的(Redis的索引數據 就是keys),也就是說,當vm-max-memory設置爲0的時候,其實是所有value都存在於磁盤。默認值爲0
vm-max-memory 0
24. Redis swap文件分成了很多的page,一個對象可以保存在多個page上面,但一個page上不能被多個對象共享,vm-page-size是要根據存儲的 數據大小來設定的,作者建議如果存儲很多小對象,page大小最好設置爲32或者64bytes;如果存儲很大大對象,則可以使用更大的page,如果不 確定,就使用默認值
vm-page-size 32
25. 設置swap文件中的page數量,由於頁表(一種表示頁面空閒或使用的bitmap)是在放在內存中的,,在磁盤上每8個pages將消耗1byte的內存。
vm-pages 134217728
26. 設置訪問swap文件的線程數,最好不要超過機器的核數,如果設置爲0,那麼所有對swap文件的操作都是串行的,可能會造成比較長時間的延遲。默認值爲4
vm-max-threads 4
27. 設置在向客戶端應答時,是否把較小的包合併爲一個包發送,默認爲開啓
glueoutputbuf yes
28. 指定在超過一定的數量或者最大的元素超過某一臨界值時,採用一種特殊的哈希算法
hash-max-zipmap-entries 64
hash-max-zipmap-value 512
29. 指定是否激活重置哈希,默認爲開啓(後面在介紹Redis的哈希算法時具體介紹)
activerehashing yes
30. 指定包含其它的配置文件,可以在同一主機上多個Redis實例之間使用同一份配置文件,而同時各個實例又擁有自己的特定配置文件
include /path/to/local.conf
啓動redis,執行以下命令
/dgm/redis/src/redis-server /dgm/redis/redis.conf &
檢查是否啓動成功
netstat -nutlp|grep 6379
說明redis啓動成功了!
如果不放心,那就通過客戶端連接redis
redis-cli -h 127.0.0.1 -p 6379 -a 123456
可以放心了,說明redis安裝成功了!!!
2. redis 5種基本數據類型
redis支持以下五種數據類型:string(字符串),hash(哈希),list(列表),set(集合)及zset(sorted set:有序集合)。
2.1 String(字符串)
string 是 redis 最基本的類型,你可以理解成與 Memcached 一模一樣的類型,一個 key 對應一個 value。
string 類型是二進制安全的。意思是 redis 的 string 可以包含任何數據。比如jpg圖片或者序列化的對象。
string 類型是 Redis 最基本的數據類型,string 類型的值最大能存儲 512MB。
示例(前提通過客戶端連接上了redis服務器)
127.0.0.1:6379> ping
PONG
127.0.0.1:6379> set admin "mr2jF7ZgJX8rleIAOaOLH6gHi3az0FExcm24"
OK
127.0.0.1:6379> get admin
"mr2jF7ZgJX8rleIAOaOLH6gHi3az0FExcm24"
127.0.0.1:6379>
2.2 Hash(哈希)
Redis hash 是一個鍵值(key=>value)對集合。
Redis hash 是一個 string 類型的 field 和 value 的映射表,hash 特別適合用於存儲對象。
示例:
127.0.0.1:6379> hmset user0 username "admin" level "0" appid "1"
OK
127.0.0.1:6379> hget user0 username
"admin"
127.0.0.1:6379> hget user0 level
"0"
127.0.0.1:6379> hget user0 appid
"1"
127.0.0.1:6379>
2.3 List(列表)
Redis 列表是簡單的字符串列表,按照插入順序排序。你可以添加一個元素到列表的頭部(左邊)或者尾部(右邊)。
示例:
127.0.0.1:6379> lpush tag Hadoop
(integer) 1
127.0.0.1:6379> lpush tag Hbase
(integer) 2
127.0.0.1:6379> lpush tag Spark
(integer) 3
127.0.0.1:6379> lpush tag Hive
(integer) 4
127.0.0.1:6379> lpush tag Storm
(integer) 5
127.0.0.1:6379> lrange tag 0 3
1) "Storm"
2) "Hive"
3) "Spark"
4) "Hbase"
127.0.0.1:6379> lrange tag 0 10
1) "Storm"
2) "Hive"
3) "Spark"
4) "Hbase"
5) "Hadoop"
127.0.0.1:6379>
2.4 Set(集合)
Redis 的 Set 是 string 類型的無序集合。
集合是通過哈希表實現的,所以添加,刪除,查找的複雜度都是 O(1)。
sadd 命令
添加一個 string 元素到 key 對應的 set 集合中,成功返回 1,如果元素已經在集合中返回 0。
語法: sadd key member
示例:
127.0.0.1:6379> sadd catalog bigdata
(integer) 1
127.0.0.1:6379> sadd catalog ai
(integer) 1
127.0.0.1:6379> sadd catalog cloud
(integer) 1
127.0.0.1:6379> sadd catalog iot
(integer) 1
127.0.0.1:6379> sadd catalog ai
(integer) 0
127.0.0.1:6379> smembers catalog
1) "cloud"
2) "ai"
3) "bigdata"
4) "iot"
127.0.0.1:6379>
特別注意:以上實例中 ai 添加了兩次,但根據集合內元素的唯一性,第二次插入的元素將被忽略。
2.5 zset(sorted set:有序集合)
Redis zset 和 set 一樣也是string類型元素的集合,且不允許重複的成員。
不同的是每個元素都會關聯一個double類型的分數。redis正是通過分數來爲集合中的成員進行從小到大的排序。
zset的成員是唯一的,但分數(score)卻可以重複。
zadd 命令
添加元素到集合,元素在集合中存在則更新對應score
語法: zadd key score member
示例:
127.0.0.1:6379> zadd catalogs 0 ai
(integer) 1
127.0.0.1:6379> zadd catalogs 1 bigdata
(integer) 1
127.0.0.1:6379> zadd catalogs 0 iot
(integer) 1
127.0.0.1:6379> zadd catalogs 2 cloud
(integer) 1
127.0.0.1:6379> zadd catalogs 0 ai
(integer) 0
127.0.0.1:6379> zrangebyscore catalogs 0 10
1) "ai"
2) "iot"
3) "bigdata"
4) "cloud"
127.0.0.1:6379>
用法很多,就不一一敘述了,對於我們java碼農平時開發時掌握常用的就行,要不然要dba幹什麼呢,不要用java碼農挑戰dba的專業。附圖用到的表模型
不得不承認,redis很實用,因爲mysql部分表裏的數據基本不變,可以緩存到redis,省得動不動就查詢mysql數據庫。
時間有限,暫且寫這麼多,以後接着完善補充。
參考:
0、 Redis文檔 http://www.redis.cn/documentation.html
1. Redis爲什麼這麼快?一文深入瞭解Redis! https://www.sohu.com/a/250213991_262549
2. Redis原理詳解 https://blog.51cto.com/gudaoqing/1601114?source=drt
3. Redis是什麼?它的優點有哪些? http://c.biancheng.net/view/4504.html
4. 關於Redis你必須會的命令,值得收藏 https://www.sohu.com/a/321847307_120145691
5、 Redis In Action
裏面有很多高級功能,請自行研究。