基於docker的redis-cluster搭建、擴容、縮容

一、redis-cluster搭建

1、拉取redis鏡像，我的版本是5.0.5

docker pull redis

redis運行後查看版本命令，fdaac4274b6e是容器id

docker exec -it fdaac4274b6e redis-server -v

2、在目錄/opt/redis-cluster下新增6個文件夾，分別是6318、6319、6328、6329、6338、6339，在每個問價夾下新建conf和data文件夾

3、新建一個文件redis.conf，複製到每個conf文件夾中，其中端口修改成每個文件夾對應端口

port 6318
bind 0.0.0.0
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
requirePass redis_test

4、進入/opt/redis-cluster目錄，新建文件docker-compose-redis.yaml文件

docker-compose-redis.yaml內容如下

version: "3.4"

x-image:
  &default-image
  redis:latest
x-restart:
  &default-restart
  always
x-command:
  &default-command
  redis-server /etc/redis/redis.conf      
x-netmode:
  &default-netmode
  host

services:
  redis1:
    image: *default-image
    restart: *default-restart
    container_name: redis5-m1
    command: *default-command
    volumes:
      - ./6319/data:/data
      - ./6319/conf/redis.conf:/etc/redis/redis.conf
    network_mode: *default-netmode
    ports:
      - '6319:6319'     #服務端口
      - '16319:16319'   #集羣端口
  
  redis2:
    image: *default-image
    restart: *default-restart
    container_name: redis5-m2
    command: *default-command
    volumes:
      - ./6329/data:/data
      - ./6329/conf/redis.conf:/etc/redis/redis.conf
    network_mode: *default-netmode
    ports:
      - '6329:6329'
      - '16329:16329'
  
  redis3:
    image: *default-image
    restart: *default-restart
    container_name: redis5-m3
    command: *default-command
    volumes:
      - ./6339/data:/data
      - ./6339/conf/redis.conf:/etc/redis/redis.conf
    network_mode: *default-netmode
    ports:
      - '6339:6339'
      - '16339:16339'

  redis4:
    image: *default-image
    restart: *default-restart
    container_name: redis5-s1
    command: *default-command
    volumes:
      - ./6318/data:/data
      - ./6318/conf/redis.conf:/etc/redis/redis.conf
    network_mode: *default-netmode
    ports:
      - '6318:6318'
      - '16318:16318'

  redis5:
    image: *default-image
    restart: *default-restart
    container_name: redis5-s2
    command: *default-command
    volumes:
      - ./6328/data:/data
      - ./6328/conf/redis.conf:/etc/redis/redis.conf
    network_mode: *default-netmode   
    ports:
      - '6328:6328'
      - '16328:16328'
    
  redis6:
    image: *default-image
    restart: *default-restart
    container_name: redis5-s3
    command: *default-command
    volumes:
      - ./6338/data:/data
      - ./6338/conf/redis.conf:/etc/redis/redis.conf
    network_mode: *default-netmode   
    ports:
      - '6338:6338'
      - '16338:16338'

 

4、運行 docker-compose-redis.yaml

docker-compose -f  docker-compose-redis.yaml up -d

運行後結果

 5、拉取goodsmileduck/redis-cli鏡像

docker pull goodsmileduck/redis-cli

查看help命令

docker run --rm -it goodsmileduck/redis-cli redis-cli --cluster help

 

6、集羣命令

--a redis_test redis_test是redis密碼

--cluster-replicas 1表示1主1從

docker run --rm -it goodsmileduck/redis-cli redis-cli -a redis_test --cluster-replicas 1 --cluster create 172.18.171.42:6319 172.18.171.42:6329 172.18.171.42:6339 172.18.171.42:6318 172.18.171.42:6328 172.18.171.42:6338

執行結果：

 7、查看集羣情況，連接任意一個節點

docker run --rm -it goodsmileduck/redis-cli redis-cli -c -h 172.18.171.42 -p 6319 -a redis_test

執行命令cluster nodes，查看結果

8、測試集羣情況，在6319端口上寫入一個h的key，數據被存在到了6339中，訪問的節點也變成了6339，則說明集羣成功

 二、集羣的擴容

1、在redis-cluster文件夾中新增兩個文件夾6348、6349（參考前面），並複製redis.conf

複製docker-compose-redis.yaml並重命名爲docker-compose-redis2.yaml

修改內容爲：

version: "3.4"

x-image:
  &default-image
  redis:latest
x-restart:
  &default-restart
  always
x-command:
  &default-command
  redis-server /etc/redis/redis.conf      
x-netmode:
  &default-netmode
  host

services:
  redis7:
    image: *default-image
    restart: *default-restart
    container_name: redis5-m4
    command: *default-command
    volumes:
      - ./6349/data:/data
      - ./6349/conf/redis.conf:/etc/redis/redis.conf
    network_mode: *default-netmode
    ports:
      - '6349:6349'     #服務端口
      - '16349:16349'   #集羣端口
    
  redis8:
    image: *default-image
    restart: *default-restart
    container_name: redis5-s4
    command: *default-command
    volumes:
      - ./6348/data:/data
      - ./6348/conf/redis.conf:/etc/redis/redis.conf
    network_mode: *default-netmode   
    ports:
      - '6348:6348'
      - '16348:16348'

2、執行docker-compose命令

docker-compose -f  docker-compose-redis2.yaml up -d

 3、新增節點命令

172.18.171.42:6349 是新節點ip和端口

172.18.171.42:6339 是原集羣中的ip和端口，可以是集羣中任意一個節點iph和端口

docker run --rm -it goodsmileduck/redis-cli redis-cli --cluster add-node 172.18.171.42:6349 172.18.171.42:6339 -a redis_test

 查看集羣中的信息，已經多了紅色標記的節點，但是沒有哈希槽

4、分配哈希槽

docker run --rm -it goodsmileduck/redis-cli redis-cli --cluster reshard 172.18.171.42:6349 -a redis_test

即將給該節點分配的哈希槽數據、以及該節點的id

 輸入原主節點的id，可以輸入多主節點id

（1）將所有節點用作哈希槽的源節點。：all

（2）在指定的節點拿出指定數量的哈希槽分配到目標節點：done

執行完成後，查看集羣節點信息

5、新增從節點

 172.18.171.42:6348 是新增節點的信息

172.18.171.42:6339 是集羣中的任意一個節點

3b752995bef67d32b30c0f0c63c5aa4172f7f811 是主節點id

docker run --rm -it goodsmileduck/redis-cli redis-cli --cluster add-node 172.18.171.42:6348 172.18.171.42:6339 --cluster-slave --cluster-master-id 3b752995bef67d32b30c0f0c63c5aa4172f7f811 -a redis_test

查看集羣情況

三、集羣的縮容

1、刪除從節點

刪除節點用del-node命令。此命令需要制定刪除節點的ip和端口，以及節點的id。

docker run --rm -it goodsmileduck/redis-cli redis-cli --cluster del-node 172.18.171.42:6348 6c0262d81dc83c809d8588d6f0c8821b91bd833c -a redis_test

2、刪除主節點

(1)將主節點的哈希槽分配到其他主節點上

將6349上的1365個槽分配到6319上

docker run --rm -it goodsmileduck/redis-cli redis-cli --cluster reshard 172.18.171.42:6349 --cluster-from 3b752995bef67d32b30c0f0c63c5aa4172f7f811 --cluster-to 6202eefd595279cf589bdec9e2fec274f63caaad --cluster-slots 1365 -a redis_test

將6349上的1366個槽分配到6329上 

docker run --rm -it goodsmileduck/redis-cli redis-cli --cluster reshard 172.18.171.42:6349 --cluster-from 3b752995bef67d32b30c0f0c63c5aa4172f7f811 --cluster-to 33e1c446095012af2a43c18715f4cd5db9280679 --cluster-slots 1366 -a redis_test

將6349上的1365個槽分配到6339上

docker run --rm -it goodsmileduck/redis-cli redis-cli --cluster reshard 172.18.171.42:6349 --cluster-from 3b752995bef67d32b30c0f0c63c5aa4172f7f811 --cluster-to 65681aec21243032ef9977a1f5bc139564c584e2 --cluster-slots 1365 -a redis_test

 三個都分配後，6349集羣中沒有了槽

(2)使用del-node命令來刪除主節點

docker run --rm -it goodsmileduck/redis-cli redis-cli --cluster del-node 172.18.171.42:6349 3b752995bef67d32b30c0f0c63c5aa4172f7f811 -a redis_test