redis集群搭建详细指南 (macOS,centOS适用)

2019年9月17日 更新可用

PS:本文的路径自己注意和修改

安装部署任何一个应用其实都很简单,只要安装步骤一步一步来就行了。下面说一下 Redis 集群搭建规划,由于集群至少需要6个节点(3主3从模式),所以,没有这么多机器给我玩,我本地也起不了那么多虚拟机(电脑太烂),现在计划是在一台机器上模拟一个集群,当然,这和生产环境的集群搭建没本质区别。

我现在就要在已经有安装了 Redis 的情况下开始进行集群搭建,如果你还不是很清楚如何安装 Redis ,可以去看这以下文章 (遇到的报错可以看下文章尾部,或有解决方案)。
MacOs安装redis
centOs安装redis(自己改路径哦)
请注意,下面所有集群搭建环境都基于已安装好的 Redis 做的。

1.创建文件夹
我们计划集群中 Redis 节点的端口号为 9001-9006 ,端口号即集群下各实例文件夹。数据存放在 端口号/data 文件夹中。

mkdir ~/workspace/redis-cluster
cd redis-cluster/
mkdir -p 9001/data 9002/data 9003/data 9004/data 9005/data 9006/data

2.复制执行脚本
~/workspace/redis-cluster 下创建 bin 文件夹,用来存放集群运行脚本,并把安装好的 Redis 的 src 路径下的运行脚本拷贝过来。看命令:

mkdir bin
cd ~/workspace/redis-5.0.5/src
cp mkreleasehdr.sh redis-benchmark redis-check-aof  redis-cli redis-server redis-trib.rb ~/workspace/redis-cluster/bin/

redis-check-dump

3.复制一个新 Redis 实例
我们现在从已安装好的 Redis 中复制一个新的实例到 9001 文件夹,并修改 redis.conf 配置。

cp -r ~/workspace/redis-5.0.5/* ~/workspace/redis-cluster/9001

注意,修改 redis.conf 配置(和单点唯一区别是下图部分,其余还是常规的这几项):

// 打开redis.conf文件
vi ~/workspace/redis-cluster/9001/redis.conf

下面是需要修改的内容:

port 6379 --> port 9001(每个节点的端口号)
daemonize no --> daemonize yes
bind 127.0.0.1(绑定当前机器 IP)
dir ./ --> dir ./data/(数据文件存放位置)
pidfile /var/run/redis_6379.pid --> pidfile ./redis_9001.pid(pid 9001和port要对应,创建时创建这个文件,服务关闭时候删除这个文件,不创建也可以,貌似只有提示的作用)
# cluster-enabled yes --> cluster-enabled yes(启动集群模式)
# cluster-config-file nodes-6379.conf --> cluster-config-file nodes-9001.conf(9001和port要对应,集群自己维护的配置文件,同一个系统上不能重复)
# cluster-node-timeout 15000 --> cluster-node-timeout 15000
appendonly no --> appendonly yes (允许一次或一秒内的写入异常,更多信息https://redis.io/topics/persistence)

集群搭建配置重点就是取消下图中的这三个配置的注释:
cluster_conf

4.再复制出五个新 Redis 实例
我们已经完成了一个节点了,其实接下来就是机械化的再完成另外五个节点,其实可以这么做:把 9001 实例 复制到另外五个文件夹中,唯一要修改的就是 redis.conf 中的所有和端口的相关的信息即可,其实就那么四个位置。开始操作,看图:

cp9001-9006

\cp -rf ~/workspace/redis-cluster/9001/* ~/workspace/redis-cluster/9002
\cp -rf ~/workspace/redis-cluster/9001/* ~/workspace/redis-cluster/9003
\cp -rf ~/workspace/redis-cluster/9001/* ~/workspace/redis-cluster/9004
\cp -rf ~/workspace/redis-cluster/9001/* ~/workspace/redis-cluster/9005
\cp -rf ~/workspace/redis-cluster/9001/* ~/workspace/redis-cluster/9006

\cp -rf 命令是不使用别名来复制,因为 cp 其实是别名 cp -i,操作时会有交互式确认,比较烦人。

5.修改 9002-9006 的 redis.conf 文件
其实非常简单了,你通过搜索会发现其实只有三个点需要修改,我们全局替换下吧,进入相应的节点文件夹,做替换就好了。命令非常简单,看图:

%s-9001-9002g

// 以9002为例子,如果9003把下面的9002改成9003就好
vim ~/workspace/redis-cluster/9002/redis.conf
:%s/9001/9002/g

回车后,就会有替换几个地方成功的提示,不放心可以手工检查下:

%s-success
其实我们也就是替换了下面这四行:

port 9001
cluster-config-file nodes-9001.conf
pidfile ./redis_9001.pid

到这里,我们已经把最基本的环境搞定了,接下来就是启动了。

其实我们已经几乎搭建好了

1.启动 9001-9006 六个节点
少废话,直接看图:
redis-server_start

// redis-server 需要设置环境变量 该命令文件在你安装redis安装位置根目录src文件下面
redis-server ~/workspace/redis-cluster/9001/redis.conf 
redis-server ~/workspace/redis-cluster/9002/redis.conf 
redis-server ~/workspace/redis-cluster/9003/redis.conf 
redis-server ~/workspace/redis-cluster/9004/redis.conf 
redis-server ~/workspace/redis-cluster/9005/redis.conf 
redis-server ~/workspace/redis-cluster/9006/redis.conf

可以检查一下是否启动成功:ps -el | grep redis
看的出来,六个节点已经全部启动成功了。

2.随便找一个节点测试试

redis-cli -h 127.0.0.1 -p 9001

set name mafly

redis-server_start_test

连接成功了,但好像报错了阿???
(error) CLUSTERDOWN Hash slot not served(不提供集群的散列槽),这是什么鬼?
这是因为虽然我们配置并启动了 Redis 集群服务,但是他们暂时还并不在一个集群中,互相直接发现不了,而且还没有可存储的位置,就是所谓的slot(槽)

3.安装集群所需软件
由于 Redis 集群需要使用 ruby 命令,所以我们需要安装 ruby 和相关接口。

MacOS:

// brew 安装 https://www.cnblogs.com/mingm/p/10653198.html
brew install ruby
gem install redis 

centOS:

yum install ruby
yum install rubygems
gem install redis 

yum_ruby

这才是真正的创建集群

先不废话,直接敲命令:

redis-cli --cluster create 127.0.0.1:9001 127.0.0.1:9002 127.0.0.1:9003 127.0.0.1:9004 127.0.0.1:9005 127.0.0.1:9006 --cluster-replicas 1

cluster_create

简单解释一下这个命令:调用 ruby 命令来进行创建集群,--replicas 1 表示主从复制比例为 1:1,即一个主节点对应一个从节点;然后,默认给我们分配好了每个主节点和对应从节点服务,以及 solt 的大小,因为在 Redis 集群中有且仅有 16383 个 solt ,默认情况会给我们平均分配,当然你可以指定,后续的增减节点也可以重新分配。

M: 10222dee93f6a1700ede9f5424fccd6be0b2fb73 为主节点Id

S: 9ce697e49f47fec47b3dc290042f3cc141ce5aeb 127.0.0.1:9004 replicates 10222dee93f6a1700ede9f5424fccd6be0b2fb73 从节点下对应主节点Id

目前来看,9001-9003 为主节点,9004-9006 为从节点,并向你确认是否同意这么配置。输入 yes 后,会开始集群创建。

cluster_create_success

上图则代表集群搭建成功啦!!!

验证一下:
依然是通过客户端命令连接上,通过集群命令看一下状态和节点信息等。

redis-cli -c -h 127.0.0.1 -p 9001
cluster info
cluster nodes

cluster_info

通过命令,可以详细的看出集群信息和各个节点状态,主从信息以及连接数、槽信息等。这么看到,我们已经真的把 Redis 集群搭建部署成功啦!

设置一个 mafly:
你会发现,当我们 set name mafly 时,出现了 Redirected to slot 信息并自动连接到了9002节点。这也是集群的一个数据分配特性,这里不详细说了。

redirected_9002

总结一下

这一篇 Redis 集群部署搭建的文章真的是一步一步的走下来的,只要你安装我的步骤来,就保证你能成功搭建一个 Redis 集群玩玩,也可以这么说,除了步骤繁琐外,几乎不存在技术含量,估计能看完的人都感觉累(说真的,写这种文章真的很累人)。

接下来可能就是动态扩容、增加节点和减少节点,重新分配槽大小等,当然,还有最重要的就是怎么和我们程序结合起来,以及如何更好的把 Redis 缓存集群发挥出应有的效果,这些才是最重要的。

错误总结

错误详情信息:

user@user-70DGA014CN:~/redis-cluster$ redis-cli -p 9000
127.0.0.1:9000> set name chenxinming
(error) MOVED 5798 127.0.0.1:9001

初级解决办法:更换至9001端口即可

user@user-70DGA014CN:~/redis-cluster$ redis-cli -p 9001
127.0.0.1:9001> set name chenxinming
OK
127.0.0.1:9001>

最终解决方法:

 redis-cli -c -h 192.168.3.99 -p 9000
 127.0.0.1:9002> set foo bar
OK

感谢 Mafly 的文章。
感谢 Jason_M_Ho 的文章。

其他相关文章推荐:
redis 在 mac 下的安装与使用
redis cluster学习笔记
redis mget性能衰减分析
redis分片和hash tag
redis 集群管理常用技巧
node 框架 ioredis github
redis官网命令API

错误解决(Executing test client: couldn’t execute “src/redis-benchmark”: no such file or directory):
redis安装报错解决办法

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章