一、场景
1、搞一套6个主节点的Cluster集群
2、模拟数据正常读写
3、模拟单点故障
4、在不停服务的情况下将集群架构改为3主3从
二、环境规划
6台独立的服务器,端口18001~18006
192.169.14.121
192.169.14.122
192.169.14.123
192.169.14.124
192.169.14.125
192.169.14.126
Redis–6.2.14版本
CentOS Linux release 7.6.1810
三、Redis-Cluster部署(6主模式)
1、Redis安装(6节点分别执行)
# 上传软件到/opt下
tar -zxvf redis-6.2.14.tar.gz
cd redis-6.2.14
make & make install
2、创建目录(6节点分别创建对应目录)
mkdir -p /data/redis-cluster-18001
3、准备配置文件(6节点分别创建对应配置)
vim /data/redis-cluster-18001/redis.conf
######测试环境就写最基础的配置了
port 18001
dir /data/redis-cluster-18001/
cluster-enabled yes
cluster-config-file nodes-18001.conf
cluster-node-timeout 5000
bind 0.0.0.0
protected-mode no
appendonly yes
maxmemory 10G
daemonize yes
4、启动Redis(6节点分别执行)
cd /opt
./redis-6.2.14/src/redis-server /data/redis-cluster-18001/redis.conf
由于配置文件中声明了是集群模式,所以启动后看进程是有集群标识的
5、初始化集群(任意节点执行)
cd /opt
/usr/local/redis-5.0.4/src/redis-cli --cluster create --cluster-replicas 1 192.168.5.100:8001 192.168.5.100:8002 192.168.5.100:8003 192.168.5.100:8004 192.168.5.100:8005 192.168.5.100:8006
非常方便哈,Redis从3.0版本开始支持Cluster模式,但是最开始需要借助ruby来安装。
从5.0版本开始,可以直接通过redis-cli --cluster的方式操作集群。
6、集群验证
cd /opt
./redis-6.2.14/src/redis-cli -c -h 192.168.14.121 -p 18001
192.168.14.121:18001> cluster nodes
可以看到16384个槽位均匀分配在各个节点上。
不过
这种全主架构在Redis-Cluster中是有单点故障问题的,如果其中任意一台服务器挂掉,整个Redis集群将不可读写。
四、模拟单点故障并验证
同时查看cluster nodes
五、转为3主3从模式
因为Redis-Cluster模式下当有槽位不可用(不管槽位内是否有数据)时会导致整个集群不可用。
所以我们现在将6主模式改为3主3从模式
1、先将node4、5、6的槽位转移到node1、2、3上
redis-cli --cluster reshard 集群任意节点IP:端口 --cluster-from 源node-id --cluster-to 目标node-id --cluster-slots 转移的槽位数量 --cluster-yes
cd /opt
./redis-6.2.14/src/redis-cli --cluster reshard 192.168.14.121:18001 --cluster-from 3c01c7397471f52c1df4f05223de1bab80ac2b0f --cluster-to bcdb37c781a80ee7bf1c962917649b5a44ddec2f --cluster-slots 2701 --cluster-yes
最终效果
2、节点下线
redis-cli --cluster del-node 集群任意节点IP:端口 下线节点node-id
redis-cli --cluster del-node 192.168.14.121:18001 b494529c8a6cea6a47d8f058ab43df220b30815c
3、下线节点以从节点身份重新加入集群
redis-cli --cluster add-node 新加节点IP:端口 集群任意节点IP:端口 --cluster-slave --cluster-master-id 主节点node-id
cd /opt
./redis-6.2.14/src/redis-cli --cluster add-node 192.168.14.124:18004 192.168.14.121:18001 --cluster-slave --cluster-master-id 1dbc5115472fd6b64a537b6d862f6ec5b9892340
最终效果
现在任意节点宕机会自动切换主从,也不会影响集群的正常使用。
彩蛋
如果在生产环境是否也可以做槽位迁移呢?,当然是可以的,因为Redis-Cluster提供ask重定向处理功能(应对操作的key正在发生迁移),不过还是需要在业务顶峰期操作。