redis在linux搭建集群,Linux/Centos 7 redis4 集群搭建

背景说明：

项目初期使用AWS的ElastiCache Redis作为系统的数据缓存，近期由于数据量和QPS加大，导致Redis存在压力，进行了两次的单点垂直升级，缓解了目前的压力。项目组进行了数据和费用的评估，考虑到日后升级，决定使用Redis Cluster集群方案，使用三个Master节点搭建集群。(不使用3Master＋3Slave)

前期准备：

1、Redis 安装包：本次使用Redis 4.0.8版本进行搭建

下载地址：http://download.redis.io/releases/redis-4.0.8.tar.gz

2、Ruby环境，本次使用yum安装：yum install -y ruby rubygems

3、下载Ruby Redis工具包，本次使用3.3.3版本(后续说明版本问题)

采用离线下载：wget https://rubygems.org/downloads/redis-3.3.3.gem

4、在AWS上启动3个EC2实例，实例类型为：t2.medium(双核4g，40g SSD存储)

ip分别为：172.31.3.71、172.31.3.72、172.31.3.73

开始搭建：

1、安装Redis：指定安装目录到:/workspace/libs/redis

tar xvfz redis-4.0.8.tar.gz

cd redis-4.0.8

make && make install PREFIX=/workspace/libs/redis

2、配置Redis：在/workspace/libs/redis下创建conf目录，用于存放配置文件

拷贝 redis-4.0.8目录下的redis.conf到/workspace/libs/redis/conf下

修改配置如下：

⚠注意：不能设置密码，否则集群启动时会连接不上

port 7001 //配置端口

//根据本机所在的IP或hostname去配置 node1 node2 node3

bind 本机ip //172.31.3.71,172.31.3.72,172.31.3.73

daemonize yes //redis后台运行

//pidfile文件对应7000,7001,7002

pidfile /var/run/redis_7001.pid

cluster-enabled yes //开启集群

//集群的配置配置文件首次启动自动生成 7001

cluster-config-file /workspace/libs/redis/conf/nodes_7001.conf

//请求超时默认15秒，可自行设置

cluster-node-timeout 15000

appendonly yes //aof日志开启本次使用aof

//禁用rdb 注释掉save

#save 900 1

#save 300 10

#save 60 10000

3、安装Ruby Redis工具包：安装：gem install -l ./redis-3.3.3.gem

4、启动Redis：

cd /workspace/libs/redis

/workspace/libs/redis/bin/redis-server /workspace/libs/redis/conf/redis.conf

查看当前目下是否生成appendonly.aof 文件和 ./conf/下是否生成：nodes-7001.conf

根据配置生成appendonly.aof文件

根据配置生成nodes-7001.conf文件

5、启动集群：

拷贝redis-4.0.8/src下的文件redis-trib.rb到/workspace/libs/redis/bin/目录下

cd /workspace/libs/redis/bin/

./redis-trib.rb create 172.31.3.71:7001 172.31.3.72:7002 172.31.3.73:7003

启动集群

6、检查集群：

./redis-trib.rb info 172.31.3.71:7001

./redis-trib.rb check 172.31.3.71:7001

info查看集群key和slot的信息

检查集群的状态

7、添加节点：添加172.31.3.74:7004节点

./redis-trib.rb add-node 172.31.3.74:7004 172.31.3.71:7001

添加172.31.3.74:7004节点

⚠注意：如果172.31.3..74:7004以前添加到集群过，重新添加的话，会报错： [ERR] Node 172.31.3..74:7004 is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0.

需要先删除/workspace/libs/redis目录下的appendonly.aof和conf下的nodes-7004.conf文件，再重新执行

8、删除节点：删除节点4d3e007b38bf89aede64d0facc15124d9d605511(masterId)

./redis-trib.rb del-node 172.31.3.71:7001 4d3e007b38bf89aede64d0facc15124d9d605511