Docker 搭建Redis集群

目录

1. 3主3从架构说明

2. 3主3从Redis集群配置

2.1关闭防火墙+启动docker后台服务

2.2 新建6个docker容器实例

2.3 进去任意一台redis容器,为6台机器构建集群关系

2.4 进去6381,查看集群状态

3. 主从容错切换迁移

3.1 数据读写存储

3.1.1 查看集群情况

3.2 容错切换迁移

3.2.1 Master6381 宕机

3.2.2 Master6381 重新启动

4. 主从扩容

4.1 新增机器 6387 6388 (run image 变成镜像)

4.2 将6387节点(空槽号)作为master节点加入原集群

4.3 第一次检查集群情况

4.4 重新分配槽号

4.5 第二次检查集群情况

4.6 为6387主节点分配6388从节点

4.7 第三次检查集群情况

5. 主从缩容 (6387和 6388 下线,退出集群)

5.1 删除6388 (从集群中移除6388从节点)

5.2 将6387(Master)的槽号清空,重新分配 (平均分给其他3个master)

5.3 第一次检查集群

5.4 将6387删除

5.5 第三次检查集群

1~2亿条数据需要存储,轻微如何设计这个存储案例?

答:单机单台100%不可能,肯定是分布式存储。redis如何落地?

一般业界有3种解决方案:

(1) 哈希取余分区

(2)一致性哈希算法分区

(3)哈希槽分区

详细解释参考之前的文档: Redis 集群(cluster)_redis集群不用哨兵-CSDN博客

1. 3主3从架构说明

2. 3主3从Redis集群配置

2.1关闭防火墙+启动docker后台服务

sudo systemctl stop firewalldsystemctl start docker

2.2 新建6个docker容器实例

docker run -d --name redis-node-1 --net host --privileged=true -v /mydocker/redis/share/redis-node-1:/data redis:7.2.4 --cluster-enabled yes --appendonly yes --port 6381docker run -d --name redis-node-2 --net host --privileged=true -v /mydocker/redis/share/redis-node-2:/data redis:7.2.4 --cluster-enabled yes --appendonly yes --port 6382docker run -d --name redis-node-3 --net host --privileged=true -v /mydocker/redis/share/redis-node-3:/data redis:7.2.4 --cluster-enabled yes --appendonly yes --port 6383docker run -d --name redis-node-4 --net host --privileged=true -v /mydocker/redis/share/redis-node-4:/data redis:7.2.4 --cluster-enabled yes --appendonly yes --port 6384docker run -d --name redis-node-5 --net host --privileged=true -v /mydocker/redis/share/redis-node-5:/data redis:7.2.4 --cluster-enabled yes --appendonly yes --port 6385docker run -d --name redis-node-6 --net host --privileged=true -v /mydocker/redis/share/redis-node-6:/data redis:7.2.4 --cluster-enabled yes --appendonly yes --port 6386--net host : 使用宿主机deIP和端口,默认
--privileged=true :容器卷,宿主机地址:docker内部地址
--cluster-enabled yes : 开启redis集群
--appendonly yes : 开启持久化[root@192 ~]# docker ps
CONTAINER ID   IMAGE         COMMAND                   CREATED          STATUS          PORTS     NAMES
6618c6a22bc3   redis:7.2.4   "docker-entrypoint.s…"   7 seconds ago    Up 6 seconds              redis-node-6
edab1b644f47   redis:7.2.4   "docker-entrypoint.s…"   15 seconds ago   Up 14 seconds             redis-node-5
d4cd712628c4   redis:7.2.4   "docker-entrypoint.s…"   23 seconds ago   Up 22 seconds             redis-node-4
7f09330818f1   redis:7.2.4   "docker-entrypoint.s…"   32 seconds ago   Up 31 seconds             redis-node-3
3fab905c25d6   redis:7.2.4   "docker-entrypoint.s…"   40 seconds ago   Up 39 seconds             redis-node-2
8fa8521a26d3   redis:7.2.4   "docker-entrypoint.s…"   3 minutes ago    Up 3 minutes              redis-node-1
[root@192 ~]# 

2.3 进去任意一台redis容器,为6台机器构建集群关系

redis-cli --cluster create 192.168.217.149:6381 192.168.217.149:6382 192.168.217.149:6383 192.168.217.149:6384 192.168.217.149:6385 192.168.217.149:6386 --cluster-replicas 1--cluster-replicas 1 : 表示为每个master创建一个slave节点

2.4 进去6381,查看集群状态

127.0.0.1:6381> cluster info
cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:1
cluster_stats_messages_ping_sent:208
cluster_stats_messages_pong_sent:227
cluster_stats_messages_sent:435
cluster_stats_messages_ping_received:222
cluster_stats_messages_pong_received:208
cluster_stats_messages_meet_received:5
cluster_stats_messages_received:435
total_cluster_links_buffer_limit_exceeded:0127.0.0.1:6381> cluster nodes
826c4e0230f439eb8aca84e3fa6842e0740ee7e2 192.168.217.149:6385@16385 slave 9829684324fd8294650429a00a6ad7dc32ca5357 0 1711277651000 2 connected
2359f4b4eb3d7843ce721a4032b8931f20752cf1 192.168.217.149:6381@16381 myself,master - 0 1711277651000 1 connected 0-5460
da41e72bb921e0c1d013f82df1c481dafb89e91e 192.168.217.149:6386@16386 slave b8b0f5a32e98ef3790108a0009a2e7c8c6115114 0 1711277651740 3 connected
9cd36c05e6125a3251fe7ba937af24da95599617 192.168.217.149:6384@16384 slave 2359f4b4eb3d7843ce721a4032b8931f20752cf1 0 1711277652748 1 connected
b8b0f5a32e98ef3790108a0009a2e7c8c6115114 192.168.217.149:6383@16383 master - 0 1711277652000 3 connected 10923-16383
9829684324fd8294650429a00a6ad7dc32ca5357 192.168.217.149:6382@16382 master - 0 1711277653757 2 connected 5461-10922
127.0.0.1:6381> 

3. 主从容错切换迁移

3.1 数据读写存储

root@192:/data# redis-cli -p 6381
127.0.0.1:6381> keys *
(empty array)
127.0.0.1:6381> set k1 v1
(error) MOVED 12706 192.168.217.149:6383
127.0.0.1:6381> set k2 v2
OK

 添加数据时出现:(error) MOVED 12706 192.168.217.149:6383

需要  redis-cli -p 6381 -c 以集群的方式连接

root@192:/data# redis-cli -p 6381 -c
127.0.0.1:6381> set k2 v2
OK
127.0.0.1:6381> set k1 v1
-> Redirected to slot [12706] located at 192.168.217.149:6383
OK

3.1.1 查看集群情况

root@192:/data# redis-cli --cluster check 192.168.217.149:6381192.168.217.149:6381 (2359f4b4...) -> 1 keys | 5461 slots | 1 slaves.
192.168.217.149:6383 (b8b0f5a3...) -> 1 keys | 5461 slots | 1 slaves.
192.168.217.149:6382 (98296843...) -> 0 keys | 5462 slots | 1 slaves.
[OK] 2 keys in 3 masters.
0.00 keys per slot on average.
>>> Performing Cluster Check (using node 192.168.217.149:6381)
M: 2359f4b4eb3d7843ce721a4032b8931f20752cf1 192.168.217.149:6381slots:[0-5460] (5461 slots) master1 additional replica(s)
S: 826c4e0230f439eb8aca84e3fa6842e0740ee7e2 192.168.217.149:6385slots: (0 slots) slavereplicates 9829684324fd8294650429a00a6ad7dc32ca5357
S: da41e72bb921e0c1d013f82df1c481dafb89e91e 192.168.217.149:6386slots: (0 slots) slavereplicates b8b0f5a32e98ef3790108a0009a2e7c8c6115114
S: 9cd36c05e6125a3251fe7ba937af24da95599617 192.168.217.149:6384slots: (0 slots) slavereplicates 2359f4b4eb3d7843ce721a4032b8931f20752cf1
M: b8b0f5a32e98ef3790108a0009a2e7c8c6115114 192.168.217.149:6383slots:[10923-16383] (5461 slots) master1 additional replica(s)
M: 9829684324fd8294650429a00a6ad7dc32ca5357 192.168.217.149:6382slots:[5461-10922] (5462 slots) master1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
root@192:/data# 

3.2 容错切换迁移

3.2.1 Master6381 宕机

[root@192 ~]# docker ps
CONTAINER ID   IMAGE         COMMAND                   CREATED       STATUS       PORTS     NAMES
6618c6a22bc3   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-6
edab1b644f47   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-5
d4cd712628c4   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-4
7f09330818f1   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-3
3fab905c25d6   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-2
8fa8521a26d3   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-1
[root@192 ~]# docker stop redis-node-1
redis-node-1[root@192 ~]# docker exec -it redis-node-2 /bin/bashroot@192:/data# redis-cli -p 6382 -c127.0.0.1:6382> cluster nodes
b8b0f5a32e98ef3790108a0009a2e7c8c6115114 192.168.217.149:6383@16383 master - 0 1711283738000 3 connected 10923-16383
da41e72bb921e0c1d013f82df1c481dafb89e91e 192.168.217.149:6386@16386 slave b8b0f5a32e98ef3790108a0009a2e7c8c6115114 0 1711283740817 3 connected
9829684324fd8294650429a00a6ad7dc32ca5357 192.168.217.149:6382@16382 myself,master - 0 1711283740000 2 connected 5461-10922
9cd36c05e6125a3251fe7ba937af24da95599617 192.168.217.149:6384@16384 master - 0 1711283739000 7 connected 0-5460
2359f4b4eb3d7843ce721a4032b8931f20752cf1 192.168.217.149:6381@16381 master,fail - 1711283644541 1711283639000 1 disconnected
826c4e0230f439eb8aca84e3fa6842e0740ee7e2 192.168.217.149:6385@16385 slave 9829684324fd8294650429a00a6ad7dc32ca5357 0 1711283741828 2 connected
127.0.0.1:6382> 

结论:master 宕机,slave会自动上位变成master

3.2.2 Master6381 重新启动

[root@192 ~]# docker ps
CONTAINER ID   IMAGE         COMMAND                   CREATED       STATUS       PORTS     NAMES
6618c6a22bc3   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-6
edab1b644f47   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-5
d4cd712628c4   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-4
7f09330818f1   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-3
3fab905c25d6   redis:7.2.4   "docker-entrypoint.s…"   2 hours ago   Up 2 hours             redis-node-2[root@192 ~]# docker start redis-node-1
redis-node-1[root@192 ~]# docker exec -it redis-node-1 /bin/bashroot@192:/data# redis-cli -p 6381 -c127.0.0.1:6381> cluster nodes
da41e72bb921e0c1d013f82df1c481dafb89e91e 192.168.217.149:6386@16386 slave b8b0f5a32e98ef3790108a0009a2e7c8c6115114 0 1711284415980 3 connected
826c4e0230f439eb8aca84e3fa6842e0740ee7e2 192.168.217.149:6385@16385 slave 9829684324fd8294650429a00a6ad7dc32ca5357 0 1711284414000 2 connected
9829684324fd8294650429a00a6ad7dc32ca5357 192.168.217.149:6382@16382 master - 0 1711284413000 2 connected 5461-10922
2359f4b4eb3d7843ce721a4032b8931f20752cf1 192.168.217.149:6381@16381 myself,slave 9cd36c05e6125a3251fe7ba937af24da95599617 0 1711284415000 7 connected
9cd36c05e6125a3251fe7ba937af24da95599617 192.168.217.149:6384@16384 master - 0 1711284416997 7 connected 0-5460
b8b0f5a32e98ef3790108a0009a2e7c8c6115114 192.168.217.149:6383@16383 master - 0 1711284415000 3 connected 10923-16383

结论: 即使之前宕机的Master 重新启动,加入集群之后也是slave。

4. 主从扩容

4.1 新增机器 6387 6388 (run image 变成镜像)

docker run -d --name redis-node-7 --net host --privileged=true -v /mydocker/redis/share/redis-node-7:/data redis:7.2.4 --cluster-enabled yes --appendonly yes --port 6387docker run -d --name redis-node-8 --net host --privileged=true -v /mydocker/redis/share/redis-node-8:/data redis:7.2.4 --cluster-enabled yes --appendonly yes --port 6388[root@localhost ~]# docker ps
CONTAINER ID   IMAGE         COMMAND                   CREATED          STATUS          PORTS     NAMES
d55857af1d99   redis:7.2.4   "docker-entrypoint.s…"   4 seconds ago    Up 3 seconds              redis-node-8
cfa322ef90bc   redis:7.2.4   "docker-entrypoint.s…"   20 seconds ago   Up 18 seconds             redis-node-7
6618c6a22bc3   redis:7.2.4   "docker-entrypoint.s…"   23 hours ago     Up 11 minutes             redis-node-6
edab1b644f47   redis:7.2.4   "docker-entrypoint.s…"   23 hours ago     Up 11 minutes             redis-node-5
d4cd712628c4   redis:7.2.4   "docker-entrypoint.s…"   23 hours ago     Up 8 minutes              redis-node-4
7f09330818f1   redis:7.2.4   "docker-entrypoint.s…"   23 hours ago     Up 11 minutes             redis-node-3
3fab905c25d6   redis:7.2.4   "docker-entrypoint.s…"   23 hours ago     Up 11 minutes             redis-node-2
8fa8521a26d3   redis:7.2.4   "docker-entrypoint.s…"   23 hours ago     Up 11 minutes             redis-node-1

4.2 将6387节点(空槽号)作为master节点加入原集群

[root@localhost ~]# docker exec -it redis-node-7 /bin/bash
root@localhost:/data# redis-cli --cluster add-node 192.168.217.149:6387 192.168.217.149:6381

4.3 第一次检查集群情况

root@localhost:/data# redis-cli --cluster check 192.168.217.149:6381

4.4 重新分配槽号

redis-cli --cluster reshard 192.168.217.149:6381

4.5 第二次检查集群情况

root@localhost:/data# redis-cli --cluster check 192.168.217.149:6381

4.6 为6387主节点分配6388从节点

root@localhost:/data# redis-cli --cluster add-node 192.168.217.149:6388 192.168.217.149:6387 --cluster-slave --cluster-master-id c88d4e7a747ec37c1bea6563dedd87289a6fe367redis-cli --cluster add-node ip:新slave端口 ip:新master端口 --cluster-slave --cluster-master-id slave的编号

4.7 第三次检查集群情况

redis-cli --cluster check 192.168.217.149:6381

5. 主从缩容 (6387和 6388 下线,退出集群)

5.1 删除6388 (从集群中移除6388从节点)

root@localhost:/data# redis-cli --cluster del-node 192.168.217.149:6388 7048f2115ed42bac1c2e53a6ba14ecaf30af4304redis-cli --cluster del-node ip:从机端口 从机节点ID

5.2 将6387(Master)的槽号清空,重新分配 (平均分给其他3个master)

redis-cli --cluster reshard 192.168.217.149:6381

5.3 第一次检查集群

5.4 将6387删除

root@localhost:/data# redis-cli --cluster del-node 192.168.217.149:6387 7048f2115ed42bac1c2e53a6ba14ecaf30af4304redis-cli --cluster del-node ip:端口 节点ID

5.5 第三次检查集群

redis-cli --cluster check 192.168.217.149:6381

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/770947.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

【JDBC编程】基于MySql的Java应用程序中访问数据库与交互数据的技术

꒰˃͈꒵˂͈꒱ write in front ꒰˃͈꒵˂͈꒱ ʕ̯•͡˔•̯᷅ʔ大家好,我是xiaoxie.希望你看完之后,有不足之处请多多谅解,让我们一起共同进步૮₍❀ᴗ͈ . ᴗ͈ აxiaoxieʕ̯•͡˔•̯᷅ʔ—CSDN博客 本文由xiaoxieʕ̯•͡˔•̯᷅ʔ 原创 CSDN …

java switch用法

满足那个条件,就从那个入口进入,没有break就继续(是这样设计的,需要自己加break;),一般都是要加break的。 switch (表达式) 表达式只能是【整型、char、String.】 import java.util.Scanner;public class…

20240325金融读报:融资信用服务平台银行数据安全、银团贷款、绿色贷款要求修订

1、建设融资信用服务平台 提升中小微企业融资便利水平(这平台好像现在就有呀,所以这里是指提升与融合地方平台?) 2、金融部门是一个数据密集型行业,也是一个强监管的行业 3、《银行保险机构数据安全管理办法&#xff0…

C语言重难知识点

C语言重难知识点 if(a=1) 为真函数指针的调用(int)2.9 = 2if(a=1) 为真 int a=0,b=0,c=0; if(a=1)b

微服务day07 -- ES集群

4.集群 单机的elasticsearch做数据存储,必然面临两个问题:海量数据存储问题、单点故障问题。 海量数据存储问题:将索引库从逻辑上拆分为N个分片(shard),存储到多个节点 单点故障问题:将分片数…

Linux C++ 003-运算符

Linux C 003-运算符 本节关键字:Linux、C、运算符 相关库函数: 运算符类型 类型作用算术运算符用于处理四则运算赋值运算符用于将表达式的值赋给变量比较运算符用于表达式的比较,并返回一个真值或假值逻辑运算符用于根据表达式的值返回真值…

python利用xlrd库处理Excel

工作中经常需要处理Excel,所以自己稍微写了一个函数,方便以后自己使用.大家也可以借鉴下. excel_file_name : 这里写Excel的路径,和python同一个目录下的话直接写文件名字即可sheet_name : 写要处理的sheet的名字,默认Sheet1start_row : 开始的行end_row : 结束的行(默认所有行…

Review(一)

🌈个人主页:Rookie Maker 🔥 系列专栏:Rookie review 🏆🏆关注博主,随时获取更多关于IT的优质内容!🏆🏆 😀欢迎来到小田代码世界~ &#x1f601…

DRC检查及丝印的调整

DRC检查及丝印的调整 综述:本文主要讲述AD软件中DRC检查、丝印的调整以及logo的添加的相关步骤,附加logo添加的脚本链接和大量操作图片,使步骤详细直观。 1. 点击“工具”→“设计规则检查”→“运行DRC”。(一开始可以只开启电…

一个程序从编译到运行的全过程

一个程序从编译到运行的全过程 一个程序从编译到运行的全过程编译预处理编译 汇编链接载入虚拟内存用户空间 总结 一个程序从编译到运行的全过程 每次用编译器写完一个程序后,我们会进行调试和执行,将代码的结果输出在我们的电脑屏幕上,但是…

Python爬虫学习完整版

一、什么是爬虫 网络爬虫,是一种按照一定规则,自动抓取互联网信息的程序或者脚本。由于互联网数据的多样性和资源的有限性,根据用户需求定向抓取相关网页并分析也成为如今主流的爬取策略。 1 爬虫可以做什么 你可以爬取网络上的的图片&#…

全民采矿石赚钱小程序源码,附带详细搭建教程

安装教程 1、环境用宝塔Nginxphp7.0或者以下版本 2、可以更换各种模板,懂代码和标签的可以改模板,不懂的可以直接上站 3、上站前记得添加关键词和内容库 4、伪静态在绑定完百度站长之后再添加 目录说明: data/keyword 放关键词 标签&#xff…

研究生复试机试背诵自用

二刷 P3366 【模板】最小生成树 Kruskal模板 背诵 #include<stdio.h> #include<iostream> #include<string.h> #include<algorithm> #define MAXN 5005 #define MAXV 200005 using namespace std; struct node{int u,v,w; }edge[MAXV];int fa[MAXN];i…

OpenLayers基础教程——WebGLPoints图层样式的设置方法

1、前言 前一篇博客介绍了如何在OpenLayers中使用WebGLPoints加载海量数据点的方法&#xff0c;这篇博客就来介绍一下WebGLPoints图层的样式设置问题。 2、样式运算符 在VectorLayer图层中&#xff0c;我们只需要创建一个ol.style.Style对象即可&#xff0c;WebGLPoints则不…

浅谈Webmail邮件还原

Webmail还原&#xff0c;其实也就是HTTP协议的还原&#xff0c;而HTTP协议的还原&#xff0c;核心部分是TCP会话的重组。在TCP会话进行重组之后&#xff0c;再对重组的报文进行HTTP解析&#xff0c;得到Webmail中相应的信息。 由于每个邮件服务商实现Webmail的方式都各不相同&a…

LabVIEW智能降噪系统

LabVIEW智能降噪系统 随着噪声污染问题的日益严重&#xff0c;寻找有效的降噪技术变得尤为关键。介绍了一种基于LabVIEW平台开发的智能降噪系统&#xff0c;该系统能够实时采集环境噪声&#xff0c;并通过先进的信号处理技术实现主动降噪&#xff0c;从而有效改善生活和工作环…

CV论文--2024.3.26

1、DiffusionMTL: Learning Multi-Task Denoising Diffusion Model from Partially Annotated Data 中文标题&#xff1a;DiffusionMTL&#xff1a;从部分注释的数据中学习多任务去噪扩散模型 简介&#xff1a;最近&#xff0c;人们对于从部分标注数据中学习多个密集场景理解任…

qt table 简易封装,样式美化,以及 合并表格和颜色的区分 已解决

在需求中&#xff0c; 难免会使用 table 进行渲染窗口&#xff0c;做一个简单的封装。美化表格最终效果&#xff01;&#xff01;&#xff01; 代码部分 // 显示 20行 20列CCendDetailsInfoTableWidget* table new CCendDetailsInfoTableWidget(20,10);for (int i 0; i < …

【AIGC调研系列】DeepSeek模型的优势和劣势

DeepSeek模型的优势主要包括&#xff1a; 多模态能力&#xff1a;DeepSeek-VL能够在不丢失语言能力的情况下融入多模态能力&#xff0c;能够处理包括逻辑图、网页、公式识别、科学文献、自然图像等多种类型的数据&#xff0c;显示出其强大的通用多模式理解能力[1]。高分辨率图…

实现浏览器复制文本原始样式到wps或office

一、概述 本需求是笔者在协助公司前端工程师的一个需求完成的&#xff0c;需求是在Web页面中复制带有样式的文本并期望在WPS或其他富文本编辑器中保持样式&#xff0c;通常需要使用HTML格式进行复制。大多数现代富文本编辑器&#xff0c;包括WPS&#xff0c;都支持从HTML格式的…