Redis 3.0.2集群搭建以及相关问题汇总

Redis3 正式支持了 cluster,是为了解决构建redis集群时的诸多不便

(1)像操作单个redis一样操作key,不用操心key在哪个节点上
(2)在线动态添加、删除redis节点,不用停止服务
(3)根据节点性能,动态分配不同数量的key到不同redis节点

(4)每个节点都配有slave,并自动监测和切换

 

Redis3 cluster 中增加了一个重要概念:

hash slot(哈希槽),共有16384个slot
key不是直接放入redis中了,而是放入slot中,再把slot放入redis中

根据keyhash值计算其所在的slot,再根据slot和redis节点的对应关系,找到此slot所在的节点,然后到这个节点对key进行操作

例如现有3个redis节点,每个节点各负责一半数量的slot,16384/3 = 5461个
现在想添加一个redis节点,可以从 节点1、节点2、节点3 中各拿出一部分的slot,移到新节点
每个redis节点中的slot数量可以不一致,根据节点性能适当分配
进入集群需要用redis -c -p 7000    -c是enable cluster   p指定进入端口
搭建集群遇到的问题:
由于教程里面给出的集群的地址是127.0.0.1:7000、......,在java程序访问的时候是无法获取节点信息的,所以我需要重新搭建集群,然后停掉所有节点,重新搭建的时候,报出了如下错误,可知是因为有些配置文件以及数据没有删除。将其全部删除干净即可。
[ERR] Node 172.168.63.202:7001 is not empty.
Either the nodealready knows other nodes (check with CLUSTER NODES) or contains some key in database 0.
find / -name dump.rdb 
rm -f /usr/redis/cluster/7002/redis7002/src/dump.rdb 
rm -f /usr/redis/cluster/7004/redis7004/src/dump.rdb
rm -f /usr/redis/cluster/7005/redis7005/src/dump.rdb
rm -f /usr/redis/cluster/7001/redis7001/src/dump.rdb
rm -f /usr/redis/cluster/7000/redis7000/src/dump.rdb
rm -f /usr/redis/cluster/7003/redis7003/src/dump.rdb
rm -f /usr/redis/master/redis-3.0.7/src/dump.rdb
find / -name dump.rdb
find / -name appendonly.aof
rm -f /usr/redis/cluster/7002/redis7002/src/appendonly.aof
rm -f /usr/redis/cluster/7004/redis7004/src/appendonly.aof
rm -f /usr/redis/cluster/7005/redis7005/src/appendonly.aof
rm -f /usr/redis/cluster/7001/redis7001/src/appendonly.aof
rm -f /usr/redis/cluster/7000/redis7000/src/appendonly.aof
rm -f /usr/redis/cluster/7003/redis7003/src/appendonly.aof
find / -name appendonly.aof
find / -name nodes.conf
rm -f /usr/redis/cluster/7002/redis7002/src/nodes.conf
rm -f /usr/redis/cluster/7004/redis7004/src/nodes.conf
rm -f /usr/redis/cluster/7005/redis7005/src/nodes.conf
rm -f /usr/redis/cluster/7001/redis7001/src/nodes.conf
rm -f /usr/redis/cluster/7000/redis7000/src/nodes.conf
rm -f /usr/redis/cluster/7003/redis7003/src/nodes.conf
find / -name nodes.conf
 
#创建集群
#!/bin/sh
cd /usr/redis/cluster/7000/redis7000/src/
./redis-server ../redis.conf
cd /usr/redis/cluster/7001/redis7001/src/
./redis-server ../redis.conf
cd /usr/redis/cluster/7002/redis7002/src/
./redis-server ../redis.conf
cd /usr/redis/cluster/7003/redis7003/src/
./redis-server ../redis.conf
cd /usr/redis/cluster/7004/redis7004/src/
./redis-server ../redis.conf
cd /usr/redis/cluster/7005/redis7005/src/
./redis-server ../redis.conf
cd /usr/redis/cluster/7000/redis7000/src/
./redis-trib.rb create --replicas 1 192.168.10.102:7000 192.168.10.102:7001 192.168.10.102:7002 192.168.10.102:7003 192.168.10.102:7004 192.168.10.102:7005
 

#集群启动关闭:
#!/bin/sh
/usr/redis/cluster/7000/redis7000/src/redis-cli -p 7000 shutdown
/usr/redis/cluster/7001/redis7001/src/redis-cli -p 7001 shutdown
/usr/redis/cluster/7002/redis7002/src/redis-cli -p 7002 shutdown
/usr/redis/cluster/7003/redis7003/src/redis-cli -p 7003 shutdown
/usr/redis/cluster/7004/redis7004/src/redis-cli -p 7004 shutdown
/usr/redis/cluster/7005/redis7005/src/redis-cli -p 7005 shutdown
if [ $(ps -ef | grep -c redis | grep -cv grep) -gt 1 ]
then echo "集群关机失败,请检查节点"
else
 echo "集群全部关闭,ok"
fi
 
//集群搭建教程 http://redis.io/topics/cluster-tutorial

//集群搭建教程 http://blog.csdn.net/yubinpll9110/article/details/51373890

 

 这里创建6个redis节点,其中三个为主节点,三个为从节点。

    redis和端口对应关系:

    主服务器

    127.0.0.1:7000

    127.0.0.1:7001

    127.0.0.1:7002

    从服务器:
    127.0.0.1:7003
    127.0.0.1:7004
    127.0.0.1:7005

    步骤:
    1,下载redis。官网下载3.0.0版本,之前几的版本不支持集群模式

    下载地址:http://download.redis.io/releases/redis-3.0.0.tar.gz
    2:上传服务器,解压,编译
    tar -zxvf redis-3.0.0-rc2.tar.gz
    mv redis-3.0.0-rc2.tar.gz redis3.0
    cd /usr/local/redis3.0
    make & make install


    3:创建集群需要的目录并拷贝redis
    mkdir -p /usr/local/cluster
    mkdir -p /usr/local/cluster/7000
    mkdir -p /usr/local/cluster/7001
    mkdir -p /usr/local/cluster/7002
    mkdir -p /usr/local/cluster/7003
    mkdir -p /usr/local/cluster/7004
    mkdir -p /usr/local/cluster/7005
    cp -rf /usr/local/redis3.0/* /usr/local/cluster/7000/
    cp -rf /usr/local/redis3.0/* /usr/local/cluster/7001/
    cp -rf /usr/local/redis3.0/* /usr/local/cluster/7002/
    cp -rf /usr/local/redis3.0/* /usr/local/cluster/7003/
    cp -rf /usr/local/redis3.0/* /usr/local/cluster/7004/
    cp -rf /usr/local/redis3.0/* /usr/local/cluster/7005/


    4:修改配置文件redis.conf

    vi /usr/local/cluster/7000/redis.conf

    ##修改配置文件中的下面选项
    port 7000
    daemonize yes
    cluster-enabled yes
    cluster-config-file nodes.conf
    cluster-node-timeout 5000
    appendonly yes


    #同样再对其它配置文件进行修改
    vi /usr/local/cluster/7001/redis.conf
    vi /usr/local/cluster/7002/redis.conf
    vi /usr/local/cluster/7003/redis.conf
    vi /usr/local/cluster/7004/redis.conf
    vi /usr/local/cluster/7005/redis.conf
    ##注意:不同的目录配置不同的redis.conf中的port


    5:启动6个redis

    cd /usr/local/cluster/7000/src
    redis-server ../redis.conf
    cd /usr/local/cluster/7001/src
    redis-server ../redis.conf
    cd /usr/local/cluster/7002/src
    redis-server ../redis.conf
    cd /usr/local/cluster/7003/src
    redis-server ../redis.conf
    cd /usr/local/cluster/7004/src
    redis-server ../redis.conf
    cd /usr/local/cluster/7005/src
    redis-server ../redis.conf

    ##启动之后使用命令查看redis的启动情况ps -ef|grep redis


    6,创建redis集群
    cd /usr/local/redis3.0/src
    ./redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005

    6.1执行上面的命令的时候会报错,因为是执行的的脚本,需要
    错误内容:/usr/bin/env: ruby: No such file or directory
    所以需要安装ruby的环境,这里推荐使用yum install ruby


    yum install ruby


    6.2然后再执行第步的创建集群命令,还会报错,提示缺少rubygems组件
    错误内容:
    ./redis-trib.rb:24:in `require': no such file to load -- rubygems (LoadError)
    from ./redis-trib.rb:24
    yum install rubygems


    6.3再次执行第步的命令,还会报错,提示不能加载redis,是因为缺少redis的接口
    错误内容:
    /usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `gem_original_require': no such file to load -- redis (LoadError)
    from /usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `require'
    from ./redis-trib.rb:25


    gem install redis
    这里可能无法安装,因为无法连接gem服务器:
    [@zw_22_90 src]# gem install redis --version 3.0.0
    ERROR: Could not find a valid gem 'redis' (= 3.0.0) in any repository
    ERROR: While executing gem ... (Gem::RemoteFetcher::FetchError)

如何使用?
$ gem sources --remove https://rubygems.org/
$ gem sources -a https://ruby.taobao.org/
$ gem sources -l
*** CURRENT SOURCES ***https://ruby.taobao.org
# 请确保只有 ruby.taobao.org
$ gem install rails



    6.4 再次执行第步的命令,正常执行
    输入yes,然后配置完成。
    [@zw_22_90 src]# ./redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005
    >>> Creating cluster
    Connecting to node 127.0.0.1:7000: OK
    Connecting to node 127.0.0.1:7001: OK
    Connecting to node 127.0.0.1:7002: OK
    Connecting to node 127.0.0.1:7003: OK
    Connecting to node 127.0.0.1:7004: OK
    Connecting to node 127.0.0.1:7005: OK
    >>> Performing hash slots allocation on 6 nodes...
    Using 3 masters:
    127.0.0.1:7000
    127.0.0.1:7001
    127.0.0.1:7002
    Adding replica 127.0.0.1:7003 to 127.0.0.1:7000
    Adding replica 127.0.0.1:7004 to 127.0.0.1:7001
    Adding replica 127.0.0.1:7005 to 127.0.0.1:7002
    M: 2022f24d581b4a7c3342e3245c32927cbd5ec16d 127.0.0.1:7000
    slots:0-5460 (5461 slots) master
    M: 37b7008f80f8c21a698da8cb1f1b32db8c0c415c 127.0.0.1:7001
    slots:5461-10922 (5462 slots) master
    M: ac6dc5fa96e856b34c1ba4c3814394e4ebb698dd 127.0.0.1:7002
    slots:10923-16383 (5461 slots) master
    S: b5b76d70bbb0dbf3e7df8a38f1259e95e2054721 127.0.0.1:7003
    replicates 2022f24d581b4a7c3342e3245c32927cbd5ec16d
    S: 6881f8fef9c25da486f320ebf2ead39c1502db4c 127.0.0.1:7004
    replicates 37b7008f80f8c21a698da8cb1f1b32db8c0c415c
    S: f090526d32cced97731eef2a2e1722a7bac7d9ea 127.0.0.1:7005
    replicates ac6dc5fa96e856b34c1ba4c3814394e4ebb698dd
    Can I set the above configuration? (type 'yes' to accept): yes
    >>> Nodes configuration updated
    >>> Assign a different config epoch to each node
    >>> Sending CLUSTER MEET messages to join the cluster
    Waiting for the cluster to join...
    >>> Performing Cluster Check (using node 127.0.0.1:7000)
    M: 2022f24d581b4a7c3342e3245c32927cbd5ec16d 127.0.0.1:7000
    slots:0-5460 (5461 slots) master
    M: 37b7008f80f8c21a698da8cb1f1b32db8c0c415c 127.0.0.1:7001
    slots:5461-10922 (5462 slots) master
    M: ac6dc5fa96e856b34c1ba4c3814394e4ebb698dd 127.0.0.1:7002
    slots:10923-16383 (5461 slots) master
    M: b5b76d70bbb0dbf3e7df8a38f1259e95e2054721 127.0.0.1:7003
    slots: (0 slots) master
    replicates 2022f24d581b4a7c3342e3245c32927cbd5ec16d
    M: 6881f8fef9c25da486f320ebf2ead39c1502db4c 127.0.0.1:7004
    slots: (0 slots) master
    replicates 37b7008f80f8c21a698da8cb1f1b32db8c0c415c
    M: f090526d32cced97731eef2a2e1722a7bac7d9ea 127.0.0.1:7005
    slots: (0 slots) master
    replicates ac6dc5fa96e856b34c1ba4c3814394e4ebb698dd
    [OK] All nodes agree about slots configuration.
    >>> Check for open slots...
    >>> Check slots coverage...
    [OK] All 16384 slots covered.


    至此redis集群即搭建成功!


    7,redis-cli命令进入集群环境
    [@zw_22_90 src]# redis-cli -c -p 7000

    127.0.0.1:7000> quit;

 

 

 

 

 

 

 

 

转载于:https://www.cnblogs.com/ClearX/p/5803515.html

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/470239.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

react-router的使用(三)——路由的嵌套

一、路由的嵌套 在开发中,路由之间是存在嵌套关系的。 这里我们假设about页面中有三个页面内容: 企业历史、企业文化和联系我们;点击不同的链接可以跳转到不同的地方,显示不同的内容; 二、手动路由跳转 目前我们实现…

如何阅读一本书 pdf_《如何阅读一本书》:一本书,四个层次,看阅读小白如何逆袭?...

“读书不是为了雄辩和驳斥,也不是为了轻信和盲从,而是为了思考和权衡。”这是培根的一句名言,我们都曾经被这样的读书警句激励的斗志昂扬,于是立下目标一年或是一个月要读多少本书,结果发现一切是徒劳。你是否曾经斗志…

React Hooks的使用(一)——useState、useEffect解析

一、为什么需要Hook? Hook 是 React 16.8 的新增特性,它可以让我们在不编写class的情况下使用state以及其他的React特性(比如生命周期)。 我们先来思考一下class组件相对于函数式组件有什么优势?比较常见的是下面的优势&#xf…

python长沙_长沙python

本文转自量子位(ID:QbitAI) 边策 鱼羊 发自 凹非寺 量子位 报道 | 公众号 QbitAI 只用99行代码,你也可以像《冰雪奇缘》里的艾莎公主一样拥有冰雪魔法。虽然你不能在现实世界中肆意变出魔法,但却能在计算机的虚拟世界挥洒特效。或许你不知道,…

sed

sed -n 10p text.txt 输出第10行转载于:https://www.cnblogs.com/ssyuxue/p/5804857.html

React Hooks的使用(二)——useContext、useReducer、useCallback、useMemo解析

一、useContext的使用 在之前的开发中,我们要在组件中使用共享的Context有两种方式: 第一种方式:类组件可以通过 类名.contextType MyContext方式,在类中获取context; 第二种方式:多个Context或者在函数…

凸多边形面积_C++计算任意多边形的面积

任意多边形的面积计算_拾忆楓灵的博客-CSDN博客​blog.csdn.net计算任意多边形的面积 - tenos - 博客园​www.cnblogs.com完美解决计算3D空间任意多边形面积_Studiouss的博客-CSDN博客​blog.csdn.net求多边形面积公式(已知顶点坐标)_扬帆起航-CSDN博客​…

springContext

方法一 package com.hsh.utils; import org.springframework.beans.BeansException;import org.springframework.context.ApplicationContext;import org.springframework.context.ApplicationContextAware;import org.springframework.stereotype.Component;Componentpublic c…

React Hooks的使用(三)——useRef、useImperativeHandle、useLayoutEffect解析、自定义Hook

一、useRef useRef返回一个ref对象,返回的ref对象再组件的整个生命周期保持不变。 最常用的ref是两种用法: 用法一:引入DOM(或者组件,但是需要是class组件)元素; 案例一:引用DOM …

python制作聊天机器人原理_用 Python 来做一个聊天机器人吧!(一)

在我的一个回答里,我提到了用 Python 搭建聊天机器人。从今天开始,我就带着大家从0开始搭建一个聊天机器人。(顺便说一句,我喜欢把链接像上面这样加在文字里,如果找不到文中所说的资源,可以看看周围有没有链接。)准备工…

python子类分配

原问题是将左边样式变成右边样式: 即有父类和子类,父类包括多个子类,怎样将子类匹配到父类下面的问题 代码如下 1 #!/usr/bin/python3.42 # -*- coding: utf-8 -*-3 4 arr1 ["S01","S01","S01","S02&quo…

react 网易云音乐实战项目笔记

0、项目规范 一、路由相关 npm i react-router-dom npm i react-router-config // 用于配置路由映射的关系数组1. 路由重定向 访问 /路径 》 重定向到 /discover路径 2. 二级路由: 二、网络请求相关 npm i axios页面中使用暴露 出来的request发送网络请求&#…

catchlog是什么软件_Log 重要性

有一项目.Linux Tomcat Jdk1.6 配置.第一版已经完成,部署成功.但很长时间过去了.一年有余,客户突然要加个小功能,且还有个地方要改.功能,对编码的难度是微乎其微的.由于改动的功能比较偏,所以回归测试也比较轻松的通过.但在再次部署的时候出现了.众所周知,JAVA开发最终需要的…

java 几个线程池的理解

http://www.cnblogs.com/dolphin0520/p/3932921.html 这个文章写的很好 转载于:https://www.cnblogs.com/elnino/p/5807713.html

react项目打包

一、react项目打包 对于使用脚手架创建的项目,打包是一件非常容易的事情: yarn build其他文件没有太多要解析的,我们看一下js文件: [hash].chunk.js 代表是所有依赖的第三方库, vendor(第三方库) 的代码&#xff1b…

spark应用程序转换_Spark—RDD编程常用转换算子代码实例

Spark—RDD编程常用转换算子代码实例Spark rdd 常用 Transformation 实例:1、def map[U: ClassTag](f: T > U): RDD[U] 将函数应用于RDD的每一元素,并返回一个新的RDDpackagetop.ruandbimportorg.apache.spark.{SparkConf, SparkContext}object Rdd…

struts2中一些常用的写法 记录

1.对日期进行处理 Date current new Date(); java.text.SimpleDateFormat sdf new java.text.SimpleDateFormat( "yyyy-MM-dd HH:mm:ss"); String time sdf.format(current); 或者: 插入当前时间:pstmt.setDate(4,new java.sql.Date(new ja…

React SSR

一、为什么需要SSR呢? 单页面富应用的局限: 之前我们开发的应用程序,如果直接请求可以看到上面几乎没有什么内容。 但是为什么我们页面可以看到大量的内容呢? 因为当我们请求下来静态资源之后会执行JS,JS会去请求数…

linux 命令 读phy_PHY LINUX (转载整理)

每每分析网络问题的时候,总要梳理层次关系,本想自己写一个关于PHY的文档,找到网上有人写的一篇比较好,所以转载下来,仅供初学者参考。以太网 MAC(链路层)PHY(物理层/RTL8201F,88E1111);集成型DM9000,RTL813…

Laravel框架开发规范-修订版

1.PHP编码规范 1.1 标签 PHP 程序可以使用<?php ?>或<? ?>来界定PHP代码 在HTML 页面中嵌入纯变量时&#xff0c;使用<? ?>这样的形式 纯PHP类文件&#xff0c;文件开始标签使用<?php&#xff0c;闭合标签?>必须省略 1.2 编码 PHP文件必须使用…