Zookeeper概述及部署

Zookeeper概述及部署

  • 一、Zookeeper 定义
  • 二、Zookeeper 特点
  • 三、Zookeeper 数据结构
  • 四、Zookeeper 应用场景
  • 五、Zookeeper选举机制
    • ● 第一次启动选举机制
    • ● 非第一次启动选举机制
  • 六、部署 Zookeeper 集群
    • 1.安装前准备
    • 2.安装 Zookeeper

一、Zookeeper 定义

  • Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。

  • Zookeeper的工作机制：从设计模式角度来理解:是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化，Zookeeper就将负责通知已经在Zookeeper上注册的那些观察者做出相应的反应。也就是说 Zookeeper=文件系统+通知机制。

二、Zookeeper 特点

  • Zookeeper: 一个领导者(Leader) ，多个跟随者(Follower) 组成的集群。
  • Zokeepe集群中只要有半数以上节点存活，Zookeeper集群就能正常服务。所以zookeeper适合安装奇数台服务器。
  • 全局数据一致:每个Server保存一份相同的数据副本，Client无论连接到哪个Server,数据都是一致的。
  • 更新请求顺序执行，来自同一个client的更新请求按其发送顺序依次执行，即先进先出。
  • 数据更新原子性，一次数据更新要么成功，要么失败。
  • 实时性，在一定时间范围内，Client能读到最新数据。

三、Zookeeper 数据结构

  • ZooKeeper数据模型的结构与Linux文件系统很类似，整体上可以看作是一棵树，每个节点称做一 个ZNode。每一个ZNode默认能够存储1MB的数据，每个ZNode都可以通过其路径唯一标识。

在这里插入图片描述

四、Zookeeper 应用场景

  • 提供的服务包括:统一命名服务、统一配置管理、统一集群管理、服务器节点动态上下线、软负载均衡等。

● 统一命名服务

  • 在分布式环境下，经常需要对应用/服务进行统一命名，便于识别。例如:IP不容易记住，而域名容易记住。

● 统一配置管理

  • 分布式环境下，配置文件同步非常常见。一 般要求一- 个集群中，所有节点的配置信息是一致的， 比如Kafka集群。对配置文件修改后，希望能够快速同步到各个节点上

  • 配置管理可交由ZooKeeper实现。可将配置信息写入ZooKeeper.上的一个Znode。各个客户端服务器监听这个Znode。一旦
    Znode中的数据被修改，ZooKeeper将 通知各个客户端服务器。

● 统一集群管理

  • 分布式环境中，实时掌握每个节点的状态是必要的。可根据节点实时状态做出一些调整。
  • ZooKeeper可以实现实时监控节点状态变化。可将节点信息写入ZooKeeper上的一个ZNode。监听这个ZNode可获取它的实时状态变化。

● 服务器动态上下线

  • 客户端能实时洞察到服务器上下线的变化。

● 软负载均衡

  • 在Zookeeper中记录每台服务器的访问数，让访问数最少的服务器去处理最新的客户端请求。

五、Zookeeper选举机制

● 第一次启动选举机制

  • (1)服务器1启动，发起一次选举。服务器1投自己一票。此时服务器1票数一票，不够半数以上(3票)，选举无法完成，服务器1状态保持为LOOKING;
  • (2)服务器2启动，再发起一次选举。服务器1和2分别投自己一票并交换选票信息：此时服务器1发现服务器2的myid比自己目前投票推举的(服务器1)大，更改选票为推举服务器2。此时服务器1票数0票，服务器2票数2票，没有半数以上结果，选举无法完成，服务器1，2状态保持LOOKING
  • (3)服务器3启动，发起一次选举。此时服务器1和2都会更改选票为服务器3。此次投票结果:服务器1为0票，服务器2为0票，服务器3为3票。此时服务器3的票数已经超过半数，服务器3当选Leader。 服务器1，2更改状态为FOLLOWING，服务器3更改状态为LEADING;
  • (4) 服务器4启动，发起一次选举。此时服务器1，2，3已经不是L00KING状态，不会更改选票信息。交换选票信息结果：服务器3为3票，服务器4为1票。此时服务器4服从多数，更改选票信息为服务器3，并更改状态为FOLLOWING。
  • (5) 服务器5启动，同4一样当小弟。

在这里插入图片描述

● 非第一次启动选举机制

  • 当ZooKeeper 集群中的一台服务器出现以下两种情况之-一时，就会开始进入Leader选举：
    • 服务器初始化启动。
    • 服务器运行期间无法和Leader保持连接。
  • 而当一台机器进入leader选举流程时，当前集群也可能会处于以下两种状态：

1）集群中本来就已经存在

  • 对于已经存在Leader的情况，机器试图去选举Leader时，会被告知当前服务器的Leader信息，对于该机器来说，仅仅需要和Leader机器建立连接，并进行状态同步即可。

2）集群中确实不存在Leader

  • 假设ZooKeeper由5台服务器组成，SID分别为1、2、3、4、5，ZXID分别为8、8、8、7、7，并且此时SID为3的服务器是Leader。某一时刻，3和5服务器出现故障，因此开始进行Leader选举。

选举Leader规则：
1.EPOCH大的直接胜出
2.EPOCH相同，事务id大的胜出
3.事务id相同，服务器id大的胜出

SID服务器ID。用来唯一标识一台ZooKeeper集群中的机器，每台机器不能重复，和myid一致。
ZXID事务ID。ZXID是一个事务ID，用来标识一次服务器状态的变更。在某一时刻，集群中的每台机器的ZXID值不一定完全一致，这和ZooKeeper服务器对于客户端“更新请求”的处理逻辑速度有关。
Epoch每个Leader任期的代号。没有Leader时同一轮投票过程中的逻辑时钟值是相同的。每投完一次票这个数据就会增加

六、部署 Zookeeper 集群

//准备 3 台服务器做 Zookeeper 集群
192.168.92.11
192.168.92.15
192.168.92.16

1.安装前准备

//关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
setenforce 0//安装 JDK
yum install -y java-1.8.0-openjdk java-1.8.0-openjdk-devel
java -version//下载安装包
官方下载地址：https://archive.apache.org/dist/zookeeper/cd /opt
wget https://archive.apache.org/dist/zookeeper/zookeeper-3.5.7/apache-zookeeper-3.5.7-bin.tar.gz

在这里插入图片描述
在这里插入图片描述

2.安装 Zookeeper

cd /opt
tar -zxvf apache-zookeeper-3.5.7-bin.tar.gz
mv apache-zookeeper-3.5.7-bin /usr/local/zookeeper-3.5.7

在这里插入图片描述

//修改配置文件
cd /usr/local/zookeeper-3.5.7/conf/
cp zoo_sample.cfg zoo.cfgvim zoo.cfg
tickTime=2000   #通信心跳时间，Zookeeper服务器与客户端心跳时间，单位毫秒
initLimit=10    #Leader和Follower初始连接时能容忍的最多心跳数（tickTime的数量），这里表示为10*2s
syncLimit=5     #Leader和Follower之间同步通信的超时时间，这里表示如果超过5*2s，Leader认为Follwer死掉，并从服务器列表中删除Follwer
dataDir=/usr/local/zookeeper-3.5.7/data      ●修改，指定保存Zookeeper中的数据的目录，目录需要单独创建
dataLogDir=/usr/local/zookeeper-3.5.7/logs   ●添加，指定存放日志的目录，目录需要单独创建
clientPort=2181   #客户端连接端口
#添加集群信息
server.1=192.168.92.11:3188:3288
server.2=192.168.92.15:3188:3288
server.3=192.168.92.16:3188:3288server.A=B:C:D
●A是一个数字，表示这个是第几号服务器。集群模式下需要在zoo.cfg中dataDir指定的目录下创建一个文件myid，这个文件里面有一个数据就是A的值，Zookeeper启动时读取此文件，拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。
●B是这个服务器的地址。
●C是这个服务器Follower与集群中的Leader服务器交换信息的端口。
●D是万一集群中的Leader服务器挂了，需要一个端口来重新进行选举，选出一个新的Leader，而这个端口就是用来执行选举时服务器相互通信的端口。

在这里插入图片描述
在这里插入图片描述

//拷贝配置好的 Zookeeper 配置文件到其他机器上
scp /usr/local/zookeeper-3.5.7/conf/zoo.cfg 192.168.92.15:/usr/local/zookeeper-3.5.7/conf/
scp /usr/local/zookeeper-3.5.7/conf/zoo.cfg 192.168.92.16:/usr/local/zookeeper-3.5.7/conf///在每个节点上创建数据目录和日志目录
mkdir /usr/local/zookeeper-3.5.7/data
mkdir /usr/local/zookeeper-3.5.7/logs//在每个节点的dataDir指定的目录下创建一个 myid 的文件
echo 1 > /usr/local/zookeeper-3.5.7/data/myid
echo 2 > /usr/local/zookeeper-3.5.7/data/myid
echo 3 > /usr/local/zookeeper-3.5.7/data/myid

在这里插入图片描述

//配置 Zookeeper 启动脚本
vim /etc/init.d/zookeeper
#!/bin/bash
#chkconfig: 2345 20 90
#description:Zookeeper Service Control Script
ZK_HOME='/usr/local/zookeeper-3.5.7'
case $1 in
start)echo "---------- zookeeper 启动 ------------"$ZK_HOME/bin/zkServer.sh start
;;
stop)echo "---------- zookeeper 停止 ------------"$ZK_HOME/bin/zkServer.sh stop
;;
restart)echo "---------- zookeeper 重启 ------------"$ZK_HOME/bin/zkServer.sh restart
;;
status)echo "---------- zookeeper 状态 ------------"$ZK_HOME/bin/zkServer.sh status
;;
*)echo "Usage: $0 {start|stop|restart|status}"
esac

在这里插入图片描述

//分别启动 Zookeeper
service zookeeper start//查看当前状态
service zookeeper status

在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/3636.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

Word之解决中文和英文混写导致字间距增大的问题(六)

Word之解决中文和英文混写导致字间距增大的问题(六)

简介： CSDN博客专家，专注Android/Linux系统，分享多mic语音方案、音视频、编解码等技术，与大家一起成长！ 优质专栏：Audio工程师进阶系列【原创干货持续更新中……】🚀 人生格言： 人生…
阅读更多...
米家APP方案——蓝牙体温计方案

米家APP方案——蓝牙体温计方案

蓝牙体温计方案的设计原理基于热敏电阻的温度特性。热敏电阻是一种能够根据温度变化改变电阻值的器件。当温度升高时，热敏电阻的电阻值减小，反之亦然。通过测量热敏电阻的电阻值可以推算出当前的温度值。 这个产品用途广泛，方便家庭或者医护人…
阅读更多...
【密码学】一、概述

【密码学】一、概述

概述 1、密码学的发展历史1.1 古代密码时代1.2 机械密码时代1.3 信息密码时代1.4 现代密码时代 2、密码学的基本概念3、密码学的基本属性4、密码体制分类4.1 对称密码体制4.2 非对称加密体制 5、密码分析 1、密码学的发展历史 起因：保密通信和身份认证问题 根据时间…
阅读更多...
TMAM性能分析模型

TMAM性能分析模型

4个倾向性： 前端依赖型：很少出现，这大多数都是由于CPU微指令无法及时的解析和加载造成的。但往往这意味着系统如果无法找出硬件或者微码级别的问题就无法简单的从代码出发优化程序了。 错误预测型：多半是由于系统采用的编译器和…
阅读更多...
LabVIEW - 采集声音并保存 wav 文件

LabVIEW - 采集声音并保存 wav 文件

1. 题目 编写程序，实现用户点击按钮时，采集声音，显示声音波形，对于采集的声音进行低频段、中频段、高频段分别进行适当的比例放大或者衰减，然后重新合成(三段相加即可)，并将合成的声音下入wav格式的文件保存…
阅读更多...
PostgreSQL MVCC的弊端优化方案

PostgreSQL MVCC的弊端优化方案

我们之前的博客文章“我们最讨厌的 PostgreSQL 部分”讨论了大家最喜欢的 DBMS 多版本并发控制 (MVCC) 实现所带来的问题。其中包括版本复制、表膨胀、索引维护和真空管理。本文将探讨针对每个问题优化 PostgreSQL 的方法。 尽管 PostgreSQL 的 MVCC 实现是 Oracle 和 MySQL 等…
阅读更多...
关于 PostgreSQL 删除数据库 - 命令行删除，报错数据库不存在，pgadmin 报错存在会话链接 导致无法删除数据库问题

关于 PostgreSQL 删除数据库 - 命令行删除，报错数据库不存在，pgadmin 报错存在会话链接 导致无法删除数据库问题

序言 测试环境： Windows 10问题 笔者尝试过在 cmd 命令行，使用PostgreSQL 的 psql 工具登录 postgresql，删除某个有问题的数据库，准备新建重载该数据库时，发现 DROP DATABASE database_name ，竟然报错该…
阅读更多...
JAVA前端bootstrap-table表格，全量查数据后也能字段点击排序sort

JAVA前端bootstrap-table表格，全量查数据后也能字段点击排序sort

工程后期改造&#xff0c;加了一层首页展示&#xff0c;该层无需分页所以想在代码层次实现排序&#xff0c;而不是数据库sql 1、后端代码展示如下 private List<QcCheckStatVO> getQcCheckStatList(Map<String, Object> para, String orderByColumn, String isAsc…
阅读更多...
埃科光电在科创板上市：同创伟业、毅达资本为股东，实控人为董宁

埃科光电在科创板上市：同创伟业、毅达资本为股东，实控人为董宁

7月19日&#xff0c;合肥埃科光电科技股份有限公司&#xff08;下称“埃科光电”&#xff0c;SH:688610&#xff09;在上海证券交易所科创板上市。本次上市&#xff0c;埃科光电的发行价为73.33元/股&#xff0c;发行数量为1700万股&#xff0c;募资总额约为12.47亿元&#xff…
阅读更多...
Shell运行原理以及Linux中的权限问题

Shell运行原理以及Linux中的权限问题

目录 一、shell的运行原理 二、Linux权限的概念 2.1 用户账号切换 2.2 仅提升当前指令的权限 2.3 将普通用户添加到信任列表 三、Linux权限管理 3.1 文件访问者的分类 3.2 文件类型和访问权限 3.3 字符权限值的表示方法 3.3.1 字符表示方法 3.3.2 八进制表示法 3.4…
阅读更多...
XSS 攻击的检测和修复方法

XSS 攻击的检测和修复方法

XSS 攻击的检测和修复方法 XSS&#xff08;Cross-Site Scripting&#xff09;攻击是一种最为常见和危险的 Web 攻击&#xff0c;即攻击者通过在 Web 页面中注入恶意代码&#xff0c;使得用户在访问该页面时&#xff0c;恶意代码被执行&#xff0c;从而导致用户信息泄露、账户被…
阅读更多...
使用RESTful风格编写用户增删改查模拟操作

使用RESTful风格编写用户增删改查模拟操作

三种参数接收方式的区别&#xff1a; RequestParam 用于接收url地址传参或表单传参 RequestBody 用于接收json数据 PathVariable 用于接收路径参数&#xff0c;使用{参数名称}描述路径参数 package com.wu.controller;import com.wu.domain.User; import org.springframework.s…
阅读更多...
BUFG/BUFGCE/BUFH/BUFHCE/BUFH/BUFGHCE/BUFMR/BUFMRCE/BUFR/IBUF/IBUFDS

BUFG/BUFGCE/BUFH/BUFHCE/BUFH/BUFGHCE/BUFMR/BUFMRCE/BUFR/IBUF/IBUFDS

本文对BUFG/BUFGCE/BUFH/BUFHCE简单介绍&#xff0c;便于后续查看。 原语的使用&#xff1a;在vivado中找到所要用的原语&#xff0c;直接将其实例化到设计中即可。 文章目录 BUFGBUFGCEBUFHBUFHCEBUFMRBUFRBUFMRCEIBUFIBUFDS 下图为 7 系列 FPGA 时钟架构图&#xff1a; BU…
阅读更多...
在Linux中部署mysql并远程连接

在Linux中部署mysql并远程连接

1. 配置yum仓库 更新密钥 rpm -import https: /repo.mysql.com/RPM-GPG-KEY-mysql-2022 # 安装Mysql yum库 rpm -Uvh http: /repo.mysql.com /mysql57-community-release-el7-7.noarch.rpm 2. 使用yum安装MySQL yum -y install mysql-community-server 3. 安装完成后&#x…
阅读更多...
redis7.0编译安装 + bash安装脚本

redis7.0编译安装 + bash安装脚本

以下操作在debian11下演示&#xff0c;ubuntu通用&#xff0c;其它系列linux自行安装依赖&#xff0c;其余一样 以7.0.12版本为例进行安装 最后的bash脚本是对前面的操作的封装&#xff0c;一键即配置完成&#xff0c;即可使用 一、编译安装 1.安装依赖 apt-get install bui…
阅读更多...
Appium+python自动化（十二）- Android UIAutomator终极定位凶器（超详解）

Appium+python自动化（十二）- Android UIAutomator终极定位凶器（超详解）

简介 乍眼一看&#xff0c;小伙伴们觉得这部分其实在异性兄弟那里就做过介绍和分享了&#xff0c;其实不然&#xff0c;上次介绍和分享的大哥是uiautomatorviewer&#xff0c;是一款定位工具。今天介绍的是一个java库&#xff0c;提供执行自动化测试的各种API。 Android团队在4…
阅读更多...
数据结构（王道）——数据结构之 二叉树

数据结构（王道）——数据结构之 二叉树

一、数据结构之 二叉树概念&#xff1a; 特殊的二叉树结构&#xff1a; 满二叉树完全二叉树 二叉排序树 平衡二叉树 二叉树基本概念总结&#xff1a; 二、二叉树的常用性质&#xff1a; 1、【二叉树】的叶子结点比二分支结点多一个 2、【m叉树】的第i层至多有m^(i-1)个结点 3、…
阅读更多...
关于Qt For android第一次编译时出现的问题

关于Qt For android第一次编译时出现的问题

搞了三四天&#xff0c;搞的快崩溃了&#xff0c;问题提示为 FAILURE: Build failed with an exception.* What went wrong: A problem occurred configuring root project android-build. > Could not resolve all artifacts for configuration :classpath.> Could not…
阅读更多...
pytorch 2.0初探：和pytorch 1.13的速度对比

pytorch 2.0初探：和pytorch 1.13的速度对比

看到pytorch2.0出来了&#xff0c;而且宣传提速明显&#xff0c;一行代码即可提速43%左右&#xff1a; compiled_model torch.compile(model) We then measure speedups and validate accuracy across these models. Since speedups can be dependent on data-type, we measu…
阅读更多...
真正的理解WPF中的TemplatedParent

真正的理解WPF中的TemplatedParent

童鞋们在WPF中经常看到 TemplatedParent ，或者经常看到下面的用法： {Binding RelativeSource={RelativeSource TemplatedParent}, Path=Content} 是不是看的一脸蒙圈？ 先看官方文档： 意思是 和这个控件的 模板上的 父亲，如果这个控件不是模板创建的，那么这个值就…
阅读更多...
最新文章

Copyright @ 2022~2023