实战:Zookeeper 简介和单点部署ZooKeeper

Zookeeper 简介

ZooKeeper是一个开源的分布式协调服务,它是Apache软件基金会下的一个项目,旨在解决分布式系统中的协调和管理问题。以下是ZooKeeper的详细简介:

一、基本定义

  • ZooKeeper是一个分布式的、开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和HBase的重要组件。

  • 它以Fast Paxos算法为基础,提供了一个简单而强大的分布式环境,可用于构建和管理大规模分布式系统。

二、主要功能

ZooKeeper提供了多种核心功能来实现分布式系统的协调和管理,包括但不限于:

  1. 配置管理:ZooKeeper可以用来管理分布式系统的配置信息。各个节点可以从ZooKeeper中获取配置信息,这样当配置变化时,所有节点可以及时感知并进行相应调整。

  2. 命名服务:ZooKeeper可以用作命名服务,类似于分布式的文件系统。它允许应用程序在ZooKeeper上创建、删除和查找节点,从而实现简单的命名空间管理。

  3. 分布式锁:ZooKeeper提供了分布式锁的支持,允许多个节点在共享资源上进行协调,从而避免并发访问冲突。

  4. 分布式队列:ZooKeeper可以实现分布式队列,用于在多个节点之间传递消息和任务。

  5. 分布式通知:ZooKeeper的Watcher机制可以让客户端监视节点的变化,并在节点状态发生变化时接收通知,实现分布式的事件触发和通知机制。

  6. Leader选举:在ZooKeeper集群中,ZAB(ZooKeeper Atomic Broadcast)协议用于选举Leader节点,Leader负责处理所有客户端的写请求,并将更改广播给其他Follower节点。

三、数据模型

  • ZooKeeper的数据模型的结构与Linux文件系统很类似,整体上可以看作是一棵树,每个节点称做一个ZNode。

  • 在Zookeeper中,znode是一个跟Unix文件系统路径相似的节点,可以往这个节点存储或获取数据。如果在创建znode时Flag设置为EPHEMERAL,那么当创建这个znode的节点和Zookeeper失去连接后,这个znode将不再存在在Zookeeper里。

四、特点

  • 高效性:ZooKeeper提供了高性能的分布式协调服务。

  • 可靠性:ZooKeeper通过其独特的选举机制和数据复制策略,保证了数据的一致性和服务的可靠性。

  • 一致性:ZooKeeper提供强一致性保证,确保在分布式环境中各个节点的数据状态是一致的。

五、应用场景

ZooKeeper在分布式系统中有广泛的应用场景,包括但不限于:

  • 分布式数据库、分布式缓存、分布式计算等各种分布式应用的协调和管理。

  • 实时掌握分布式系统中每个节点的状态,并根据节点状态进行动态调整和优化。

  • 分布式系统中的服务注册与发现、负载均衡等。

六、总结

ZooKeeper作为一个分布式协调服务,为分布式系统提供了高可用性、高性能和强一致性的数据存储和协调能力。它是构建分布式系统和服务的重要基础设施,广泛应用于各种分布式应用中。

单点部署ZooKeeper 

ZooKeeper单点部署相对简单,主要适用于测试环境或小规模应用场景。以下是ZooKeeper单点部署的详细步骤:

一、环境准备

  1. 硬件环境:

    • 准备一台服务器或虚拟机,确保其性能满足ZooKeeper运行的基本需求。

  2. 软件环境:

    • 确保已安装Java环境(JDK 1.8或更高版本),因为ZooKeeper是用Java编写的。

    • 安装wget(如果需要通过wget命令下载ZooKeeper安装包)。

二、下载ZooKeeper安装包

  1. 访问ZooKeeper官网(http://zookeeper.apache.org/)下载最新稳定版本的ZooKeeper安装包。

  2. 使用wget命令下载(如果服务器可以连接公网):

    wget https://dlcdn.apache.org/zookeeper/zookeeper-版本号/apache-zookeeper-版本号-bin.tar.gz
    

    注意替换“版本号”为实际下载的ZooKeeper版本号。

三、安装ZooKeeper

  1. 解压安装包:

    将下载的ZooKeeper安装包解压到指定目录,例如/usr/local/zookeeper

    tar -zxvf apache-zookeeper-版本号-bin.tar.gz -C /usr/local/zookeeper
    
  2. 创建软连接(可选):

    为了方便操作,可以创建一个指向ZooKeeper安装目录的软连接。

    ln -s /usr/local/zookeeper/apache-zookeeper-版本号-bin /usr/local/zookeeper/zk
    

四、配置ZooKeeper

  1. 修改配置文件:

    • 主要配置项包括dataDir(数据目录)、clientPort(客户端端口)等。

    • 如果需要,还可以配置其他高级选项,如tickTimeinitLimitsyncLimit等。

    • 进入ZooKeeper的conf目录,将zoo_sample.cfg文件复制一份并重命名为zoo.cfg

    • 使用文本编辑器(如vim)打开zoo.cfg文件,根据需要进行修改。

如下图所示:

这里只修改了dataDir这个目录,其中data目录需要手动创建。

tickTime:心跳时间,为了确保连接存在的,以毫秒为单位,最小超时时间为两个心跳时间initLimit:多少个心跳时间内,允许其他server连接并初始化数据,如果ZooKeeper管理的数据较大,则应相应增大这个值syncLimit:多少个tickTime内,允许follower同步,如果follower落后太多,则会被丢弃dataDir:用于存放内存数据库快照的文件夹,同时用于集群的myid文件也存在这个文件夹里clientPort:服务的监听端口,默认2181maxClientCnxns:最大并发客户端数,用于防止DOS的,默认值是10,设置为0或不设置是不加限制    

2. 创建数据目录

  1. 确保zoo.cfg中指定的dataDir目录存在,如果不存在,则需要手动创建。

五、启动ZooKeeper服务

  1. 启动服务:

    • 切换到ZooKeeper的bin目录下。

    • 执行./zkServer.sh start命令启动ZooKeeper服务。

  2. 检查服务状态:

    • 执行./zkServer.sh status命令检查ZooKeeper服务的状态。

    • 如果服务成功启动,状态将显示为“standalone”或类似的表示单点运行的信息。

六、验证ZooKeeper服务

   使用ZooKeeper客户端工具:

  • 可以使用ZooKeeper自带的客户端工具(如zkCli.sh)连接到ZooKeeper服务。

  • 执行一些基本操作(如创建、读取、更新、删除节点)来验证ZooKeeper服务是否正常工作。

七、注意事项

  • 防火墙和安全组:确保ZooKeeper的通信端口(默认是2181)在防火墙或安全组中是开放的。

  • 监控和日志:建议配置适当的监控和日志记录机制,以便在出现问题时能够及时发现和解决。

  • 备份和恢复:虽然单点部署的ZooKeeper没有集群的容错能力,但定期备份数据仍然是一个好习惯。

通过以上步骤,您可以成功部署一个ZooKeeper单点实例,并使其在生产环境或测试环境中稳定运行。然而,需要注意的是,单点部署的ZooKeeper在容错性和高可用性方面存在限制,因此在生产环境中建议部署ZooKeeper集群以提高系统的稳定性和可靠性。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/877209.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

系统架构师考点--系统架构设计(下)

大家好。今天总结一下系统架构设计的最后一部分知识点。 一、软件系统的质量属性 软件系统的质量属性 软件系统的质量属性可分为开发期质量属性和运行期质量属性2个部分。 1、开发期质量属性主要指在软件开发阶段所关注的质量属性,主要包含6个方面: …

C++ 关键字与库函数 学习总结

sizeof与strlen 含义 sizeof:是一个操作符,用于计算数据类型或变量的大小(以字节为单位)。在编译时求值strlen: 是一个函数,用于计算字符串的长度(不包括终止符 \0)。在运行时求值不…

【Code】Street-Gaussian代码复现笔记

文章目录 1. EnvironmentBug 1 2. TrainingBug 2Bug 3 1. Environment Follow the original instructions, conda create --name street-gaussians-ns -y python3.8 conda activate street-gaussians-ns pip install --upgrade pippip install torch2.1.2cu118 torchvision0.…

bugku-web-ctf-变量1

<?php error_reporting(0); include "flag1.php"; highlight_file(__file__); if(isset($_GET[args])){$args $_GET[args];if(!preg_match("/^\w$/",$args)){die("args error!");}eval("var_dump($$args);"); } ?> error_r…

扩展------正向代理和反向代理怎么理解?

今天看博客园&#xff0c;突然看到正向代理和反向代理&#xff0c;发现自己还不会就稍微研究了一下。 正向代理----(看做是服务员) 当我们进饭店吃饭&#xff0c;我们不可能会直接去后厨叫厨师给我们做菜&#xff0c;而是通过服务员去通知&#xff0c;这个就叫做正向代理。 再…

当年很流行,现在已经淘汰的Java技术,请不要学了!【建议收藏】

在Java技术的发展历程中&#xff0c;确实有一些曾经流行但现在已经被淘汰或不再推荐使用的技术。了解这些技术可以帮助你避免学习过时的知识&#xff0c;从而更高效地提升自己的技能。 以下是一些曾经流行但现在已经不太推荐学习的Java技术&#xff1a; 1. Servlet 2.x&#x…

AI作图接口要怎么调用呢?

一、什么是AI作图&#xff1f; 基于AI大模型的深度学习算法和大规模的图像数据训练&#xff0c;输入图片和关键词&#xff0c;可生成独特及富有创意的山水风格图片。 二、AI作图使用场景有哪些呢&#xff1f; 1.广告与营销&#xff1a; 为产品制作吸引人的宣传海报、广告图片…

git拉完代码总是自动创建一个新的节点

git拉完代码&#xff0c;总是自动生成弹出这个信息 然后还会在git上面留下一个节点&#xff0c;这个节点没啥用&#xff0c;显示着感觉有点碍事。 而且后续的git push 之后&#xff0c;会覆盖掉自己的git commit 的提示&#xff0c;其他人cr代码的时候看到的是 解决方法&#…

vite + postcss 安装配置

安装 npm install postcss-pxtorem --save-dev配置postcss.config.js 新建 postcss.config.js export default {plugins: {postcss-pxtorem: {rootValue: 16, // 根元素大小&#xff0c;用于转换rem的基准值unitPrecision: 5, // rem的小数位数propList: [*], // 需要转换的…

A股两市继续低开,缩量震荡前行!

今天的A股&#xff0c;让人心情极度炸裂&#xff0c;你们知道是为什么吗&#xff1f;盘面上出现2个重要信号&#xff0c;一起来看看&#xff1a; 1、今天两市低开&#xff0c;让人心情极度炸裂。 2、盘面上出现2个重要信号&#xff1a;一是为了迎接今日上证权益指数问世&#x…

LeetCode刷题笔记第682题:棒球比赛

LeetCode刷题笔记第682题&#xff1a;棒球比赛 题目&#xff1a; 想法&#xff1a; 遍历输入的列表&#xff0c;按照规则将分数和操作依次进行&#xff0c;存储在新建的列表中&#xff0c;最终输出列表中的元素和&#xff0c;代码如下&#xff1a; class Solution:def calPo…

妈吖,看过这个大厂的oracle主键自增,我的信心暴增!信创,国产数据库也能行。

创作不易 只因热爱!! 热衷分享&#xff0c;一起成长! “你的鼓励就是我努力付出的动力” 1.数据库oracle自增主键字段思维导图 在Oracle数据库中&#xff0c;可以通过创建序列&#xff08;SEQUENCE&#xff09;来实现自增功能。但也可以不在数据库中实现&#xff0c;而是通过程…

【Stable Diffusion】(基础篇六)—— embedding

embedding 本系列博客笔记主要参考B站nenly同学的视频教程&#xff0c;传送门&#xff1a;B站第一套系统的AI绘画课&#xff01;零基础学会Stable Diffusion&#xff0c;这绝对是你看过的最容易上手的AI绘画教程 | SD WebUI 保姆级攻略_哔哩哔哩_bilibili 除了大模型和VAE之外…

RewardBench:Evaluating Reward Models for Language Modeling

Leaderboard&#xff1a; https://hf.co/spaces/allenai/reward-bench Code&#xff1a; https://github.com/allenai/reward-bench Dataset&#xff1a; https://hf.co/datasets/allenai/reward-bench 在人类偏好的强化学习&#xff08;RLHF&#xff09;过程中&#xff0c;奖励…

Centos7重装系统保留数据安装方式记录

一、选择手动配置分区 二、选择/分区以后&#xff0c;输入挂载点/&#xff0c;选择标准分区&#xff0c;勾选重新格式化&#xff0c;单击更新设置。这样重装的时候&#xff0c;就格式化/分区内的数据。 三、选择swap分区&#xff0c;勾选重新格式化&#xff0c;单击更新设置…

【数据分享】2024年省市县行政区划数据(最新版本/带审图号/官方发布/免费获取/Shp格式)

省份\地级市\区县这三个级别的行政边界矢量&#xff08;shp格式&#xff09;数据是我们在各项研究中最常用的数据。在我们发表学术论文的时候&#xff0c;一旦涉及到行政边界&#xff0c;在期刊的投稿指南中都明确要求必须使用自然资源地图技术审查中心发布的标准地图底图&…

基于JSP的在线教育资源管理系统

你好呀&#xff0c;我是计算机学姐码农小野&#xff01;如果有相关需求&#xff0c;可以私信联系我。 开发语言&#xff1a;Java 数据库&#xff1a;MySQL 技术&#xff1a;JSP技术 工具&#xff1a;IDEA/Eclipse、Navicat 系统展示 首页 管理员界面 学生界面 教师界面 摘…

【React】详解 Redux 状态管理

文章目录 一、Redux 的基本概念1. 什么是 Redux&#xff1f;2. Redux 的三大原则 二、Redux 的核心组件1. Store2. Action3. Reducer 三、Redux 的使用流程1. 安装 Redux 及其 React 绑定2. 创建 Action3. 创建 Reducer4. 创建 Store5. 在 React 应用中使用 Store6. 连接 React…

Docker安装oracle19c

文章目录 Docker安装oracle19c1. 拉取镜像2. 创建目录并赋权3. 构建容器并启动4. 查看日志5. 登录docker容器里面6. 登录sqlplus 创建PDB用户7. 查看show pdbs7. 切换数据库8. 创建用户9. 授权10. 使用navicat连接11. 参考和感谢 Docker安装oracle19c 1. 拉取镜像 docker pul…

深入分析 Android ContentProvider (八)

文章目录 深入分析 Android ContentProvider (八)ContentProvider 高级使用及最佳实践案例分析&#xff08;续&#xff09;1. 深入了解跨应用数据共享示例&#xff1a;跨应用数据共享的完整实现1. 定义权限2. 定义 ContentProvider3. ContentProvider 实现 2. 实践案例&#xf…