【ETCD】ETCD 架构揭秘:内部各组件概览

在这里插入图片描述

ETCD 的主要组件及它们之间的关联关系如下:

目录

      • 1. Client(客户端)
      • 2. gRPC 接口
      • 3. Etcd Server Main Loop(ETCD 主循环)
      • 4. Raft(共识模块)
      • 5. Peer Etcd Nodes(ETCD 集群节点)
      • 6. MVCC(多版本并发控制)
      • 7. Write Ahead Log(WAL)
      • 8. BoltDB(持久化存储)
      • 总结:组件之间的关联关系

1. Client(客户端)

  • 作用:客户端通过 gRPC 协议与 ETCD 服务器进行通信,发送请求(例如键值存储、查询、删除等操作)。
  • 关联:客户端通过 gRPC 接口将请求发送到 ETCD 服务器。

2. gRPC 接口

  • 作用:gRPC 是 ETCD 对外提供服务的通信接口,负责接收客户端请求并将请求交给 ETCD 服务的主循环进行处理。
  • 关联:gRPC 接口是客户端与 ETCD 服务主循环的桥梁,提供了高效的 RPC 通信机制。

3. Etcd Server Main Loop(ETCD 主循环)

  • 作用:ETCD 的主循环负责处理客户端请求,包括键值存储、事务操作等。它会将请求进一步传递给 Raft 模块或 MVCC 存储层。
  • 关联:
    • 将写请求交给 Raft 模块 处理。
    • 通过 MVCC 管理键值数据的版本。
    • 数据持久化到 WALBoltDB

4. Raft(共识模块)

  • 作用:Raft 是 ETCD 实现分布式一致性的核心模块,它确保所有节点(Leader 和 Follower)之间的数据一致。
    • 处理写操作:Leader 节点接收请求并将其同步给其他 Peer 节点。
    • 数据复制:将操作日志同步到集群中的其他节点。
    • 管理节点状态:选举 Leader、故障恢复等。
  • 关联:
    • 通过 Raft HTTP(P2P) 与其他 Peer Etcd Nodes 进行日志同步。
    • 操作日志被存储到 Write Ahead Log(WAL)
    • 成功的操作通过 MVCC 应用到存储中。

5. Peer Etcd Nodes(ETCD 集群节点)

  • 作用:集群中的其他 ETCD 节点(Peer Nodes)与 Leader 节点进行同步,确保数据副本的一致性。
  • 关联:
    • 通过 Raft HTTP(P2P) 与 Leader 节点通信,接收日志复制。
    • 确保每个节点的数据和状态保持一致。
    • 从 Raft 接收到的操作会存储到本地的 WALBoltDB

6. MVCC(多版本并发控制)

  • 作用:MVCC 是 ETCD 的数据存储机制,管理键值对及其多个版本。每次修改键值对时,都会生成一个新的版本。
  • 关联:
    • 数据修改请求通过 Raft 模块 确认后,会被提交给 MVCC。
    • MVCC 数据最终会持久化存储到 BoltDB
    • MVCC 通过 版本号(revision) 记录数据的历史。

7. Write Ahead Log(WAL)

  • 作用:WAL 记录所有写操作的日志,保证数据在崩溃时的持久化和恢复。
    • 在操作提交到存储(BoltDB)之前,先写入 WAL。
    • 日志可以用于崩溃恢复。
  • 关联:
    • Raft 模块的操作日志首先写入 WAL,保证数据不会丢失。
    • WAL 日志之后被应用到 MVCCBoltDB,实现数据的最终存储。

8. BoltDB(持久化存储)

  • 作用:BoltDB 是 ETCD 的底层存储引擎,它将 MVCC 数据持久化存储到磁盘,提供高效的键值查询和事务支持。
  • 关联:
    • WAL 中的操作日志最终会被写入 BoltDB。
    • MVCC 的数据版本和键值存储都依赖于 BoltDB 进行持久化。

总结:组件之间的关联关系

  1. 客户端 通过 gRPC 接口 与 ETCD 服务通信。
  2. ETCD 主循环 处理客户端请求,涉及 Raft 和 MVCC。
  3. Raft 模块
    • 负责数据的一致性,将操作日志复制到其他 Peer Etcd Nodes
    • 日志操作会先存储到 WAL
  4. WAL 记录操作日志,提供数据恢复支持。
  5. MVCC 处理数据的多版本存储,并最终将数据写入 BoltDB
  6. BoltDB 持久化 MVCC 数据,提供数据存储和查询功能。
  7. Peer Etcd Nodes 通过 Raft 协议与 Leader 节点同步数据,保持集群一致性。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/890033.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

使用 imageio 库轻松处理图像与视频

使用 imageio 库轻松处理图像与视频 imageio 是一个 Python 库,用于读取和写入多种图像和视频格式。它功能强大、易于使用,广泛应用于图像处理、视频编辑和数据可视化等领域。本篇文章将介绍 imageio 的基础功能、常见用法以及高级操作。 一、安装 imag…

乐凡信息智能安全管控方案:助力油气田行业安全管控多方位升级

我国油田地域广阔,分布着大量各种油井,油井开采设备的连续稳定运行是保证石油开采的首要条件。然而,由于油田多位于特殊地理环境中,因而实现油井之间的通信首要问题就是要克服地理环境所带来的限制,传统通信系统的建设…

windows 使用python共享网络给另外一个网卡

# -*- coding: utf-8 -*- import subprocessdef open_share(to_shared_adapter, from_shared_adapter):"""打开以太网的网络共享:return: None"""powershell_script f"""# Register the HNetCfg library (once)# regsvr32 hnetc…

DAOBase 推出 DAO POP:赋能创作者与社区,畅享链上未来

随着时代快速发展,链上生态也在飞速扩张。DAOBase 致力于为社区、创作者和品牌提供赋能,帮助他们充分挖掘去中心化技术的潜力。今天,我们很高兴为大家带来 DAO POP —— 一款彻底改变玩法的功能,让社区代币的发行和管理变得前所未…

用vscode,进行vue开发

使用Visual Studio Code(VSCode)进行Vue.js开发是一个很好的选择,因为VSCode提供了强大的编辑功能以及丰富的插件生态。以下是使用VSCode进行Vue开发的基本步骤: 1. 安装Node.js和npm 首先,确保你的计算机上安装了No…

java-使用druid sqlparser将SQL DDL脚本转化为自定义的java对象

java-使用druid sqlparser将SQL DDL脚本转化为自定义的java对象 一、引言二、环境三、待解析的DDL四、解析后的对象结构五、完整的UT类六、控制台输出总结 一、引言 在日常开发中,有些需要对SQL进行解析的场景,比如读取表结构信息,生成文档、…

深度学习实战智能交通计数

本文采用YOLOv8作为核心算法框架,结合PyQt5构建用户界面,使用Python3进行开发。YOLOv8以其高效的实时检测能力,在多个目标检测任务中展现出卓越性能。本研究针对车辆目标数据集进行训练和优化,该数据集包含丰富的车辆目标图像样本…

rebase ‘A‘ onto ‘master‘ 和 merge ‘master‘ into ‘A‘有什么区别

在Git版本控制系统中,rebase 和 merge 是两种不同的操作,用于合并分支。rebase A onto master 和 merge master into A 虽然最终目的都是将两个分支的更改合并在一起,但它们在处理方式和结果上有所不同。 rebase ‘A’ onto ‘master’ 含义…

前端的Python应用指南(一):快速构建 Web 服务器 - Flask vs Node.js 对比

随着前端开发技术的不断发展,前端开发者的技术栈也在不断扩展。如今,前端开发者不仅要掌握 HTML、CSS、JavaScript,还要掌握后端技术,成为全栈开发者。而在后端技术的选择上,Python 和 Node.js 是两种非常流行的选择。…

MySQL Explain 分析SQL语句性能

一、EXPLAIN简介 使用EXPLAIN关键字可以模拟优化器执行SQL查询语句,从而知道MySQL是如何处理你的SQL语句的。分析你的查询语句或是表结构的性能瓶颈。 (1) 通过EXPLAIN,我们可以分析出以下结果: 表的读取顺序数据读取…

QT:vlc出错处理及重新播放

这个问题一直想解决,昨天认真研究了一下。 要点 视频用的Widget不能重复使用,每次出错后,都要新建。 回调函数的处理。 代码1 关键在于libvlc_event_attach void VideoWidget::play() {libvlc_media_t* media;if (strstr(video_path, &…

力扣hot100——滑动窗口

3. 无重复字符的最长子串 class Solution { public:int lengthOfLongestSubstring(string str) {int ans 0;for (int i 0; i < str.size(); i) {set<int> s;for (int j i; j < str.size(); j) {if (s.find(str[j]) ! s.end()) break;s.insert(str[j]);}ans ma…

C++中的深拷贝和浅拷贝

浅拷贝 浅拷贝&#xff1a;就是简单的赋值操作。 浅拷贝问题&#xff1a;如果有指针指向堆区内存时&#xff0c;不同对象的指针成员指向同一块堆区内存&#xff0c;当对象释放时&#xff0c;该堆区内存会被释放两次。当一个对象修改堆区内存是&#xff0c;另一个对象也随之变…

关于SAP Router连接不稳定的改良

这个也是网上看来的&#xff0c;之前在用的时候也在想是不是建立一个长连接&#xff0c;就不至于断线。今天正好看到。 关于SAP Router连接不稳定的改良 我们在使用SAPRouter时经常会碰到断线&#xff0c;其发生原因有很多&#xff0c;如&#xff1a;网络不稳定、操作间隔时间…

写给Pythoner的前端进阶指南(一):前言-深入学习前端后会有哪些新的机遇

其实很早以前就有学过python做一点小东西&#xff0c;但那时候用matlab更多点&#xff1b;后面也有写一些脚本&#xff0c;但用的比较浅&#xff0c;没有尝试做一些比较大的项目&#xff0c;因为当时没能够找到一整套作出比较炫酷的作品的方法。反而&#xff0c;我在学js的入门…

游泳溺水识别数据集,对9984张原始图片进行YOLO,COCO JSON, VOC XML 格式的标注,平均识别率在91.7%以上

游泳溺水识别数据集&#xff1a; 对9984张原始图片进行YOLO&#xff0c;COCO JSON, VOC XML 格式的标注&#xff0c;平均识别率在91.7&#xff05;以上 &#xff0c;可识别泳池或者水库中是否有人溺水。 数据集分割 训练组98&#xff05; 9818图片 有效集&#xff05;…

Docker的容器编排

目录 1. 什么是容器编排&#xff08;Docker Compose&#xff09;2. 容器编排的功能3. 容器编排文件&#xff08;docker-compose.yml&#xff09;的介绍3.1 文件语法版本3.2 文件基本结构及常见指令 4. Docker Compose命令详解4.1 Docker Compose命令清单4.2 命令格式和常见选项…

Type 类型 总结

GetType、Typeof Type 官网资料 IsAssignableFrom IsAssignableTo 在C#中&#xff0c;Type.IsAssignableFrom方法用于判断一个类型是否可以从另一个类型赋值。它检查源类型是否是目标类型的基类或接口。 isAssignableFrom(Class<?> c) 标识 “当前Class 是否是给定…

温度传感器DS18B20详解

前面我们学习 DHT11 的时候提到了 DS18B20&#xff0c;它有很宽的测温范围&#xff0c;-55C ~ 125C。那么本次我们就来详细介绍一下 DS18B20。 DS18B20 是一种单总线数字温度传感器&#xff0c;它被广泛应用于各种领域&#xff0c;例如气象监测、室内温度控制、工业自动化等。…

基于MNE的EEGNet 神经网络的脑电信号分类实战(附完整源码)

利用MNE中的EEG数据&#xff0c;进行EEGNet神经网络的脑电信号分类实现&#xff1a; 代码&#xff1a; 代码主要包括一下几个步骤&#xff1a; 1&#xff09;从MNE中加载脑电信号&#xff0c;并进行相应的预处理操作&#xff0c;得到训练集、验证集以及测试集&#xff0c;每个…