【MySQL】聊聊数据库高可用

对于任何一个互联网公司来说,必定涉及到存储系统,而一般主流的使用MySQL进行存储数据,但是如果只是部署一台数据库,数据丢失的话,其实没有办法进行有效的恢复,那么就会造成一定的损失。要么就是直接的损失,比如针对对账、支付系统,一旦数据金额不对,那么影响非常大。另一种是由于数据系统出现故障,导致业务受到影响。

在分布式系统中,为了实现数据的高可用,一般的方式就是采用数据复制、分片。说白了就是将一份数据同时存储多份,副本可以提供读写功能,或者只提供备份功能。

数据备份和恢复

全量备份

全量备份其实就是将从数据开始存储到现在时间点 全部数据进行备份。然后出现数据问题的时候,在执行全量备份的SQL文件。
mysql提供的 mysqldump 就是执行全量备份的。
我使用的是8.0 一直执行报错。

mysqldump -uroot -prootroot --all-databases > /tmp/all.sql

全量备份虽然可以保存某一时刻之前的所有数据,但是由于保存的是全部的数据,所以进行恢复的时候,对于数据库服务器的CPU、IO都会占用比较高。并且之后新增加的数据无法进行恢复。所以需要增量备份。

增量备份

增量备份其实就是试试备份,使用的就是bin log文件。mysql的每次更新数据操作,都会记录到Binlog中。并且binlog可以进行回放的。

show VARIABLES like '%log_bin%';

在这里插入图片描述
可以看到默认是开启binlog的。还有对应binlog的存储地址,索引位置。

show master status;

显示正在写入的binlog文件,当前位置。
在这里插入图片描述
所以配合使用全量+增量备份,可以保证数据即使丢失,也可以进行恢复。

  • 不要把数据都只存储在一个服务器上。
  • 回放binlog文件,时间点稍微提前一点。

配置MySQL HA实现高可用

上述虽然使用全量和增量的备份方式,但是当出现数据故障的时候,如果在去进行数据恢复,这个时间是不可预估的。所以更好的方式是同时启用备用库,实时同步主库的binlog文件。一旦主库宕机,立马切到备用库。这就是MySQL的HA方案。

更新数据流程

  • 主库进行更新数据然后写入bin log
  • 主库更新存储引擎中的数据
  • 返回客户端成功响应
  • 主库把binlog复制从库
  • 从库回放binlog,更新存储引擎中数据。

正常情况下,主从之间的延迟大概在毫秒级别,但是当出现主从之间数据延迟过高的时候,从库就获取不到最新的数据。并且一般数据库都是先繁忙,然后性能下降,最终宕机。这种情况下,如果我们直接切换从库,那么从库的数据就可能丢失部分数据。并且后续没有办法进行恢复,因为数据是冲突的。

所以在主库宕机并且主从有延时的情况下,是切换到从库继续提供服务,还是为了保证数据一致性,不切,是一个权衡。
也就是数据一致性和可用性之前权衡,则中的方式也有,但是需要主库写完从库之后,在返回客户端成功写入数据。如果一个从库的话,可能回阻塞。所以一般就是采用2台从库,一台主库。

在这里插入图片描述

小结

本篇主要介绍了数据恢复,全量和增量复制,高可用依靠的就是数据复制,数据复制其实就是将数据从一台复制到另一台。而在复制的过程中,选择同步复制、还是异步复制。等都需要结合业务进行选择。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/76940.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

写代码中碰到的错误

bind绑定类内成员导致 "no matching function for call to ..." 当bind绑定类内成员时,需要指明绑定的成员所在类的位置。 上面未指明Remove函数在哪个类中从而导致错误。 此外 bind 的函数指针类型是const类型的,都需要添加 const 修饰。 S…

《TCP/IP网络编程》阅读笔记--标准I/O和I/O流分离

1--标准I/O 1-1--标准I/O的优缺点 标准 I/O 函数的优点: ① 具有良好的移植性:为了支持所有操作系统(编译器),标准 I/O 函数均按照 ANSI C 标准定义的; ② 利用 I/O 缓冲提高性能:通过缓冲区缓…

【Linux环境】基础开发工具的使用:yum软件安装、vim编辑器的使用

​👻内容专栏: Linux操作系统基础 🐨本文概括: yum软件包管理、vim编辑器的使用。 🐼本文作者: 阿四啊 🐸发布时间:2023.9.12 Linux软件包管理 yum 什么是软件包 在Linux下安装软件…

ShopXO商城系统文件上传0Day代审历程

Git仓库: https://github.com/gongfuxiang/shopxo简介: 两天攻防中,某政局内网横向发现多网段服务器,该服务器搭建了ShopXO商城系统(后来发现是开发临时搭建的,准备做二开用的)。结果花了30来秒审了个垃圾Day拿下该服…

INFINI Easysearch 与兆芯完成产品兼容互认证

近日,极限科技旗下软件产品 INFINI Easysearch 搜索引擎软件 V1.0 与兆芯完成兼容性测试,功能与稳定性良好,并获得兆芯产品兼容互认证书。 此次兼容适配基于银河麒麟高级服务器操作系统 V10 SP3 平台与兆芯 ZX-C、ZX-C、KX-5000、KX-6000、K…

防火墙 FireWall

这里写自定义目录标题 一、概述二、防火墙分类三、防火墙性能四、硬件防火墙定义五、硬件防火墙作用(拓扑图 ups)六、硬件防火墙品牌七、软件防火墙八、iptables一、iptables是什么?二、netfilter/iptables功能三、iptables概念四、iptables中…

无涯教程-JavaScript - DB函数

描述 DB函数使用固定余额递减法返回指定期间内资产的折旧。 语法 DB (cost, salvage, life, period, [month])争论 Argument描述Required/OptionalCostThe initial cost of the asset.RequiredSalvageThe value at the end of the depreciation (sometimes called the salv…

基于SSM的助学贷款管理系统

末尾获取源码 开发语言:Java Java开发工具:JDK1.8 后端框架:SSM 前端:采用JSP技术开发 数据库:MySQL5.7和Navicat管理工具结合 服务器:Tomcat8.5 开发软件:IDEA / Eclipse 是否Maven项目&#x…

手撕代码是程序员的基本功吗?

前言: 现在众多企业都要求在面试中用“手撕代码”来考验应聘者的代码能力,你觉得手敲代码是否可以体现真实的基础实力? 本期话题: 1、你觉得手撕代码是程序员的基本功吗? 2、为什么会用“手撕代码”来考验程序员能力&a…

vue学习之属性绑定

内容渲染 采用 &#xff1a;进行属性渲染创建 demo3.html,内容如下 <!DOCTYPE html> <html lang"en"><head><meta charset"UTF-8"><meta name"viewport" content"widthdevice-width, initial-scale1.0"&…

c++day4

仿照string类&#xff0c;完成myString 类 #include <iostream> #include<cstring>using namespace std; class myString {private:char *str; //记录c风格的字符串int size; //记录字符串的实际长度public://无参构造myString():size(10){str…

Datax 数据同步-使用总结(二)

一、前言 这部分主要记录 datax 实现增量同步的方案。 二、核心思路 结合datax 提供的preSql、 postSql以及占位符&#xff0c;外加另外一张表同步日志表来记录相关同步信息。 三、版本迭代 3.1 初版本 where tbq.opera_date > cast(date_format(DATE_SUB(NOW(), inte…

SpringMVC之文件上传下载

SpringMVC之文件上传下载 一、文件上传二、文件下载三、多文件上传 一、文件上传 配置多功能视图解析器&#xff08;spring-mvc.xml&#xff09;&#xff1a;在Spring MVC的配置文件&#xff08;spring-mvc.xml&#xff09;中配置多功能视图解析器&#xff0c;以支持文件上传。…

C++11 新特性 ⑤ | 仿函数与 lambda 表达式

目录 1、引言 2、仿函数 3、lambda表达式 3.1、lambda表达式的一般形式 3.2、返回类型说明 3.3、捕获列表的规则 3.4、可以捕获哪些变量 3.5、lambda表达式给编程带来的便利 VC常用功能开发汇总&#xff08;专栏文章列表&#xff0c;欢迎订阅&#xff0c;持续更新...&a…

PyTorch实现注意力机制及使用方法汇总,附30篇attention论文

还记得鼎鼎大名的《Attention is All You Need》吗&#xff1f;不过我们今天要聊的重点不是transformer&#xff0c;而是注意力机制。 注意力机制最早应用于计算机视觉领域&#xff0c;后来也逐渐在NLP领域广泛应用&#xff0c;它克服了传统的神经网络的的一些局限&#xff0c…

JAVAEE初阶相关内容第十一弹--多线程(进阶)

目录 一、常见的锁策略 1乐观锁VS悲观锁 1.1乐观锁 1.2悲观锁 2.轻量级锁VS重量级锁 2.1轻量级锁 2.2重量级锁 3.自旋锁VS挂起等待锁 3.1自旋锁 3.2挂起等待锁 4.互斥锁VS读写锁 4.1互斥锁 4.2读写锁 5.公平锁VS非公平锁 5.1公平锁 5.2非公平锁 6.可重入锁VS不…

MemJam: A false Dependency attack against constant-time crypto implementations

作者&#xff1a;A. Moghimi, J. Wichelmann, T. Eisenbarth, and B. Sunar. 发布&#xff1a;International Journal of Parallel Programming 时间&#xff1a;Aug 2019. 笔记&#xff1a; 缓存定时攻击 1、攻击原理 共享缓存存在定时侧信道的风险&#xff08;例如在处理…

设计模式课件

设计模式 创建型设计模式的分类&#xff0c;定义结构型设计模式的分类&#xff0c;定义行为型设计模式的分类&#xff0c;定义 设计模式的分类&#xff0c;在23种设计模式中&#xff0c;每一种属于哪一种的设计模式设计模式的应用场景设计模式的图形&#xff08;考察较少&#…

华为云云耀云服务器L实例评测|带宽,磁盘,CPU,内存以及控制台监控测试

&#x1f3c6;作者简介&#xff0c;黑夜开发者&#xff0c;CSDN领军人物&#xff0c;全栈领域优质创作者✌&#xff0c;CSDN博客专家&#xff0c;阿里云社区专家博主&#xff0c;2023年6月CSDN上海赛道top4。 &#x1f3c6;数年电商行业从业经验&#xff0c;AWS/阿里云资深使用…

Python从零到一构建项目

随着互联网的发展&#xff0c;网络上的信息量急剧增长&#xff0c;而获取、整理和分析这些信息对于很多人来说是一项艰巨的任务。而Python作为一种功能强大的编程语言&#xff0c;它的爬虫能力使得我们能够自动化地从网页中获取数据&#xff0c;大大提高了效率。本文将分享如何…