第87讲：XtraBackup备份工具的核心技术要点及全库备份、恢复案例

文章目录

    • 1.XtraBackup备份工具的简介
    • 2.XBK备份工具的安装
    • 3.XBK备份工具的使用语法
    • 4.XBK备份前的准备
    • 5.使用XBK对全库进行备份
      • 5.1.XBK备份全库数据的语法格式
      • 5.2.使用XBK进行全库备份
      • 5.3.查看XBK备份的数据文件
      • 5.4.备份过程中生产的XBK文件
    • 6.模拟故障案例并使用XBK恢复备份的数据
      • 6.1.模拟故障导致数据库损坏
      • 6.2.从XBK备份中恢复数据
    • 7.自主定义XBK备份文件的名称

1.XtraBackup备份工具的简介

XtraBackup是Percona公司开源的一款MySQL InnoDB（包括XtraDB，MyISAM）数据库备份工具，基于InnoDB的崩溃恢复功能，由于支持不锁表的在线物理热备而被广泛应用于生产环境。

XBK备份恢复原理：

XtraBackup备份执行的瞬间，会立即触发checkpoint机制，将已提交事务的脏页数据从内存刷新到磁盘中，并记录此时日志序列号（LSN号），此时触发备份，然后复制磁盘中的数据页以及数据文件到备份路径，在备份过程中可能会有新的数据变化、新的事物提交，XBK还会将备份过程中产生的Redo log和Undo log一并备份，并且提取Redo Log中最后的LSN号，也就是checkpoint机制刷新到磁盘时记录的LSN之后，产生的Redo log和Undo log。

XtraBackup备份时会对非InnoDB引擎的表进行锁表，实现温备，对InnoDB引擎的表不进行锁表，直接复制InnoDB数据页及数据文件到备份路径中。

XBK的恢复过程就是模拟InnoDB的自动故障恢复（CSR）的过程，将Redo Log与Undo log进行应用，对比Redo log中最后的LSN号和备份前记录时的LSN号，既要保证备份数据的恢复，又要保证备份时产生的新数据的恢复，备份时产生的新数据就是从备份时的LSN号到Redo中的LSN之间的数据，这些数据如果是提交的那么就用备份的Redo文件恢复，如果是未提交的数据则使用备份的Undo文件进行恢复，恢复就是将备份的数据文件cp还原到原数据目录下。

XBK热备理念就是将备份触发之前的数据都备份，对于备份过程中的新数据也会备份下来，备份过程中的新数据就是Redo Log和Undo Log了，XBK在备份触发的时候会通过CKPT机制刷新脏页数据到磁盘，此时会记录LSN号，而Redo Log中也有对应的LSN号，当我们要恢复数据时，假如说备份时的LSN号是101，备份完后Redo Log中的LSN号是110，那么102-110之间的LSN号对应的事务就是备份过程中产生的新数据，对于新数据已经提交的数据用备份的Redo文件恢复，未提交的数据用Undo文件进行回滚恢复，保证数据的一致性。

XBK备份需要依赖MySQL的主配置文件/etc/my.cnf，如果配置文件不在这个路径需要单独指定。

2.XBK备份工具的安装

1.安装依赖的软件
[root@mysql ~]# yum -y install perl perl-devel libaio libaio-devel perl-Time-HiRes perl-DBD-MySQL2.安装xbk
[root@mysql ~]# wget https://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.4.12/binary/redhat/7/x86_64/percona-xtrabackup-24-2.4.12-1.el7.x86_64.rpm
[root@mysql ~]# yum -y install percona-xtrabackup-24-2.4.12-1.el7.x86_64.rpm

3.XBK备份工具的使用语法

XBK备份语法格式：innobackupex [--defaults-file=#] [OPTIONS] 备份路径

参数：

  • --defaults-file：指定MySQL配置文件的路径。
  • --apply-log：整理备份，将redo log进行重做，将已提交的事务写到备份的数据文件，对未提交的事务使用undo回滚掉，模拟了CSR的过程，这个参数就是将备份过程中产生的新数据一并写入到备份文件中，保证数据的一致性。
  • --redo-only：这个参数需要配合--apply-log这个参数一起使用，表示在整理备份数据时只执行redo前滚操作，不执行undo回滚操作。
  • --copy-back：恢复数据。
  • -S：指定MySQL socket文件。
  • --stream=tar：开启流备份，备份成tar包。
  • --user-memory=256M：为xbk分配256M的内存进行备份。
  • --parallel=8：并发处理数，一般都是CPU核数的一半。

4.XBK备份前的准备

XBK备份前我们需要进行一些配置，否则备份会失败。

首先要确保MySQL主配置文件在/etc/my.cnf里，如果不在这个路径，备份时需要指定配置文件的路径，如以下所示：通过--defaults-file参数指定配置文件的路径。

[root@mysql ~]# innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456  /data/dbbackup/

另外还需要在MySQL的主配置文件中指定客户端使用的MySQL socket文件，否则XBK备份时会报错，提示找不到socket文件。

[root@mysql ~]# vim /etc/my.cnf
[client]
socket=/tmp/mysql.sock

如果不想在主配置文件中指定client的socket文件，那么可以在备份命令中通过-S参数指定socket文件的路径。

[root@mysql ~]# innobackupex --user=root --password=123456 -S /tmp/mysql.sock /data/dbbackup/

5.使用XBK对全库进行备份

5.1.XBK备份全库数据的语法格式

innobackupex --user=数据库账号 --password=数据库密码 --defaults-file=配置文件路径 -S socket文件路径 备份路径

5.2.使用XBK进行全库备份

[root@mysql ~]# innobackupex --user=root --password=123456 /data/dbbackup/

当看到 completed OK! 一行就表示备份成功了。

image-20220703105846689

5.3.查看XBK备份的数据文件

XBK备份结束后，会在指定的备份路径生成一个当前时间命名的目录，在这个目录中存放了备份数据库的数据文件。

image-20220703110021558

XBK备份出来的就是数据库的数据文件，可以和数据库数据路径的文件进行对比，几乎就是完完全全的cp过来的，除了数据库的备份外，还产生了四个XBK生成的文件。

image-20220703110221097

5.4.备份过程中生产的XBK文件

使用XBK备份完成后，会生产四个关于XBK的文件，用于记录一些配置信息。

-rw-r----- 1 root root       63 7月   3 10:58 xtrabackup_binlog_info
-rw-r----- 1 root root      113 7月   3 10:58 xtrabackup_checkpoints
-rw-r----- 1 root root      542 7月   3 10:58 xtrabackup_info
-rw-r----- 1 root root     2560 7月   3 10:58 xtrabackup_logfile

1）xtrabackup_binlog_info

该文件会记录备份时刻Binlog的状态信息，包括备份时最近的GTID号以及事件的Position标识位号，可以用来截取Binlog日志。

[root@mysql 2022-07-03_10-58-17]# cat xtrabackup_binlog_info 
mysql-bin.000013	344	e0a2c0cc-f835-11ec-8a3c-005056b791aa:1-79

334就是事件的Position号。

2）xtrabackup_checkpoints

记录XBK备份触发时的checkpoints机制信息。

[root@mysql 2022-07-03_10-58-17]# cat xtrabackup_checkpoints 
backup_type = full-backuped
from_lsn = 0					#上次所到达的LSN号(对于全备就是从0开始,对于增量有别的显示方法)
to_lsn = 6136767				#备份开始时间(ckpt)点数据页的LSN号
last_lsn = 6136776				#备份结束后，redo日志最终的LSN
compact = 0
recover_binlog_info = 0

这个文件非常重要。
（1）备份时刻，立即将已经commit过的，内存中的数据页刷新到磁盘(CKPT).开始备份数据，数据文件的LSN会停留在to_lsn位置。
（2）备份时刻有可能会有其他的数据写入，已备走的数据文件就不会再发生变化了。
（3）在备份过程中，备份软件会一直监控着redo的undo，如果一旦有变化会将日志也一并备走，并记录LSN到last_lsn。
从to_lsn ----> last_lsn 就是备份过程中产生的数据变化.

3）xtrabackup_info

XBK备份时的一些参数信息。

image-20220703111144658

4）xtrabackup_logfile

日志文件。

6.模拟故障案例并使用XBK恢复备份的数据

6.1.模拟故障导致数据库损坏

将db_1、db_2、db_3的数据文件删除，然后从XBK备份中恢复数据。

[root@mysql ~]# rm -rf /data/mysql/db_1/
[root@mysql ~]# rm -rf /data/mysql/db_2/
[root@mysql ~]# rm -rf /data/mysql/db_3/

6.2.从XBK备份中恢复数据

1）对redo log进行重做

将redo log进行重做，将已提交的事务写到备份的数据文件，对未提交的事务使用undo回滚掉，模拟了CSR的过程，这一步就是将备份过程中产生的新数据一并写入到备份文件中，保证数据的一致性。

[root@mysql ~]# innobackupex --apply-log /data/dbbackup/2022-07-03_10-58-17/

2）恢复数据

恢复数据非常简单，只需要通过cp命令将数据文件拷贝到数据库目录即可。

[root@mysql ~]# \cp -ra /data/dbbackup/2022-07-03_10-58-17/* /data/mysql/
[root@mysql ~]# chown -R mysql. /data/mysql/
[root@mysql ~]# systemctl restart mysqld

7.自主定义XBK备份文件的名称

在前面看到XBK备份出来的目录是以时间戳定义的，精确到了时分秒，其实也不太友好。

我们可以通过--no-timestamp参数跳过XBK默认的备份文件名，我们自定义XBK的备份文件名称。

[root@mysql ~]# innobackupex --user=root --password=123456  --no-timestamp /data/dbbackup/all_bak_`date +%F`

image-20220703112713170

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/611058.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

Vue 对象删除没有值的项

Vue 对象删除没有值的项

在调用后端查询接口时，有的要求参数对象里空值的项不要传，这个时候可以封装一个方法在调用接口前将对象过滤一遍。 1.新建一个名为tools.js的文件，里面放入以下代码 //对象删除没有值的项 export const removePropertyOfNull (obj) > { …
阅读更多...
【React】常见疑问的整理

【React】常见疑问的整理

1. React渲染一个列表，需要为每一项指定key？ 列表的key主要是为了react渲染阶段更好的协调（reconciliation），diff时更好的识别react元素，减少dom的创建和操作，提升效率。 设定key值方式&#x…
阅读更多...
openssl3.2 - 官方dmeo学习 - server-arg.c

openssl3.2 - 官方dmeo学习 - server-arg.c

文章目录 openssl3.2 - 官方dmeo学习 - server-arg.c概述笔记备注END openssl3.2 - 官方dmeo学习 - server-arg.c 概述 TLS服务器, 等客户端来连接; 如果客户端断开了, 通过释放bio来释放客户端socket, 然后继续通过bio读来aceept. 笔记 对于开源工程, 不可能有作者那么熟悉…
阅读更多...
Python操作excel-读取、表格填充颜色区分

Python操作excel-读取、表格填充颜色区分

1.场景分析 遇到一个需要读取本地excel数据，处理后打入到数据库的场景，使用java比较重，python很好的解决了这类问题 2.重难点 本场景遇到的重难点在于： 需要根据表格内的背景颜色对数据进行筛选 读取非默认Sheet 总是出现Value…
阅读更多...
Android Framework 常见解决方案（26）user版本可root方案

Android Framework 常见解决方案（26）user版本可root方案

1 原理说明 User版本默认是没有root权限和remount功能的，一般该方法用于调试性能相关问题。如果使用debug版本对照，差异过大，因此就有了这样的需求。 修改的核心原理就是调整adbd及相关属性中的一些判定，即user和debug版本的区别…
阅读更多...
C 语言关于sizeof() 和 strlen()区别?

C 语言关于sizeof() 和 strlen()区别?

sizeof() 和 strlen() 在 C 语言中两个非常常用，它们都与计算内存大小有关，但是它们的作用是不同的。 sizeof() 和 strlen() 的主要区别在于： sizeof() 是一个运算符，而 strlen() 是一个函数。sizeof() 计算的是变量或类型所占用…
阅读更多...
day-05 删除子串后的字符串最小长度

day-05 删除子串后的字符串最小长度

思路 通过不断地检查是否含有"AB"或"CD"&#xff0c;如果有则将其从字符串中删除&#xff0c;直到"AB"或"CD"都不存在时&#xff0c;返回字符串的长度 解题方法 //检测是否有"AB" for(int i0;i<len-1;i){ if(s.charAt(i…
阅读更多...
Python画国旗

Python画国旗

前言 今天&#xff0c;我们来用turtle库来绘制国旗 一、美国国旗 国旗的形状是长方形;国旗的长宽之比为19:10&#xff0c;美国国旗由红、白、蓝三色组成;画面格局由两部分组成&#xff0c;旗的左上方蓝底上排列着50颗白色的星&#xff0c;6颗一排与5颗一排相间排列&#xff…
阅读更多...
鸿蒙开发已解决-ArkTS开发webview，html页面中的input和按钮等操作均无响应

鸿蒙开发已解决-ArkTS开发webview，html页面中的input和按钮等操作均无响应

文章目录 项目场景：问题描述原因分析：解决方案（根据此方法即可解决此Bug）：本文相关知识本Bug常规排除步骤ArkTS项目场景： 在鸿蒙开发过程遇到的问题： 问题 ArkTS API9 使用webview加载的html，页面中的按钮和input等操作均无响应 是有相关API设置webview是否可以touch或…
阅读更多...
STM32(Cortex-M) 双堆栈MSP/PSP科普

STM32(Cortex-M) 双堆栈MSP/PSP科普

https://blog.csdn.net/Guet_Kite/article/details/76020069 https://blog.csdn.net/zhuimeng_ruili/article/details/118163303 MSP/PSP是什么?作用&#xff1f; MSP主堆栈指针&#xff0c;PSP进程堆栈指针。 MSP&#xff1a;复位后缺省使用的堆栈指针&#xff0c;用于操作…
阅读更多...
创建一个郭德纲相声GPTs

创建一个郭德纲相声GPTs

前言 在这篇文章中&#xff0c;我将分享如何利用ChatGPT 4.0辅助论文写作的技巧&#xff0c;并根据网上的资料和最新的研究补充更多好用的咒语技巧。 GPT4的官方售价是每月20美元&#xff0c;很多人并不是天天用GPT&#xff0c;只是偶尔用一下。 如果调用官方的GPT4接口&…
阅读更多...
K8S存储卷和数据卷

K8S存储卷和数据卷

容器内的目录和宿主机的目录进行挂载 容器在系统上的生命周期是短暂的&#xff0c;delete&#xff0c;k8s用控制器创建的pod&#xff0c;delete相当于重启&#xff0c;容器的状态也会恢复到初始状态&#xff0c;一旦回到初始状态&#xff0c;所有的后天编辑的文件都会消失 容器…
阅读更多...
年轻人2023消费图鉴，媒介盒子为你揭秘

年轻人2023消费图鉴，媒介盒子为你揭秘

回顾近一年的消费&#xff0c;发现大家差不多都是“扣扣嗖嗖的花了很多钱”&#xff0c;如果总结2023年的大众消费关键词&#xff0c;那一定是更加“理性”&#xff0c;据艾瑞咨询《2023年中国消费者洞察白皮书》显示&#xff0c;“精细化”成为2023年的消费关键词&#xff0c;…
阅读更多...
十二、QProgressBar的简单使用与样式优化（Qt5 GUI系列）

十二、QProgressBar的简单使用与样式优化（Qt5 GUI系列）

目录 一、设计需求 二、实现代码 三、代码解析 四、总结 五、扩展(自定义QProgressBar样式) 一、设计需求 在很多应用程序中&#xff0c;在执行费时操作时都会展示一个进度条来展示操作进行的进度。常见的场景&#xff0c;如&#xff1a;拷贝操作、安装操作以及卸载操作。…
阅读更多...
Unity组件开发--AB包打包工具

Unity组件开发--AB包打包工具

1.项目工程路径下创建文件夹&#xff1a;ABundles 2.AB包打包脚本&#xff1a; using System.Collections.Generic; using System.IO; using UnityEditor; using UnityEditor.SceneManagement; using UnityEngine; using UnityEngine.SceneManagement;public class AssetBundle…
阅读更多...
Vue入门三（表单控制｜购物车案例｜v-model进阶｜与后端交互｜计算属性｜监听属性｜Vue生命周期）

Vue入门三（表单控制｜购物车案例｜v-model进阶｜与后端交互｜计算属性｜监听属性｜Vue生命周期）

文章目录 一、表单控制二、购物车案例三、v-model进阶四、与后端交互跨域问题解决&#xff0c;三种交互方法跨域问题详解1-CORS&#xff1a;后端代码控制&#xff0c;上面案例采用的方式1) 方式一&#xff1a;后端添加请求头2) 方式二&#xff1a;编写中间件3) 方式三&#xff…
阅读更多...
代理IP连接不上？网速过慢？自查与解决方法

代理IP连接不上？网速过慢？自查与解决方法

当您使用代理时&#xff0c;您可能会遇到不同的代理错误代码显示代理IP连不通、访问失败、网速过慢等种种问题。 在本文中中&#xff0c;我们将讨论您在使用代理IP时可能遇到的常见错误、发生这些错误的原因以及解决方法。 一、常见代理服务器错误 当您尝试访问网站时&#…
阅读更多...
Mysql系列-1.Mysql基本使用

Mysql系列-1.Mysql基本使用

&#x1f44f;作者简介&#xff1a;大家好&#xff0c;我是爱吃芝士的土豆倪&#xff0c;24届校招生Java选手&#xff0c;很高兴认识大家&#x1f4d5;系列专栏&#xff1a;Spring源码、JUC源码、Kafka原理、分布式技术原理、数据库技术&#x1f525;如果感觉博主的文章还不错的…
阅读更多...
【蓝桥杯选拔赛真题57】python兔子分胡萝卜 第十四届青少年组蓝桥杯python 选拔赛比赛真题解析

【蓝桥杯选拔赛真题57】python兔子分胡萝卜 第十四届青少年组蓝桥杯python 选拔赛比赛真题解析

目录 python兔子分胡萝卜 一、题目要求 1、编程实现 2、输入输出
阅读更多...
RT-Thread基于AT32单片机的485应用开发（二）

RT-Thread基于AT32单片机的485应用开发（二）

在上篇RT-Thread基于AT32单片机的485应用开发&#xff08;一&#xff09;中实现了RS485收发&#xff0c;但总觉得效率不高&#xff0c;函数封装也不完善。考虑到RS485总线应用都是主从式结构&#xff0c;比如工业领域常用的Modbus协议&#xff0c;都是以帧为单位进行收发&#…
阅读更多...
最新文章

Copyright @ 2022~2023