mysql和redis备份和恢复数据的笔记

一、mysql的备份及恢复方法:

1.完全备份与恢复

1.1物理备份与恢复

物理备份又叫冷备份,需停止数据库服务,适合线下服务器

备份数据流程:

第一步:制作备份文件
systemctl stop mysqld
#创建存放备份文件的目录
mkdir /bakdir
#拷贝数据源文件
cp -r /var/lib/mysql /bakdir/mysql.bak
cd /var/lib/mysql
#打包压缩数据源文件
tar -zcvf /bakdir/mysql.tar.gz ./*
查看备份文件
ls /bakdir
mysql.bak  mysql.tar.gz
看使用场景,习惯使用压缩包就使用mysql.tar.gz第二步:删除原来的数据库数据
rm -rf /var/lib/mysql/*第三步:恢复数据
1.使用压缩包恢复数据
#解压缩备份包
tar -xf /bakdir/mysql.tar.gz  -C /var/lib/mysql/
#启动mysqld
systemctl start mysqldmysql -uroot -p密码
回车
mysql> show databases;或者2.使用cp拷贝的备份文件恢复数据
systemctl stop mysqld
rm -rf /var/lib/mysql/*
cp -r /bakdir/mysql.bak/* /var/lib/mysql/
chown -R mysql:mysql /var/lib/mysql
#启动mysqld
systemctl start mysqldmysql -uroot -p密码
回车
mysql> show databases;

1.2mysqldump备份与恢复

热备份,备份和恢复数据库服务必须是运行的

// 备份1张表
mysqldump -uroot -p密码 库 表 > /bakdir/db1_tb1.sql
// 备份多张表
mysqldump -uroot -p密码 库 表1 表2 表n > /bakdir/db1_tb1_tb2_tbn.sql
// 备份多张表.sql
// 备份一个库
mysqldump -uroot -p密码 -B 表1 > /bakdir/tb1.sql
// 备份多个库
mysqldump -uroot -p密码 -B db1 db2 > /bakdir/db1_db2.sql
// 备份所有库
mysqldump -uroot -p密码 -A > /bakdir/allbak.sql

恢复数据(覆盖恢复数据)

第一种:恢复库数据步骤:
1. 删除库
mysql -uroot -p密码 #登录
mysql> drop  database db1; //删除库
mysql> exit
2. 命令行导入库数据
mysql -uroot -p密码 < /bakdir/db1.sql //恢复数据
3. mysql登录验证
mysql -uroot -p密码 #登录
mysql> use db1; //进库
mysql> show tables; //看表第二种:恢复表数据步骤:
1. 删除表记录
mysql> delete from tb1; //删除表记录
mysql> exit
2. 命令行导入表文件
mysql -uroot -p密码  db1 < /bakdir/db1_tb1.sql
3. mysql登录验证
mysql -uroot -p密码 #登录
mysql> select count(*) from db1.tb1; //查看行数

注意:mysqldump备份和恢复数据会锁表,锁表期间无法对表访问,mysqldump适合备份数据量比较小的数据或在数据库服务器访问量少的时候备份

2.增量备份与恢复

增量备份:备份上次备份后,新产生的数据

xtrabackup是一款强大的在线热备份工具,备份过程中不锁库和表,适合生产环境.

支持完全备份与恢复,增量备份与恢复,差异备份与恢复.

准备2台虚拟机node1、node2

2.0 安装软件

//把软件拷贝到虚拟机里
scp /percona-xtrabackup-8.0.26-18-Linux-x86_64.glibc2.12-minimal.tar.gz root@node1:/root/ 
//安装依赖
yum -y  install perl-DBD-MySQL
//解压源码
tar -xf percona-xtrabackup-8.0.26-18-Linux-x86_64.glibc2.12-minimal.tar.gz
//移动并改名
mv percona-xtrabackup-8.0.26-18-Linux-x86_64.glibc2.12-minimal /usr/local/percona
//把命令添加到系统环境变量
vim /etc/bashrc
export PATH=/usr/local/percona/bin:$PATH  添加在文件末尾
:wq
source  /etc/bashrc
//查看帮助信息
man xtrabackup (按q 退出)

2.1 着手增量备份工作

对数据做增量备份前,必须先有一次备份,也就是首次备份,通常是备份所有数据;

比如每周一完全备份,周二到周日增量备份.

周一完全备份(备份所有数据)

xtrabackup            \
--host=127.0.0.1      \
--user=root           \
--password=xxx        \
--backup              \
--target-dir=/fullbak \
--datadir=/var/lib/mysql//插入新数据 (可以插入多行)
mysql> insert into db1.tb1(date,employee_id,basic,bonus)values("20230610",18,25000,8000);

周二增量备份(备份周一备份后新产生的数据)

xtrabackup                        \
--host=127.0.0.1                  \
--user=root                       \
--password=xxx                    \
--backup                          \
--target-dir=/new2                \
--incremental-basedir=/fullbak    \
--datadir=/var/lib/mysql//插入新数据 (可以插入多行)
mysql> insert into db1.tb1(date,employee_id,basic,bonus)values("20230610",18,25000,8000);

 周三增量备份(备份周二备份后新产生的数据)

xtrabackup                     \
--host=127.0.0.1               \
--user=root                    \
--password=xxx                 \
--backup                       \
--target-dir=/new3             \
--incremental-basedir=/new2    \
--datadir=/var/lib/mysql//插入新数据 (可以插入多行)
mysql> insert into db1.tb1(date,employee_id,basic,bonus)values("20230610",18,25000,8000);

以此类推到周日

2.2 数据增量备份恢复

前置准备工作:按照顺序将备份文件到目标主机的根目录下

scp –r  root@node1:/fullbak  /
scp –r  root@node1:/new2  /
scp –r  root@node1:/new3  /
scp –r  root@node1:/new4  /
scp –r  root@node1:/new5  /
scp –r  root@node1:/new6  /
scp –r  root@node1:/new7  /

增量恢复数据步骤:

1.准备恢复数据

2.合并数据

3.清空数据库目录

4.拷贝数据

5.修改数据库目录所有者/组用户为mysql

6.重启数据库服务

7.连接数据库验证

1)准备恢复数据
xtrabackup                 \
--prepare                  \
--apply-log-only           \
--target-dir=/fullbak
2)合并数据
xtrabackup              \
--prepare               \
--apply-log-only        \
--target-dir=/fullbak   \
--incremental-dir=/new2xtrabackup              \
--prepare               \
--apply-log-only        \
--target-dir=/fullbak   \
--incremental-dir=/new3xtrabackup              \
--prepare               \
--apply-log-only        \
--target-dir=/fullbak   \
--incremental-dir=/new4xtrabackup              \
--prepare               \
--apply-log-only        \
--target-dir=/fullbak   \
--incremental-dir=/new5xtrabackup              \
--prepare               \
--apply-log-only        \
--target-dir=/fullbak   \
--incremental-dir=/new6xtrabackup              \
--prepare               \
--apply-log-only        \
--target-dir=/fullbak   \
--incremental-dir=/new7
3) 删除数据库数据
rm -rf /var/lib/mysql/*
4) xtrackup恢复数据
xtrabackup --copy-back --target-dir=/fullbak
5)修改数据库所有者/组用户为mysql
chown -R mysql:mysql /var/lib/mysql
6)重启数据库服务
systemctl  restart  mysqld
7)登录mysql查看数据
mysql -uroot -p密码
mysql> select count(*) from tarena.salary

3.差异备份与恢复

3.1 着手差异备份工作:

对数据做差异备份前,必须先有一次备份,也就是首次备份,通常啥备份所有数据

比如每周一完全备份,周二到周日差异备份

3.1周一完全备份

xtrabackup --host=127.0.0.1 \
--user=root \
--password=123456 \
--backup \
--target-dir=/allbak \
--datadir=/var/lib/mysql

增加表格数据的操作就不赘述了

周二差异备份(备份周一备份后新产生的数据)

xtrabackup --host=127.0.0.1 \
--user=root \
--password=123456 \
--backup \
--target-dir=/dir2 \
--incremental-basedir=/allbak \
--datadir=/var/lib/mysql

 周三差异备份(备份周一备份后新产生的数据)

xtrabackup --host=127.0.0.1 \
--user=root \
--password=123456 \
--backup \
--target-dir=/dir3 \
--incremental-basedir=/allbak \
--datadir=/var/lib/mysql

因为都是备份的周一备份后新产生的数据,所以实际上只需要在上述命令基础上修改--target-dir=当日备份目录路径

直接推断到周日差异备份(备份周一备份后新产生的数据)

xtrabackup --host=127.0.0.1 \
--user=root \
--password=123456 \
--backup \
--target-dir=/dir7 \
--incremental-basedir=/allbak \
--datadir=/var/lib/mysql

3.2 差异备份恢复

差异恢复数据步骤:

前置准备工作:远程拷贝备份数据到目标主机的根目录

scp –r  root@node1:/allbak  /
scp –r  root@node1:/dir7  /
1)准备恢复数据
xtrabackup --prepare \
--apply-log-only \
--target-dir=/allbak
2)合并数据
xtrackup --prepare \
--apply-log-only \
--target-dir=/allbak \
--incremental-dir=/dir7
3)清空数据库目录
rm -rf /var/lib/mysql/*
4)拷贝数据
xtrabackup --copy-back --target-dir=/allbak
5)修改数据库所有者/组用户为mysql
chown -R mysql:mysql /var/lib/mysql
6)重启数据库服务
systemctl restart mysqld
7)连接数据库服务查看数据(略......)

4.使用binlog日志恢复数据

binlog日志介绍:

1.也称为二进制日志

2.mysql服务日志文件的一种

3.保存除查询之外的所有sql命令

4.可用于数据的备份和恢复

5.配置mysql主从同步的必要条件

4.1 在node1主机的mysql命令行下查看日志:

注:日志文件默认保存在/var/lib/mysql目录下,默认日志名binlog,如果在/etc/my.cnf.d/mysql-server.cnf修改过bin-log的配置应按照配置文件查找

假设bin-log的配置改为/mylog/node1

mysql> show master status;+----------------+----------+--------------+------------------+-------------------+
| File           | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+----------------+----------+--------------+------------------+-------------------+
| node1.000001 |      156 |              |                  |                   |
+----------------+----------+--------------+------------------+-------------------+

exit退出mysql

mysql> exit

在linux系统命令行将日志文件远程拷贝到目标主机

scp /mylog/node1.000001 root@node2:/root/

4.2 在node2主机使用日志恢复数据

1)查看日志是否在目标主机
ls /root/node1.000001
2)执行日志恢复数据

 恢复数据命令:

mysqlbinlog /目录/文件名 | mysql -uroot -p密码

结合实际应为:

mysqlbinlog /root/node1.000001 | mysql -uroot -p密码
3)使用mysql查询命令对比数据是否备份成功

二、mysql增量备份,差异备份,完全备份,binlog备份比较优缺点

在Linux环境下,MySQL数据库的备份可以通过以下方式进行:

  1. 完整备份(Full Backup):备份整个数据库。

  2. 差异备份(Differential Backup):仅备份上次完整备份后发生变化的数据。

  3. 增量备份(Incremental Backup):仅备份自上次增量备份以来发生变化的数据。

  4. binlog备份:备份MySQL的二进制日志文件(binlog),记录了所有数据库更改的历史。

优缺点对比:

备份名称优点缺点
完整备份简单

1.数据冗余

2.备份时间长

差异备份备份数据量小

恢复时需要先恢复完整备份

增量备份

1.备份数据量小

2.恢复数据快

需要上次的完整备份或差异备份
binlog备份

1.能够精确到行级别

2.恢复速度快

需要mysql的二进制更能开启

实际选择哪种备份策略取决于数据的重要性、恢复需求和备份策略的实施复杂度。

三、扩展内容:redis的备份与恢复

第一种方案:RDB

1. 新建RDB文件:

1)关闭redis
systemctl stop redis
2)删除数据库数据
rm -rf /var/lib/redis/*
3)修改redis.conf配置

设置存盘间隔为120秒且10个key,改变数据自动存盘设置:存盘间隔120秒且10个key改变,则数据自动存盘

vim /etc/redis.conf
save 900 1
#save 300 10
save 120 10     # 2分钟内且有>=10个变量改变,就把内存里的数据复制到dump.rdb文件里
save 60 10000
4)启动redis
systemctl start redis
5)查看dump.rdb的详细信息
#查看dump.rdb
ls /var/lib/redis/dump.rdb
提示没有该文件或目录就行
6)redis插入数据

要在2分钟内存储大于等于10个变量

redis-cli -h 192.168.88.70 -p 6379
192.168.88.70:6379> mset a 1  b 2  c 3  d 4 
OK
192.168.88.70:6379> mset ... (像上面那个例子一样添加数据,凑足至少10个变量的改动...)
192.168.88.70:6379> exit
7)再次查看dump.rdb的详细信息
#redis赋值后查看是否有dump.rdb文件
ls /var/lib/redis/ -l 

2.使用RDB文件恢复数据

1)拷贝dump.rdb文件(数据的备份文件)到其他目录
cp /var/lib/redis/dump.rdb /opt/#查看是否拷贝成功
ls /opt/*.rdb
2)清空数据库数据
redis-cli -h 192.168.88.70 -p 6379
192.168.88.70:6379> FLUSHALL 
192.168.88.70:6379> keys *
192.168.88.70:6379> exit
3)停止redis服务
systemctl stop redis
4)把/var/lib/redis/目录的dump.rdb文件删除
rm -rf /var/lib/redis/*
5)把备份dump.rdb文件拷贝到数据库目录/var/lib/redis/下
cp /opt/dump.rdb /var/lib/redis/
6)启动redis服务
systemctl start redis 
7)连接redis服务查看数据
redis-cli -h 192.168.88.70 -p 6379
192.168.88.70:6379> keys *

第二种方案:使用AOF恢复数据

1.启用AOF

config set  appendonly yes #启用aof文件

config rewrite #保存配置

redis-cli -h 192.168.88.70 -p 6379
192.168.88.70:6379> config set  appendonly yes #启用aof文件
192.168.88.70:6379> config get  appendonly #查看是否启用
192.168.88.70:6379> config rewrite #保存配置
192.168.88.70:6379> exit#查看数据库目录是否有.aof文件
ls /var/lib/redis
#查看文件行数
wc -l /var/lib/redis/appendonly.aof 测试增加数据,行数是否变化:
#进入redis命令行,添加存储数据
redis-cli  -h 192.168.88.70 -p 6379
192.168.88.70:6379> 使用set或者mset增加存储变量
192.168.88.70:6379> keys * #查看变量
192.168.88.70:6379> exit#查看文件函数
wc -l /var/lib/redis/appendonly.aof 

2.使用AOF文件恢复数据

1)备份aof文件到其他目录(比如/opt)
第一步.备份aof文件
cp /var/lib/redis/appendonly.aof /opt/
#查看是否备份成功
ls /opt/*.aof
2)清空数据库
redis-cli -h 192.168.88.70 -p 6379
192.168.88.70:6379> flushall 
192.168.88.70:6379> exit
3)停止redis服务
systemctl stop redis
4) 删除/var/lib/redis/目录下的文件

为了不影响备份效果,删除/var/lib/redis/下的aof文件或者rdb文件

rm -rf /var/lib/redis/*
5)把备份的aof文件拷贝到数据库目录/var/lib/redis/下
cp /opt/appendonly.aof /var/lib/redis/ll /var/lib/redis/ #查看文件的主和组是不是都是redis
#如果不是,需要修改为redis的主和组:
chown -R redis:redis /var/lib/redis/
6)启动redis服务
systemctl start redis
7)连接redis服务查看效果
redis-cli -h 192.168.88.70 -p 6379  
192.168.88.70:6379> keys *

如果redis-cli命令连接命令行失败,先查看appendonly文件的owner和group是不是redis,不是redis的使用chown改成redis的主和组,然后再尝试连接redis命令行,如下图所示:

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/853001.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

连锁门店收银系统源码!

1.系统概况 智慧新零售系统是一套针对零售行业的saas收银系统&#xff0c;线下线上一体化的收银系统。核心功能涵盖了线下收银、小程序商城、会员管理、50营销插件、ERP进销存管理、跑腿配送等行业解决方案。 2.适用行业及门店 智慧新零售是针对零售行业的saas收银系统&#…

一文入门vim

先来波快问快答。 第一个问题&#xff0c;vim是什么&#xff1f; vim就是一文本编辑器。 第二个问题&#xff0c;我们为什么要使用vim&#xff1f; 好像在终端中可选择使用的文本编辑器也不多&#xff08;其他有&#xff0c;但是相对而言vim用的比较广泛&#xff09; 第三…

Java核心(四)反射

这篇内容叫反射也不够准确&#xff0c;其实它更像是java类加载的一个延申。 Java类加载过程 之前解释过一个Java的类的加载过程&#xff0c;现在回顾一下类的加载&#xff1a; 类的加载指的是将类的字节码文件&#xff08;.class文件&#xff09;中数据读入到内存中&#xff…

C语言之数组

目录 一、数组的概念 二、一维数组的使用 数组的创建 数组的初始化 数组的使用 三、一维数组在内存中的存储 四、sizeof计算数组元素个数 五、二维数组的使用 数组的创建 数组的初始化 数组的使用 六、二维数组在内存中的存储 七、C99中的变长数组 八、总结 一、…

暑假该不该选择打工兼职?

暑假是学生们放松心情、休息调整的重要时期&#xff0c;然而&#xff0c;也有越来越多的学生选择利用这段时间参与打工兼职活动。打工兼职不仅能为学生们提供经济来源&#xff0c;还能让他们提前接触社会&#xff0c;积累实践经验。然而&#xff0c;在参与打工兼职的过程中&…

ComfyUI 宝藏插件之辅助工具

今天我们就来分享下这个 ComfyUI 辅助脚本工具的功能。 插件安装&#xff0c;小伙伴们直接在管理器里搜索「ComfyUI-Custom-Scripts」&#xff0c;点击安装就可以了&#xff0c;这里再告诉小伙伴们一个小技巧&#xff0c;点击名称可以跳转到插件所在的官网哦。 没有安装管理器…

Elasticsearch:ES|QL 同步及 async 查询操作

目录 ES|QL query API 请求 前提条件 查询参数 请求正文 响应正文 ES|Q async query API 请求 前提条件 路径参数 请求正文 响应正文 ES|QL async query get API 请求 前提条件 路径参数 查询参数 响应正文 ES|QL async query delete API 请求 前提条件 …

Rust 实战丨并发构建倒排索引

引言 继上篇 Rust 实战丨倒排索引&#xff0c;本篇我们将参考《Rust 程序设计&#xff08;第二版&#xff09;》中并发编程篇章来实现高并发构建倒排索引。 本篇主要分为以下几个部分&#xff1a; 功能展示&#xff1a;展示我们最终实现的 2 个工具的效果&#xff08;构建索…

python面试题3:什么是装饰器decorator(难度--简单)

文章目录 题目回答 题目 什么是装饰器&#xff08;decorator&#xff09;&#xff1f;&#xff08;常考题&#xff09; 回答 装饰器是一个高级功能&#xff0c;允许增加&#xff0c;修改函数&#xff0c;类&#xff0c;方法的行为。允许将现有函数传递给装饰器&#xff0c;该…

mac 本地启动rocketmq

Mac 本地起rocketmq 官网下载&#xff1a;RocketMq官网下载地址 下载后解压 如果电脑配置不高或者不希望rocketmq占用太大内存的&#xff0c;修改配置/bin/runbroker.sh JAVA_OPT"${JAVA_OPT} -server -Xms512m -Xmx512m -Xmn256m"-Xmx4g 初始堆大小 4g -Xms4g 最大…

Python武器库开发-武器库篇之SMB服务暴力破解(五十五)

Python武器库开发-武器库篇之SMB服务暴力破解(五十五) SMB服务&#xff08;Server Message Block&#xff09;是一种用于文件共享、打印机共享和其他资源共享的网络协议。它最初由IBM开发&#xff0c;后来被微软广泛采用。 SMB服务允许多台计算机在网络上共享文件和资源&…

笔记本硬盘对拷:升级硬盘的好方法!

如今电子产品更新换代的速度不断加快&#xff0c;笔记本电脑的配置也日新月异。几年前购买的笔记本硬盘容量350G曾经令你感到相当满意。但时至今日&#xff0c;这样的容量是否已经显得有些落后&#xff1f;如果你想要升级硬盘&#xff0c;笔记本硬盘对拷是一个很好的选择。 需要…

Radis初阶 Radis基本命令与在Springboot中访问Radis

阿里网盘链接 文章目录 初始NoSQL数据库对比MySQL数据库从结构方面&#xff1a;从关系方面&#xff1a;从查询方式&#xff1a;从事物方面&#xff1a; Redis入门Redis数据结构访问Radis通用命令&#xff08;tab键&#xff1a;自动补全&#xff09;KEYSDELEXISTSEXPIRETTL Str…

第63集《摄大乘论》

《摄大乘论》&#xff0c;和尚尼慈悲、诸位法师、诸位居士&#xff0c;阿弥陀佛&#xff01;(阿弥陀佛&#xff01;)请大家打开《讲义》第二一一页&#xff0c;庚五、摄持。 我们这一大科讲到佛陀法身的功德&#xff0c;这当中有十门分别&#xff0c;这个地方是第五科。佛陀的…

Liquibase(Oracle SQLcl集成版)简明示例

本文使用的是Oracle SQLcl中集成的Liquibase&#xff0c;而非开源版Liquibase。 Liquibase的快速入门可以参见Liquibase Core Concepts。需要了解一下概念&#xff1a; Change log&#xff1a;基于文本的更改日志文件按顺序列出对数据库所做的所有更改Change set&#xff1a;…

LabVIEW开发中的常见通讯协议详解

介绍LabVIEW开发中常见的通讯协议&#xff0c;包括RS-232、RS-485、I2C、SPI、CAN、Ethernet、Modbus和GPIB等。通过对各协议的具体内容、特点、使用范围及注意事项进行全面解析&#xff0c;帮助开发者选择合适的通讯协议&#xff0c;提高系统性能和可靠性。 1. RS-232 内容&a…

maven工程结构搭建

父工程pom <?xml version"1.0" encoding"UTF-8"?> <project xmlns"http://maven.apache.org/POM/4.0.0"xmlns:xsi"http://www.w3.org/2001/XMLSchema-instance"xsi:schemaLocation"http://maven.apache.org/POM/4.0.…

Python基础教程(十五):面向对象编程

&#x1f49d;&#x1f49d;&#x1f49d;首先&#xff0c;欢迎各位来到我的博客&#xff0c;很高兴能够在这里和您见面&#xff01;希望您在这里不仅可以有所收获&#xff0c;同时也能感受到一份轻松欢乐的氛围&#xff0c;祝你生活愉快&#xff01; &#x1f49d;&#x1f49…

DataFrames相关介绍文件读取

目录 1.初识DataFrame 2.DataFrame的构造函数 3.数据框的轴 4.CSV文件读取 5.Excel文件读取 1.初识DataFrame &#xff08;1&#xff09;昨天&#xff0c;我们学习了Series。而Pandas的另一种数据类型&#xff1a;DataFrame&#xff0c;在许多特性上和Series有相似之处。 …

Spring应用如何打印access日志和out日志(用于分析请求总共在服务耗费多长时间)

我们经常会被问到这样一个问题。你接口返回的好慢呀&#xff0c;能不能提升一下接口响应时间啊&#xff1f;这个时候我们就需要去分析&#xff0c;为什么慢&#xff0c;慢在哪。而这首先应该做的就是确定接口返回时间过长确实是在服务内消耗的时间。而不是我们将请求发给网关或…