MySQL数据库的备份-恢复-日志

一、备份:

1.数据备份的重要性:

  • 备份的主要目的是灾难恢复。

  • 在生产环境中,数据的安全性至关重要。

  • 任何数据的丢失都可能产生严重的后果。

2.造成数据丢失的原因:

  • 程序错误
  • 人为操作错误
  • 运算错误
  • 磁盘故障
  • 灾难(如火灾、地震)和盗窃

3.数据库备份的分类:

  • 从物理与逻辑的角度,备份可分为物理备份和逻辑备份。
  • 从数据库的备份策略角度,备份可分为完全备份、差异备份和增量备份。

3.1数据库备份可以分为:

1. 物理备份:

对数据库操作系统的物理文件(如数据文件,日志文件等)的备份

物理备份的方法:

  • 冷备份:是在关闭数据库的时候进行(使用tar
  • 热备份:数据库处于运行状态,依赖于数据库的日志文件(在数据库中使用:mysqldump备份)
  • 温备份:数据库锁定表格(不可写入但可读)的状态下进行备份操作
 2.逻辑备份:

逻辑备份是对数据库逻辑组件的备份。

表示为逻辑数据库结构 这种类型的备份适用于可以编辑数据值或表结构。

逻辑备份的方法:

  • 完全备份:每次对数据库进行完整的备份
  • 差异备份:备份自从上次完全备份之后被修改过的文件
  • 增量备份:只有在上次完全备份或者增量备份后被修改的文件才会被备份

3.2 从数据库的备份策略角度,备份可分为:

1.完全备份:

每次都进行完全备份,会导致备份文件占用巨大的空间,并且有大量的重复数据

恢复时,直接把文件导入进去即可

2.差异备份:

上次差异备份,都会被备份上一次完全备份之后的数据,可能会出现备份重复数据,导致占用大额外的磁盘空间。

恢复时,先恢复完全备份,在导入差异备份数据

3.增量备份:

每次增量备份数据都是备份在上一次完全备份或增量备份之后的数据,不会出现备份重复数据,也不会占用额外的磁盘空间

恢复时,需要完全恢复,在做增量恢复,按照次序恢复

4.常见的备份方法:

1.物理冷备(完全备份):

  • 备份时数据库处于关闭状态,直接打包数据库文件
  • 备份速度快,恢复时也是最简单的

2.专用备份工具mydump或mysqlhotcopy (完全备份,逻辑备份):

  • mysqldump常用的逻辑备份工具 (导出为sql脚本)

  • mysqlhotcopy仅拥有备份MyISAM和ARCHIVE表

  • 启用二进制日志进行增量备份 (增量备份)

  • 进行增量备份,需要刷新二进制日志

3.第三方工具备份:

  • 免费的MySQL热备份软件Percona XtraBackup(阿里云的工具:dts,支持热迁移)

 二、MySQL完全备份:

1.完全备份介绍:

  • 完全备份是对整个数据库、数据库结构和文件结构的备份
  • 保存的是备份完成时刻的数据库
  • 是差异备份与增量备份的基础

2.完全备份的优缺点:

优点:

  • 备份与恢复操作简单方便

缺点:

  • 数据存在大量的重复
  • 占用大量的备份空间
  • 备份与恢复时间长

3.完全备份的方法:

3.1 物理冷备份与恢复:

  1. 关闭MySQL数据库
  2. 使用 tar 命令直接打包数据库文件夹
  3. 直接替换现有MySQL目录即可

3.2 mysqldump备份与恢复:

  1. MySQL自带的备份工具,可方便实现对MySQL的备份
  2. 可以将指定的库、表导出为SQL脚本
  3. 使用命令mysq|导入备份的数据

4.完全备份的方法与恢复操作:

4.1 物理冷备份与恢复:

先关闭数据库方便库外操作:

备份:

恢复:

4.2 mysqldump 备份与恢复:

备份:

4.2.1  完全备份一个或多个完整的库(包括其中所有的表):
mysqldump -u root -p[密码] --databases 库名1 [库名2] ... > /备份路径/备份文件名.sql    #导出的就是数据库脚本文件

4.2.2 完全备份MySQL服务器中所有的库:
mysqldump -u root -p[密码] --all-databases > /备份路径/备份文件名.sql

 查看:

4.2.3 完全备份指定库中的部份表:
mysqldump -u root -p[密码] [-d] 库名 [表名1] [表名2] ... > /备份路径/备份文件名.sql#使用 -d 选项,说明只保存数据库的表结构
#不使用 -d 选项,说明表数据也进行备份

恢复:

4.2.4 使用 source 命令恢复数据:

删除表:

在MySQL内查看: 

#恢复数据
mysql> source /data/kgc.sql;

查看: 4

4.2.5 重定向导入备份文件:

查看:

三、MySQL 增量备份与恢复:

 1.增量备份的介绍:

1.1 增量备份产生的原因 :

  • 使用 mysqldump 进行完全备份存在的问题
    • 备份数据中有重复数据
    • 备份时间与恢复时间过长

1.2 增量备份是什么:

  • 是自上一次备份后增加/变化的文件或者内容

1.3 增量备份的特点:

  • 没有重复数据,备份量不大,时间短
  • 恢复需要上次完全备份及完全备份之后所有的增量备份才 能恢复,而且要对所有增量备份进行逐个反推恢复

1.4 增量备份的过程 :

  • MySQL没有提供直接的增量备份方法
  • 可通过MySQL提供的二进制日志间接实现增量备份

MySQL二进制日志对备份的意义:

  • 二进制日志保存了所有更新或者可能更新数据库的操作
  • 二进制日志在启动MySQL服务器后开始记录,并在文件达到 max_binlog_size 所设置的大小或者接收到 flush logs 命令后重新创建新的日志文件
  • 只需定时执行 flush logs 方法重新创建新的日志,生成二进制文件序列,并及时把这些日志保存到安全的地方就完成了一个时间段的增量备份

2.增量备份的方式:

  • 一般恢复

    • 将所有备份的二进制日志内容全部恢复
  • 基于位置恢复

    • 数据库在某一时间点可能既有错误的操作也有正确的操作
    • 可以基于精准的位置跳过错误的操作
  • 基于时间点恢复

    • 跳过某个发生错误的时间点实现数据恢复

四、MySQL日志管理:

  • MySQL 的日志默认保存位置为 /usr/local/mysql/data 
  • MySQL 的日志配置文件为 /etc/my.cnf

1.日志的分类:

1.1 错误日志:

用来记录当MySQL启动、停止或运行时发生的错误信息,默认已开启

vim /etc/my.cnf
log-error=/home/mysql/mysql_error.log   ##指定日志的保存位置				

1.2 通用查询日志:

用来记录mysql的所有连接和语句,默认是关闭的

vim /etc/my.cnf
general_log=ON
general_log_file=/usr/local/mysql/data/mysql_general.log   

1.3 二进制日志:

用来记录所有当MySQL启动、停止或运行时发送的错误信息,默认是关闭的

vim /etc/my.cnf
log-bin=mysql-bin				
或
log_bin=mysql-bin#使用相对路径,则文件存储在默认目录/usr/local/mysql/data/中

1.4 慢查询日志:

用来记录所有执行时间超过long_query_time秒的语句,可以找到哪些查询语句执行时间长,以便于优化,默认是关闭的

vim /etc/my.cnf
slow_query_log=ON
slow_query_log_file=/usr/local/mysql/data/mysql_slow_query.log
long_query_time=5	   ##慢查询时间,设置超过5秒执行的语句被记录	

2.查看日志的状态:

2.1查看通用查询日志是否开启:

show variables like 'general%';		

 2.2 查看二进制日志是否开启:

show variables like 'log_bin%';

2.3 查看慢查询日功能是否开启:

show variables like '%slow%';	

2.4 查看慢查询时间设置:

show variables like 'long_query_time';

2.5 在数据库中设置开启慢查询的方法:

set global slow_query_log=ON;
##在数据库中设置开启慢查询的方法,即以修改变量值的方式开启。但重启服务后会失效。

五、增量备份的实际操作:

1.二进制日志功能:

二进制日志(binlog)有3种不同的记录格式:

  • STATEMENT (基于SQL语句):

每一条涉及到被修改的sql 都会记录在binlog中

  • ROW(基于行):

只记录变动的记录,不记录sql的上下文环境

  • MIXED(混合模式)

一般的语句使用 statement,函数使用ROW方式存储。

mysql> show variables like 'general%';

默认格式是STATEMENT

一般的语句使用statement,函数使用ROW方式存储。

2.查看二进制文件内容:

[root@localhost data]#mysqlbinlog --no-defaults /data/mysql-bin.000001

mysqlbinlog --no-defaults  /opt/mysql-bin.000001
mysqlbinlog --no-defaults --base64-output=decode-rows -v /usr/local/mysql/data/mysql-bin.000001#--base64-output=decode-rows:使用64位编码机制去解码(decode)并按行读取(rows)
#-v: 显示详细内容
#--no-defaults : 默认字符集(不加会报UTF-8的错误)
PS: 可以将解码后的文件导出为txt格式,方便查阅mysqlbinlog --no-defaults --base64-output=decode-rows -v /usr/local/mysql/data/mysql-bin.000001 > /opt/mysql-bin.0000011、at :开始的位置点2、end_log_pos:结束的位置3、时间戳: 210712 11:50:304、SQL语句

 

3.一般恢复:

备份:

删除ky35 

恢复:

查看:

4.基于位置点恢复:

可每天进行增量备份操作,生成新的二进制日志文件(例如:mysql-bin.000004)mysqladmin -u root -p flush-logs ### 刷新
基于位置点恢复
#仅恢复到操作 ID 为'1023'之前的数据,即恢复1 2的数据
mysqlbinlog --no-defaults --stop-position='1023' mysql-bin.000001|mysql -uroot -p123#恢复3数据  起始操作ID 为'1576',截止id为 '1975'
mysqlbinlog --no-defaults --start-position='2947' --stop-position='3237' mysql-bin.000002|mysql -uroot -p123#跳过第4条数据,恢复第5条数据,直接从第5条开始到最后
mysqlbinlog --no-defaults --start-position='1771' mysql-bin.000002|mysql -uroot -p123

插入数据: 

回到1315之前:

查看:

 

 回到1204之后:

 

回到1204到1456之间:

5.基于时间点恢复:

mysqlbinlog [--no-defaults] --start-datetime='年-月-日 小时:分钟:秒' --stop-datetime='年-月-日小时:分钟:秒' 二进制日志 | mysql -u 用户名 -p123

 

恢复了第三条数据: 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/771904.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

30岁失业的我,选择职场转型,进入AIGC工程师领域,重新开始

去年,刚满30岁的我又一次被公司辞退了,由于学历不高,简历也不出彩,尽管半个月来投了一份又一份的简历,但仍然是石沉大海,我终于不得不开始思考一个以前被我一直刻意压制的想法——职场转型。 尽管知道这条…

大模型知识点汇总——分布式训练

PS:本篇只在宏观上介绍相关概念和技术,不做数学推导和过于细节介绍,旨在快速有一个宏观认知,不拘泥在细节上,导致很混乱。 涉及技术名词 分布式框架等涉及的技术名词很多,很容易让人眼花缭乱,…

echarts 柱形图如何让其中一个柱子的颜色跟其他柱子不同

如何让其中一个柱子的颜色跟其他柱子不同 series: [{data: [120,// 使用对象的形式, value代表当前值, itemStyle设置样式{value: 200,itemStyle: {color: #a90000}},150,80,70,110,130],type: bar}]设置单个柱子颜色: 柱形图单个柱子颜色: https://e…

Vue3+Element Plus+TS开发企业管理后台(二)

使用vite初始化项目 确保你的开发环境中已经安装了Node.js,而且有npm,yarn等包管理工具,然后可以按照vite官方提供的方式初始化项目: yarn create vite跟随提示选择即可: 或者可以直接克隆下面的仓库 https://gith…

flask_restful规范返回值之参数设置

设置重命名属性和默认值 使用 attribute 配置这种映射 , 比如: fields.String(attributeusername) 使用 default 指定默认值,比如: fields.String(defaultsxt) from flask import Flask,render_template from flask_restful import A…

selenium自动化测试-unittest框架

unittest框架的优点 (1)能够组织多个用例去执行 (2)提供丰富的断言方法 (3)能够生成测试报告 unittest框架的核心要素 1. TestCase测试用例 TestCase(测试用例),最小的测试单元,创建的测试类需要继承该基类 步骤: (1&#x…

风丘EV能量流测试解决方案 提高电动汽车续航能力

电动汽车(EV)近些年发展迅猛,已被汽车业内普遍认为是未来汽车发展的新方向,但现如今电动汽车仍然存在一些短板,导致其还无法替代传统燃油车。对此,首先想到的肯定就是电动车的续航问题。其实解决电动车续航…

VBA技术资料MF133:隐藏编辑栏及计算字符串

我给VBA的定义:VBA是个人小型自动化处理的有效工具。利用好了,可以大大提高自己的工作效率,而且可以提高数据的准确度。“VBA语言専攻”提供的教程一共九套,分为初级、中级、高级三大部分,教程是对VBA的系统讲解&#…

centos7 使用docker安装了mongo 怎么设置远程链接,必须使用密码才能连接

docker run -d –name mongodb_container -e MONGO_INITDB_ROOT_USERNAMEroot -e MONGO_INITDB_ROOT_PASSWORDroot -e MONGO_INITDB_DATABASEdataserver -p 27017:27017 \ 无法在mongo容器里编辑文件 如果你无法直接编辑 MongoDB 容器内的配置文件,你可以尝试…

基于java+springboot+vue实现的大学生二手物品交易商城(文末源码+Lw+ppt)23-329

摘 要 二十一世纪我们的社会进入了信息时代,信息管理系统的建立,大大提高了人们信息化水平。传统的管理方式对时间、地点的限制太多,而在线管理系统刚好能满足这些需求,在线管理系统突破了传统管理方式的局限性。于是本文针对这…

Java:包装类简单认识泛型

一、包装类 包装类指的是基本数据类型(如int、double等)对应的类类型,我们可以通过包装类直接调用里面的方法! 基本数据类型 包装类 byte Byte short …

09 网络ARP请求,响应,ICMP协议

arp协议_arp请求_arp回应 ICMP包构造ping搜狐服务器参考 #include <stdio.h> #include <sys/types.h> /* See NOTES */ #include <sys/socket.h> #include <linux/if_packet.h> #include <linux/if_ether.h> #include <string.h> #includ…

基于Springboot Vue医院管理系统+数据库脚本+文档(万字)

项目效果视频: 基于Springboot Vue医院管理系统 一、 项目介绍 角色&#xff1a;管理员、患者、医生 基于springboot vue实现的医院管理系统&#xff0c;有管理员、医生和患者三种角色。系统拥有丰富的功能&#xff0c;能够满足各类用户的需求&#xff0c;系统提供了登录和注册…

Day20 代码随想录(1刷) 二叉树

目录 654. 最大二叉树 617. 合并二叉树 700. 二叉搜索树中的搜索 98. 验证二叉搜索树 654. 最大二叉树 给定一个不重复的整数数组 nums 。 最大二叉树 可以用下面的算法从 nums 递归地构建: 创建一个根节点&#xff0c;其值为 nums 中的最大值。递归地在最大值 左边 的 子数…

最长公共子序列、LCS算法模型

LCS问题就是给定两个序列A和B&#xff0c;求他们最长的公共子序列。 在求解时&#xff0c;我们会设dp[i][j]表示为A[1 ~ i]序列和B[1 ~ j]序列中&#xff08;不规定结尾&#xff09;的最长子序列的长度。 if(a[i]b[i]) dp[i][j]dp[i-1][j-1]1; else dp[i][j]max(dp[i-1][j],dp…

白话模电:4.耦合、差分、无源滤波、反馈(考研面试常问问题)

一、介绍一下三极管多级放大电路的三种耦合方式及其特点&#xff1f;耦合的目的是什么&#xff1f; 多级放大电路中各放大级之间的连接方式称为耦合方式。常见的耦合方式有三种&#xff1a;阻容耦合&#xff08;RC耦合&#xff09;、直接耦合和变压器耦合。 耦合的目的是将信号…

华南地区日用品电商综合服务商「广州麦和」积极推进数字化,企企通助力企业SRM系统上线

近期&#xff0c;由企企通携手华南地区线上最大的居家清洁&个人护理行业的电子商务综合服务商之一麦和&#xff08;广州&#xff09;实业有限公司&#xff08;以下简称“广州麦和”&#xff09;打造的SRM采购供应链协同系统上线&#xff0c;推进数字化采购管理体系建设&…

el-select 下拉框点击某一禁选选项 按Esc关闭弹窗 下拉框无法收起问题

下面请看详细内容 会出现下图情况 弹窗能正常关闭 但是下拉框选项面板仍然存在 解决思路1&#xff1a; 本来想的是监听dialog的Esc关闭事件 关闭时修改el-select-dropdown的css样式 将display none 这个没实现 解决思路2&#xff1a; 看官网发现有个失焦事件 他手动触发失…

大词汇量高质量3D物体生成需要解决哪些问题?如何解决?

作者:Vallee | 来源:计算机视觉工坊 在公众号「计算机视觉工坊」后台,回复「原论文」可获取论文pdf和代码链接 DiffTF: 基于Transformer的大词汇量3D扩散模型 大词汇量3D物体生成 最近基于扩散模型的3D生成方法大火,但如何生成大量类别且高质量的3D模型还没得到很好地解决…

DARTS-: ROBUSTLY STEPPING OUT OF PERFORMANCE COLLAPSE WITHOUT INDICATORS

DARTS-&#xff1a;增加辅助跳跃连接&#xff0c;鲁棒走出搜索性能崩溃 论文链接&#xff1a;https://arxiv.org/abs/2009.01027 项目链接&#xff1a;GitHub - Meituan-AutoML/DARTS-: Code for “DARTS-: Robustly Stepping out of Performance Collapse Without Indicators…