Mysql备份恢复、与日志管理

Mysql日志管理、备份与恢复

  • 一、Mysql日志管理
    • 1.1、日志分类
      • 1.1.1、错误日志
      • 1.1.2 、通用查询日志
      • 1.1.3、 二进制日志
      • 1.1.4 、慢查询日志
      • 1.1.5 、配置日志
    • 1.2、日志的查询
  • 二、备份与恢复
    • 2.1、 数据备份的必要性
    • 2.2 、造成数据丢失的原因
    • 2.3、 数据库备份的分类
      • 2.3.1、 物理备份
      • 2.3.2、 逻辑备份
    • 2.4、数据库的备份策略
    • 2.5 、MySQL 完全备份
      • 2.5.1、 物理冷备份与恢复
      • 2.5.2、 专用备份工具
      • 2.5.3、 MySQL 完全备份（使用免交互）
      • 2.5.4 、MySQL 增量备份与恢复
      • 2.5.5、 MySQL 增量恢复

一、Mysql日志管理

MySQL 的日志默认保存位置 /usr/local/mysql/data
在这里插入图片描述

1.1、日志分类

  • 事务日志：transaction log
    事务日志的写入类型为"追加"，因此其操作为"顺序IO"；通常也被称为：预写式日志 write ahead logging事务日志文件： ib_logfile0， ib_logfile1

  • 错误日志 error log

  • 通用日志 general log

  • 慢查询日志 slow query log

  • 二进制日志 binary log

  • 中继日志 reley log，在主从复制架构中，从服务器用于保存从主服务器的二进制日志中读取的事件

1.1.1、错误日志

用来记录当MySQL启动、停止或运行时发生的错误信息，默认已开启

vim /etc/my.cnf
log-error=/usr/local/mysql/data/mysql_error.log

1.1.2 、通用查询日志

用来记录MySQL的所有连接和语句，默认是关闭的

vim /etc/my.cnf
general_log=ON
general_log_file=/usr/local/mysql/data/mysql_general.log

1.1.3、 二进制日志

用来记录所有更新了数据或者已经潜在更新了数据的语句，记录了数据的更改，可用于数据恢复，默认已开启

vim /etc/my.cnf
#也可以 log_bin=mysql-bin
log-bin=mysql-bin

1.1.4 、慢查询日志

用来记录所有执行时间超过long_query_time秒的语句，可以找到哪些查询语句执行时间长，以便于优化，默认是关闭的

vim /etc/my.cnf
slow_query_log=ON
slow_query_log_file=/usr/local/mysql/data/mysql_slow_query.log
long_query_time=5

1.1.5 、配置日志

1. #修改my.cnf配置文件#错误日志
log-error=/usr/local/mysql/data/mysql_error.log	
#通用查询日志
general_log=ON
general_log_file=/usr/local/mysql/data/mysql_general.log
#二进制日志
log-bin=mysql-bin	
#慢查询日志
slow_query_log=ON
slow_query_log_file=/usr/local/mysql/data/mysql_slow_query.log
long_query_time=52. #重新mysql服务
systemctl restart mysqld.service

修改配置文件
在这里插入图片描述
重启服务
在这里插入图片描述

1.2、日志的查询

#登入mysql
mysql -u root -p[密码]#查看通用查询日志是否开启
show variables like 'general%';	#查看二进制日志是否开启
show variables like 'log_bin%';									
#查看慢查询日功能是否开启
show variables like '%slow%';								
#查看慢查询时间设置
show variables like 'long_query_time';						
#在数据库中设置开启慢查询的方法
set global slow_query_log=ON;

在这里插入图片描述
在这里插入图片描述

二、备份与恢复

2.1、 数据备份的必要性

  • 备份的主要目的是灾难恢复

  • 在生产环境中，数据的安全性至关重要

  • 任何数据的丢失都可能产生严重的后果

2.2 、造成数据丢失的原因

  • 程序错误

  • 人为操作错误.

  • 运算错误

  • 磁盘故障

  • 灾难(如火灾、地震)和盗窃

2.3、 数据库备份的分类

2.3.1、 物理备份

对数据库操作系统的物理文件(如数据文件、日志文件等)的备份。

物理备份的方法 ：

  • 冷备份(脱机备份):是在关闭数据库的时候进行的；
  • 热备份(联机备份):数据库处于运行状态，依赖于数据库的日志文件；
  • 温备份:数据库锁定表格(不可写入但可读)的状态下进行备份操作。

2.3.2、 逻辑备份

对数据库的表或者对象进行备份。

2.4、数据库的备份策略

  • 完全备份：整个数据集，每次都备份完整的数据库。

  • 差异备份：仅备份最近一次完全备份后变化的数据，备份较慢，还原简单

  • 增量备份：仅备份最近一次完全备份或增量备份（如果存在增量）以来变化的数据，备份较快，还原复杂

1）完全备份:每次对数据库进行完整的备份

- 是对整个数据库、数据库结构和文件结构的备份- 保存的是备份完成时刻的数据库- 是差异备份与增量备份的基础优点：备份与恢复操作简单方便 缺点：数据存在大量的重复、占用大量的备份空间及备份与恢复时间长

2）差异备份:备份自从上次完全备份之后被修改过的文件

3）增量备份:只有在上次完全备份或者增量备份后被修改的文件才会被备份

2.5 、MySQL 完全备份

InnoDB存储引擎的数据库在磁盘上存储成三个文件：

  • db.opt(表属性文件)

  • 表名.frm(表结构文件)

  • 表名.ibd(表数据文件)

2.5.1、 物理冷备份与恢复

  • 备份时数据库处于关闭状态，直接打包数据库文件

  • 备份速度快，恢复时也是最简单的

1. #关闭mysql，备份data目录
systemctl stop mysqld
yum -y install xz
cd /usr/local/mysql#压缩备份data目录
tar Jcvf /opt/mysql_all_$(date +%F).tar.xz data/2. #登录mysql，删除NBA库 
systemctl start mysqld.service 
mysql -u root -p1231233. #解压之前备份的数据库data目录，不用删除原目录，会自动替换
cd /opt
ls
cd /usr/local/mysql
tar Jxvf /opt/mysql_all_2021-11-28.tar.xz -C ./4. #重启服务查看被删除的库

创建库，在库里面创建表
在这里插入图片描述
关闭mysql，备份data目录
在这里插入图片描述
在这里插入图片描述
登录mysql，删除NBA库
在这里插入图片描述
解压之前备份的数据库data目录，不用删除原目录，会自动替换
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

2.5.2、 专用备份工具

  • mysqldump常用的逻辑备份工具

  • mysqlhotcopy仅拥有备份MyISAM和ARCHIVE表

完全备份一个或多个完整的库（包括其中所有的表）

#导出的就是数据库脚本文件
mysqldump -u root -p[密码] --databases 库名1 [库名2] … > /备份路径/备份文件名.sql

例子：备份单个和多个库

mysqldump -uroot -p --databases NBA > /opt/mysql_bak/nba.sql
mysqldump -uroot -p --databases  NBA info1 > /opt/mysql_bak/nba_info1.sql

在这里插入图片描述
完全备份 MySQL 服务器中所有的库

mysqldump -u root -p[密码] --all-databases > /备份路径/备份文件名.sql

例子：备份所有库

mysqldump -uroot -p --all-databases > /opt/mysql_bak/all.sql

在这里插入图片描述
完全备份指定库中的部分表

mysqldump -u root -p[密码] 库名 [表名1] [表名2] … > /备份路径/备份文件名.sql

例子： 备份NBA库中的两个表

mysqldump -uroot -p NBA  [-d]  info1 info2 > /opt/mysql_bak/school_info1_info2.sql

  • 使用“-d”选项，说明只保存数据库的表结构

  • 不使用“-d”选项，说明表数据也进行备份

在这里插入图片描述
查看备份文件

 cat school_info1_info2.sql |grep -v '^/'|grep -v '^$'|grep -v '^-'

在这里插入图片描述

2.5.3、 MySQL 完全备份（使用免交互）

systemctl start mysqld

mysql -u root -p -e 'drop database NBA;
#“-e”选项，用于指定连接 MySQL 后执行的命令，命令执行完后自动退出
mysql -u root -p -e 'show databases;'#恢复school数据库
mysql -u root -p < /opt/mysql_bak/school.sql		
mysql -u root -p -e 'show databases;'

在这里插入图片描述恢复数据表

当备份文件中只包含表的备份，而不包含创建的库的语句时，执行导入操作时必须指定库名，且目标库必须存在。

mysqldump -uroot -p school  info1 info2 > /opt/mysql_bak/school_info1_info2.sql1. #删除school中的info1表 
mysql -u root -p -e 'drop table NBA.lilade;'
mysql -u root -p -e 'show tables from school;'2. #恢复school库中的表 
mysql -u root -p NBA < /opt/mysql_bak/school_info1_info2.sql 
mysql -u root -p -e 'show tables from NBA;'

删除NBAl中的info表
在这里插入图片描述
恢复NBA库中的表
在这里插入图片描述

2.5.4 、MySQL 增量备份与恢复

vim /etc/my.cnf
[mysqld]
log-bin=mysql-bin
#指定二进制日志(binlog)的记录格式为 MIXED
binlog_format = MIXED				
server-id = 1

在这里插入图片描述
二进制日志(binlog)有3种不同的记录格式：

  • STATEMENT(基于SQL语句)

  • ROW(基于行)

  • MIXED(混合模式)，默认格式是STATEMENT

#只要重启就会自动生成二进制文件
systemctl start mysqld
ls -l /usr/local/mysql/data/mysql-bin.*

在这里插入图片描述
可每天进行增量备份操作，生成新的二进制日志文件(例如 mysql-bin.000002)

mysqladmin -u root -p flush-logs

在这里插入图片描述
插入新数据，以模拟数据的增加或变更

insert into  NBA.info  values (6, 'cj', 33, '男', '打篮球');
insert into  NBA.info  values (7, 'lu', 33, '男', '打篮球');

在这里插入图片描述
再次生成新的二进制日志文件(例如 mysql-bin.000007 )

mysqladmin -u root -p flush-logs

在这里插入图片描述
查看二进制日志文件的内容

cp /usr/local/mysql/data/mysql-bin.000007 /opt/
mysqlbinlog --no-defaults --base64-output=decode-rows -v /opt/mysql-bin.000007
#--base64-output=decode-rows：使用64位编码机制去解码并按行读取
#-v：显示详细内容

在这里插入图片描述

2.5.5、 MySQL 增量恢复

1．一般恢复

 将所有备份的二进制日志内容全部恢复

模拟丢失更改的数据的恢复步骤

use nba;
delete from info where id=6;
delete from info where id=7;mysqlbinlog --no-defaults /usr/local/mysql/data/mysql-bin.000007 | mysql -u root -p

删除数据
在这里插入图片描述
通过二进制日志进行恢复
在这里插入图片描述
在这里插入图片描述
模拟丢失所有数据的恢复步骤

use NBA;
drop table info;mysql -u root -p NBA < /opt/mysql_bak/NBA_info_info2.sql
mysqlbinlog --no-defaults /usr/local/mysql/data/mysql-bin.000007 | mysql -u root -p

删除school库中的info1表
在这里插入图片描述
在这里插入图片描述

先回复整表，然后在恢复二进制日志文件
在这里插入图片描述
基于位置恢复

  • 数据库在某一时间点可能既有错误的操作也有正确的操作

  • 可以基于精准的位置跳过错误的操作

  • 发生错误节点之前的一个节点，上一次正确操作的位置点停止
    在这里插入图片描述

# 刷新生成新的二进制日志文件
mysqladmin -u root -p flush-logs 	
# 进入到data目录
cd /usr/local/mysql/data	
#查看二进制日志文件
mysqlbinlog --no-defaults --base64-output=decode-rows -v mysql-bin.000012

在这里插入图片描述
在数据库中插入数据并查看

use school
insert into info values(8,'小斌','男','唱歌');

mysqlbinlog --no-defaults --base64-output=decode-rows -v mysql-bin.0000008	
# at 1207										#断点
#211130  9:28:59 								#时间
insert into info values(8,'小斌','男','唱歌')     #插入的数据
insert into info values(8,'小斌','男','唱歌')

在这里插入图片描述
在这里插入图片描述
再插入一条数据

use school
insert into info values(9,'晴','女','画画');# at 22236
#211130 10:36:38
insert into info values(9,'晴','女','画画')

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
测试恢复到ID为609之前的数据， 不恢复“后面一条”的数据

删除数据之前必须先刷新一下日志文件

mysqladmin -u root -p flush-logs

在这里插入图片描述
对数据进行恢复

mysqlbinlog --no-defaults --stop-position='22236' mysql-bin.000012 | mysql -u root -p

在这里插入图片描述
仅恢复“最后一条”的数据，跳过“前面多条”的数据恢复

删除表中所有数据

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
基于时间恢复

测试恢复到ID为609之前的数据， 不恢复“后面一条”的数据

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
仅恢复“最后一条”的数据，跳过“前面多条”的数据恢复

在这里插入图片描述

mysqlbinlog --no-defaults --start-datetime='2021-11-30 10:36:38' /usr/local/mysql/data/mysql-bin.000012 |mysql -uroot -p123123

在这里插入图片描述
在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/87956.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

mysql-4:SQL的解析顺序

mysql-4:SQL的解析顺序

SQL语句的解析顺序 文章目录 SQL语句的解析顺序编写顺序与解析顺序解析顺序关键字FROMONOUTER JOINWHEREGROUP BYHAVINGSELECTDISTINCTORDER BYLIMIT 解析流程流程分析流程说明WHERE条件解析顺序 编写顺序与解析顺序 编写顺序 SELECT DISTINCT < select_list > FROM &l…
阅读更多...
Linux C/C++下收集指定域名的子域名信息（类似dnsmap实现）

Linux C/C++下收集指定域名的子域名信息（类似dnsmap实现）

我们知道dnsmap是一个工具&#xff0c;主要用于收集指定域名的子域名信息。它对于渗透测试人员在基础结构安全评估的信息收集和枚举阶段非常有用&#xff0c;可以帮助他们发现目标公司的IP网络地址段、域名等信息。 dnsmap的操作原理 dnsmap&#xff08;DNS Mapping&#xff…
阅读更多...
AMEYA360：瑞萨电子整合Reality AI工具与e² studio IDE，扩大其在AIoT领域的卓越地位

AMEYA360：瑞萨电子整合Reality AI工具与e² studio IDE，扩大其在AIoT领域的卓越地位

全球半导体解决方案供应商瑞萨电21日宣布已在其Reality AI Tools?和e2 studio集成开发环境间建立接口&#xff0c;使设计人员能够在两个程序间无缝共享数据、项目及AI代码模块。实时数据处理模块已集成至瑞萨MCU软件开发工具套件&#xff08;注&#xff09;&#xff0c;以方便…
阅读更多...
Failed to load property source from location ‘classpath:/application.yml‘

Failed to load property source from location ‘classpath:/application.yml‘

前言 给同学部署项目的时候出现了这个错误&#xff0c;困扰我半天&#xff0c;搞了一下午&#xff0c;最后Google找到了答案。 在这里记录一下&#xff01; 解决方案 第一步&#xff1a;删除原有yml文件&#xff0c;把内容复制下来&#xff0c;重新写一个然后再粘贴进去 …
阅读更多...
【yolov5】detect.py

【yolov5】detect.py

执行方法: 代码 # YOLOv5 &#x1f680; by Ultralytics, AGPL-3.0 license """ Run YOLOv5 detection inference on images, videos, directories, globs, YouTube, webcam, streams, etc.Usage - sources:$ python detect.py --weights yolov5s.pt --source …
阅读更多...
深度学习在视频直播美颜sdk中的应用

深度学习在视频直播美颜sdk中的应用

视频直播美颜SDK是一类用于实时视频美颜处理的工具包&#xff0c;它们利用深度学习算法来提高视频直播中的主播和观众的外观吸引力。本文将深入探讨深度学习在视频直播美颜sdk中的应用&#xff0c;以及这些应用对直播行业的重要性。 一、人脸检测与关键点定位 通过卷积神经网…
阅读更多...
Unity之Hololens如何实现3D物体交互

Unity之Hololens如何实现3D物体交互

一.前言 什么是Hololens? Hololens是由微软开发的一款混合现实头戴式设备，它将虚拟内容与现实世界相结合，为用户提供了沉浸式的AR体验。Hololens通过内置的传感器和摄像头，能够感知用户的环境，并在用户的视野中显示虚拟对象。这使得用户可以与虚拟内容进行互动，将数字信…
阅读更多...
2023-油猴（Tampermonkey）脚本推荐

2023-油猴（Tampermonkey）脚本推荐

2023-油猴&#xff08;Tampermonkey&#xff09;脚本推荐 知乎增强 链接 https://github.com/XIU2/UserScript https://greasyfork.org/zh-CN/scripts/419081 介绍 移除登录弹窗、屏蔽首页视频、默认收起回答、快捷收起回答/评论&#xff08;左键两侧&#xff09;、快捷回…
阅读更多...
[PowerQuery] PowerAutoMate 刷新PowerBI 数据

[PowerQuery] PowerAutoMate 刷新PowerBI 数据

通过PowerBI Automate 进行PowerBI 数据刷新之前，需要有Power Automate 授权或者Power Automate 试用账户，可以通过如下的地址进行申请注册。 https://flow.microsoft.com/zh-cn/ 完成Power Automate 登录之后，选中计划的云端流后创建，图为创建计划的云端流的操作步骤。 …
阅读更多...
redis做缓存（cache)

redis做缓存（cache)

什么是缓存 缓存(Cache)的核心思路就是把一些常用的数据放到访问速度更快的地方&#xff0c;方便获取。关于硬件的访问速度来说 CPU寄存器>内存>硬盘>网络 因此常见使用内存作为硬盘的缓存&#xff0c;例如redis。使用硬盘作为网络的缓存&#xff0c;例如浏览器通过h…
阅读更多...
数据库原理与分析实验三

数据库原理与分析实验三

目录 1、实验目的 2、实验预习与准备 3、实验内容及步骤 本博客为数据库课布置的实验二的作业。 1、实验目的 &#xff08;1&#xff09; 掌握Select子句的功能和检索数据的方法 &#xff08;2&#xff09; 掌握对查询结果排序的方法 2、实验预习与准备 &#xf…
阅读更多...
通信协议：Uart的Verilog实现（上）

通信协议：Uart的Verilog实现（上）

1、前言 调制解调器是主机/设备与串行数据通路之间的接口&#xff0c;以串行单比特格式发送和接收数据。它也被称为通用异步收发器(Uart, Universal Asynchronous Receiver/Transmitter)&#xff0c;这表明该设备能够接收和发送数据&#xff0c;并且发送和接收单元不同步。 本节…
阅读更多...
【re】BUUCTF Java逆向解密

【re】BUUCTF Java逆向解密

题目&#xff1a;BUUCTF Java逆向解密 没壳&#xff0c;是java文件&#xff08;大概&#xff09; ida打开看不懂&#xff0c;找了网页上的java反编译 Decompiler.com 没用过java啊…暂且用sublime打开 还好还挺好懂的 import java.util.ArrayList; import java.util.Scanner;p…
阅读更多...
Java开发需要的网络基础知识，搞清楚计算机网络底层原理

Java开发需要的网络基础知识，搞清楚计算机网络底层原理

作者&#xff1a;逍遥Sean 简介&#xff1a;一个主修Java的Web网站\游戏服务器后端开发者 主页&#xff1a;https://blog.csdn.net/Ureliable 觉得博主文章不错的话&#xff0c;可以三连支持一下~ 如有需要我的支持&#xff0c;请私信或评论留言&#xff01; 前言 计算机基础是…
阅读更多...
怎样提高外贸业务销售能力

怎样提高外贸业务销售能力

怎样提高外贸业务销售能力 一、市场分析与研究1. 了解目标市场&#xff1a;2. 收集客户信息&#xff1a; 二、产品知识和差异化竞争1. 熟悉产品&#xff1a;2. 差异化竞争&#xff1a; 三、制定销售策略和计划1. 制定销售计划&#xff1a;2. 销售策略&#xff1a; 四、谈判技巧…
阅读更多...
【插件】页面引导库driver.js：

【插件】页面引导库driver.js：

文章目录 一、效果图:二、实现思路:三、实现代码:【1】Driver.js 的技术特性【2】安装依赖【3】代码实现【4】 配置相关参数 一、效果图: 二、实现思路: 【官网】https://driverjs.com/docs/installation 【npm】https://www.npmjs.com/package/driver.js 【案例】改造driver.j…
阅读更多...
HAProxy Data Plane API 实现对 haproxy 的配置管理

HAProxy Data Plane API 实现对 haproxy 的配置管理

文章目录 前言一、安装1. 下载HAProxy Data Plane API2. 创建 Data Plane API 配置文件 /etc/haproxy/dataplaneapi.hcl3. 修改haproxy的配置文件 二、简单使用1. 查询请求2. 提交修改请求 总结 前言 我们平时对 haproxy 配置的修改&#xff0c;往往是 SSH 连接进去节点&#…
阅读更多...
C++之std::function类模板定义函数对象应用总结(二百三十八)

C++之std::function类模板定义函数对象应用总结(二百三十八)

简介&#xff1a; CSDN博客专家&#xff0c;专注Android/Linux系统&#xff0c;分享多mic语音方案、音视频、编解码等技术&#xff0c;与大家一起成长&#xff01; 优质专栏&#xff1a;Audio工程师进阶系列【原创干货持续更新中……】&#x1f680; 人生格言&#xff1a; 人生…
阅读更多...
【深入浅出设计模式--命令模式】

【深入浅出设计模式--命令模式】

深入浅出设计模式--命令模式 一、背景二、问题三、解决方案四、试用场景总结五、后记 一、背景 命令模式是一种行为设计模式&#xff0c;它可以将用户的命令请求转化为一个包含有相关参数信息的对象&#xff0c;命令的发送者不需要知道接收者是如何处理这条命令&#xff0c;多个…
阅读更多...
php文件上传功能(文件上传)

php文件上传功能(文件上传)

实现文件上传是Web开发中常用的功能之一&#xff0c;而PHP也是支持文件上传的。那么&#xff0c;下面我们就来介绍一下常用的PHP实现文件上传的方法。 使用HTML表单实现文件上传 HTML表单是Web开发中最基本的元素之一&#xff0c;它可以接收用户输入的数据&#xff0c;并通过…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023