YUNBE云贝-PostgreSQL Vacuum详解:深入理解与实践

引言

PostgreSQL作为一款功能强大、开源的关系型数据库管理系统,其性能优化机制中,“VACUUM”命令扮演着至关重要的角色。本文将对PostgreSQL的VACUUM操作进行全面解析,探讨其工作原理、类型以及如何在实际环境中合理应用。

一、VACUUM基础概念

1.1 VACUUM的作用

在PostgreSQL中,当数据被更新或删除时,系统并不会立即释放物理空间,而是将其标记为“可重用”。随着时间推移,表中的死元组(已删除或已被新版本覆盖的数据)会越来越多,这不仅会导致存储空间利用率下降,也可能影响查询性能,因为查询需要遍历这些无用的元组。而VACUUM命令的主要任务就是清理这些死元组,并回收相应的存储空间。

1.2 VACUUM的工作方式

执行VACUUM命令后,PostgreSQL会扫描表并:

• 删除无效的行版本

• 更新表的统计信息以提高查询计划器的准确性

• 如果启用了autovacuum_freeze_max_age参数,还会防止事务ID过多导致的老化问题

对于支持MVCC(多版本并发控制)的PostgreSQL,VACUUM还负责冻结旧的事务ID,确保事务可见性信息的有效管理。

二、VACUUM类型

2.1 VACUUM常规操作

普通的VACUUM命令仅能清除无效行版本和更新统计信息,但不能完全压缩表以释放磁盘空间。

VACUUM table_name;

2.2 VACUUM FULL操作

VACUUM FULL则更为激进,它不仅执行常规VACUUM的功能,还能彻底整理表,使其占用的空间最小化,类似于重建表的效果。但需要注意的是,VACUUM FULL会锁定整个表,在大表上可能造成较长时间的阻塞。

VACUUM FULL table_name;

2.3 自动Vacuum(Autovacuum)

为了减轻手动执行VACUUM的压力,PostgreSQL提供了Autovacuum后台进程,可以根据配置自动定期执行VACUUM。Autovacuum能够监控表的更新情况,并在满足一定条件时自动触发VACUUM操作。

三、VACUUM实验过程

为了直观地理解PostgreSQL的VACUUM操作,我们可以进行以下实验:

实验1:创建并填充测试表

-- 创建一个用于实验的表,并插入数据

图片

-- 填充10,000行数据
 

图片

图片

-- 记录初始表大小(以字节为单位)

图片

图片

实验2:执行更新和删除操作以产生死元组

-- 执行大量更新操作,模拟事务更新

图片

-- 执行删除操作,生成被删除但未释放空间的数据

图片

-- 检查表中当前的行数与之前的总数做对比

图片

实验3:执行常规VACUUM

-- 执行常规VACUUM命令

图片

-- 检查表的最新大小,常规VACUUM可能不会减少物理文件大小

图片

实验4:查询pg_stat_user_tables

视图观察影响

-- 查看`n_dead_tup`字段的变化,它反映了表中的死元组数量

图片

-- 同时也可以查看其他与vacuum相关的统计信息

图片

实验5:执行VACUUM FULL

注意:在生产环境中应谨慎使用VACUUM FULL,因为它可能导致表锁定并在大表上消耗较长时间。

-- 执行VACUUM FULL,此操作会整理表空间并回收所有废弃空间

图片

-- 再次检查表的大小,这次应该能看到明显的减小

图片

实验6:配置和观察Autovacuum行为

• 首先,确保Autovacuum已启用且设置合理:

图片

• 进行更多的更新和删除操作后,不手动执行VACUUM,而是等待Autovacuum自动运行。

图片

• 监控Autovacuum活动和表状态:

-- 观察当前正在进行的Autovacuum进程

图片

-- 或者定期检查`pg_stat_user_tables`视图,查看n_dead_tup是否在减少

图片

通过以上步骤,您将更加深入地了解PostgreSQL VACUUM的执行过程、效果以及Autovacuum如何根据参数设置自动进行清理工作。实际应用中,请结合实际情况调整Vacuum相关参数,优化数据库性能。

四、VACUUM最佳实践

定期执行VACUUM:根据业务负载情况,设置合理的VACUUM策略,尤其针对频繁更新的大表。

• 启用并调优Autovacuum:大部分情况下,应依赖于Autovacuum来维护数据库健康。通过调整autovacuum_vacuum_threshold、autovacuum_vacuum_scale_factor等参数,可以更精确地控制何时启动自动VACUUM。

• 考虑使用VACUUM FULL的情况:虽然VACUUM FULL可以最大程度地释放磁盘空间,但由于其可能导致表锁定且执行耗时较长,因此建议在业务低峰期执行,并非作为日常维护工具。

• 监控Vacuum活动:利用pg_stat_user_tables视图或其他监控工具,了解Vacuum操作的状态和效果,以便及时调整相关参数。

总结

PostgreSQL的VACUUM是数据库维护和性能优化的重要组成部分,正确理解和运用VACUUM命令及其变种,对于保持数据库的良好运行状态具有重要意义。同时,随着数据库技术的发展和PostgreSQL新特性的引入,例如FREEZE窗口期、并行Vacuum等,VACUUM在处理大型数据集时的效率也在不断提升。

感谢观看,本文为云贝教育 刘峰 原创,请尊重知识产权,转发请注明出处,不接受任何抄袭、演绎和未经注明出处的转载。

参考学习视频:【云贝教育】PostgreSQL分享课:AUTOVACCUM技术讲解

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/747004.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

视频监控汇聚管理系统EasyCVR平台RTMP推流异常是什么原因?

AI视频智能分析/视频监控管理平台EasyCVR能在复杂的网络环境中(专网、内网、局域网、广域网、公网等),支持设备通过4G、5G、WIFI、有线等方式接入,并将设备进行统一集中接入与视频汇聚管理,经平台接入的视频流能实现多…

字符串的排列(LeetCode 567)

文章目录 1.问题描述2.难度等级3.热门指数4.解题思路4.1 滑动窗口4.2 双指针 参考文献 1.问题描述 给你两个字符串 s1 和 s2 ,写一个函数来判断 s2 是否包含 s1 的排列。如果是,返回 true ;否则,返回 false 。 换句话说&#xf…

MySQL8.0导入与导出

一、into outfile导出 1、语法: select * from employees ORDER BY lname LIMIT 1000INTO OUTFILE /tmp/employee_data_1.txtFIELDS TERMINATED BY , OPTIONALLY ENCLOSED BY ", ESCAPED BY \LINES TERMINATED BY \n; FIELDS TERMINATED BY 表示列分隔符 [OP…

无人机自动返航算法部署与飞行控制实践

一、环境准备 无人机硬件:确保你有一台支持自定义飞行控制的无人机,通常配备有Pixhawk或其他类似的飞行控制器。 地面站软件:安装如Mission Planner或QGroundControl等地面站软件,用于配置无人机参数和上传飞行控制代码。 编程环…

基于Python flask 的豆瓣电影排行榜,豆瓣电影评分可视化,豆瓣电影评分预测系统

博主介绍:✌程序员徐师兄、7年大厂程序员经历。全网粉丝12w、csdn博客专家、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、Python技术领域和毕业项目实战✌ 🍅文末获取源码联系🍅 👇🏻 精彩专栏推荐订阅&…

1+x中级题目练习复盘(四)

顺序存储较链式存储节省空间、查找性能高、插入和删除性能低。 <ALL表示小于最小 大于ANY表示大于最小值 LEFT OUTER JOIN 等同于LEFT JOIN INNER 和OUTER 不能同时出现 Before注解的方法在每个测试方法执行之前都要执行一次 一个Lambda表达式由以下三部分组…

什么软件可以剪辑录音?录音剪辑推荐3款工具

随着数字技术的发展&#xff0c;录音已经成为我们日常生活和工作中不可或缺的一部分。无论是会议记录、课堂笔记&#xff0c;还是音乐创作、语音聊天&#xff0c;我们都需要用到录音功能。然而&#xff0c;单纯的录音往往不能满足我们的需求&#xff0c;我们还需要对录音进行剪…

cesium-可视化区域分析

全部代码 <template><div id="cesiumContainer" style="height: 100vh;"></div><div id="toolbar" style="position: fixed;top:20px;left:220px;"><el-breadcrumb :separator-icon="ArrowRight&quo…

外卖小程序-购物车模块表结构设计和后端代码

表结构设计 添加购物车代码 Service public class ShoppingCartServiceImpl implements ShoppingCartService {Autowiredprivate ShoppingCartMapper shoppingCartMapper;Autowiredprivate DishMapper dishMapper;Autowiredprivate SetmealMapper setmealMapper;/*** 添加购物…

【C#】KeyDown事件不被触发的问题。

在c#的winform工程中&#xff0c;可能会遇到创建了一个对话框&#xff0c;该对话框内包含了控件作为这个对话框的一部分。软件运行时&#xff0c;键盘输入按键&#xff0c;却没有办法触发对话框的KeyDown事件。是不是很奇怪呢&#xff1f; 首先要明白&#xff1a;主对话…

MySQL--执行一条 select 语句,期间发生了什么?

执行一条 SQL 查询语句&#xff0c;期间发生了什么&#xff1f; 连接器&#xff1a;建立连接&#xff0c;管理连接、校验用户身份&#xff1b;查询缓存&#xff1a;查询语句如果命中查询缓存则直接返回&#xff0c;否则继续往下执行。MySQL 8.0 已删除该模块&#xff1b;解析 …

Vue.js+SpringBoot开发APK检测管理系统

目录 一、摘要1.1 项目介绍1.2 项目录屏 二、功能模块2.1 数据中心模块2.2 开放平台模块2.3 软件档案模块2.4 软件检测模块2.5 软件举报模块 三、系统设计3.1 用例设计3.2 数据库设计3.2.1 开放平台表3.2.2 软件档案表3.2.3 软件检测表3.2.4 软件举报表 四、系统展示五、核心代…

C++11:自动类型推导 auto 和 decltype(上)

在 C11标准中&#xff0c;引入了两个非常有用的关键字&#xff1a;auto 和 decltype。这两个关键字在提高编码效率、代码可读性以及维护性方面起到了巨大作用。今天&#xff0c;我们将深入探讨 auto的用法&#xff0c;并通过实际的代码示例来说明怎么使用它。 auto 的用法 关…

Linux命令:dmesg命令

目录 1 dmesg命令1.1 简介1.2 说明1.3 案例1、显示所有内核消息2、实时监控新消息3、显示特定级别的消息4、将消息输出到文件5、搜索包含特定字符串的被检测到的硬件6、将开机信息发邮件7、打印并清除内核环形缓冲区 总结 1 dmesg命令 1.1 简介 dmesg 命令在 Linux 系统中用于…

面试官:简单讲一下Spring Boot事务的使用

该文章专注于面试,面试只要回答关键点即可,不需要对框架有非常深入的回答,如果你想应付面试,是足够了,抓住关键点 面试官:简单讲一下SpringBoot事务的使用 在Spring Boot中使用事务可以确保一系列操作要么全部成功要么全部失败,保持数据的一致性。Spring Boot提供了多…

Lord 3DMCV7-AHRS 时间同步硬件触发设置

目的:通过FPGA发送脉冲触发IMU采集数据。FPGA发送脉冲时,IMU才有数据产生。 FPGA与IMU的硬件接线就不讲了,这里主要说明的是IMU的设置以及ROS驱动的config文件更改。 1. WIN上位机设置 通过IMU在WINDOWS的上位机SensorConnect对IMU的GPIO、波特率等基本功能进行设值,具体…

通过spring boot/redis/aspect 防止表单重复提交【防抖】

一、啥是防抖 所谓防抖&#xff0c;一是防用户手抖&#xff0c;二是防网络抖动。在Web系统中&#xff0c;表单提交是一个非常常见的功能&#xff0c;如果不加控制&#xff0c;容易因为用户的误操作或网络延迟导致同一请求被发送多次&#xff0c;进而生成重复的数据记录。要针…

用pyecharts的overlap绘制叠加图时,设置的颜色不起作用

问题 用pyecharts绘制叠加图时&#xff0c;如折线图上叠加散点图时&#xff0c;分别设置了自己的颜色&#xff08;三角是绿色&#xff0c;圆形是蓝色&#xff09;&#xff0c;但是渲染颜色和图例颜色不一致&#xff0c;如下图所示&#xff0c;折线颜色和散点颜色相同。 解决…

【NestJS 编程艺术】1. NestJS设计模式深度解析:构建高效、可维护的服务端应用

在当今快速发展的软件开发领域&#xff0c;Node.js凭借其轻量级和高性能的特点&#xff0c;已经成为了构建服务端应用的首选技术之一。然而&#xff0c;随着应用规模的扩大&#xff0c;传统的Node.js框架如Express和Koa可能在架构设计和代码组织上显得力不从心。这时&#xff0…

vue3--事件处理

监听事件 Vue使用 v-on 指令 (通常缩写为 符号) 来监听 DOM 事件&#xff0c;并在触发事件时执行一些JS代码 比如 v-on:click“methodName” 或使用缩写方式 click“methodName” <divid"app"><buttonclick"counter 1">Add 1</button&g…