mysql(47) : 天分区表自动管理

说明
分区字段为int类型,并且为主键,如下示例的date

CREATE TABLE `mytest` (`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '(id)',`gmt_create` datetime DEFAULT NULL,`gmt_modify` datetime DEFAULT NULL,`name` varchar(50) DEFAULT NULL COMMENT '名称',`age` int DEFAULT NULL COMMENT '年龄',`sdate` int NOT NULL COMMENT '天(分区键,20231129)',PRIMARY KEY (`id`,`sdate`)
) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci AVG_ROW_LENGTH=585 ROW_FORMAT=DYNAMIC COMMENT='';


job


import com.alibaba.gts.cdyj.task.biz.dao.mapper.PartitionManagerDayMapper;
import com.alibaba.gts.flm.common.utils.DateUtil;
import lombok.AllArgsConstructor;
import lombok.Data;
import lombok.NoArgsConstructor;
import lombok.extern.slf4j.Slf4j;
import org.springframework.context.annotation.Configuration;
import org.springframework.scheduling.annotation.Scheduled;import javax.annotation.PostConstruct;
import javax.annotation.Resource;
import java.util.ArrayList;
import java.util.List;@Configuration
@Slf4j
public class PartitionManagerDayJob {@Resourceprivate PartitionManagerDayMapper partitionManagerMapper;private static final String prefix = "p_";private static final List<Config> configs = new ArrayList<Config>() {{add(new Config("rt_trace", "sdate", 7));add(new Config("rt_lkyw_trace", "sdate", 7));add(new Config("rt_trace_prod", "sdate", 7));add(new Config("rt_lkyw_trace_prod", "sdate", 7));add(new Config("rt_event_info", "sdate", 7));}};@PostConstructprivate void init() {handle();}/*** 0点和12点执行*/@Scheduled(cron = "0 0 0,12 * * ? ")public void task() {handle();}public void handle() {log.info("分区管理逻辑开始执行... configs.size:{}", configs.size());for (Config config : configs) {String table = config.getTable();String field = config.getField();Integer partitionCount = partitionManagerMapper.selectCountPartition(table);log.info("table:{} 分区数量:{}", table, partitionCount);if (partitionCount > 0) {// 已有分区/// 创建新分区(创建未来2天分区)for (int i = 0; i < 2; i++) {String day = DateUtil.format(System.currentTimeMillis() + 1000 * 60 * 60 * 24 * i, DateUtil.PATTERN_YYYYMMDD);if (!exist(table, prefix + day)) {partitionManagerMapper.createPartition(table, field, prefix + day, day);log.info("table:{} 创建分区:{}", table, prefix + day);}}long deleteTime = System.currentTimeMillis() - (config.getExpireDay() * 1000L * 60 * 60 * 24);String deleteDay = DateUtil.format(deleteTime, DateUtil.PATTERN_YYYYMMDD);/// 删除旧分区if (exist(table, prefix + deleteDay)) {partitionManagerMapper.deletePartition(table, prefix + deleteDay);log.info("table:{} 删除分区:{}", table, prefix + deleteDay);}} else {// 无分区// 初始化分区,初始化当前小时分区String currentDay = DateUtil.format(System.currentTimeMillis(), DateUtil.PATTERN_YYYYMMDD);partitionManagerMapper.initPartition(table, field, prefix + currentDay, currentDay);log.info("table:{} 初始化分区:{}", table, prefix + currentDay);// 创建未来4天分区for (int i = 0; i < 4; i++) {String day = DateUtil.format(System.currentTimeMillis() + 1000L * 60 * 60 * 24 * i, DateUtil.PATTERN_YYYYMMDD);if (!exist(table, prefix + day)) {partitionManagerMapper.createPartition(table, field, prefix + day, day);log.info("table:{} 创建分区:{}", table, prefix + day);}}}}log.info("分区管理逻辑执行完成");}private Boolean exist(String table, String partitionName) {return partitionManagerMapper.selectPartitionIsExist(table, partitionName) > 0;}@Data@AllArgsConstructor@NoArgsConstructorpublic static class Config {/* 表名 */private String table;/* 分区字段 */private String field;/* 多少小时后过期 */private Integer expireDay;}
}

mapper


import org.apache.ibatis.annotations.Mapper;
import org.apache.ibatis.annotations.Param;
import org.apache.ibatis.annotations.Select;
import org.apache.ibatis.annotations.Update;/*** @Author: liyue* @Date: 2023/04/25/15:15* @Description: 组件库*/
@Mapper
public interface PartitionManagerDayMapper {@Select("SELECT count(1) FROM INFORMATION_SCHEMA.partitions WHERE TABLE_SCHEMA = schema() AND TABLE_NAME=#{tableName}  and PARTITION_NAME is not null;")Integer selectCountPartition(@Param("tableName") String tableName);@Select("SELECT count(1) FROM INFORMATION_SCHEMA.partitions WHERE TABLE_SCHEMA = schema() AND TABLE_NAME=#{tableName} AND partition_name = #{partitionName};")Integer selectPartitionIsExist(@Param("tableName") String tableName, @Param("partitionName") String partitionName);@Update("ALTER TABLE ${tableName} DROP PARTITION ${partitionName};")int deletePartition(@Param("tableName") String tableName, @Param("partitionName") String partitionName);@Update("ALTER TABLE ${table} partition by range (${timeField})( partition ${partitionName} values less than(${partitionVal} ));")int initPartition(@Param("table") String table, @Param("timeField") String timeField, @Param("partitionName") String partitionName, @Param("partitionVal") String partitionVal);@Update("ALTER TABLE ${table}  ADD PARTITION ( partition ${partitionName} values less than(${partitionVal} ))")int createPartition(@Param("table") String table, @Param("timeField") String timeField, @Param("partitionName") String partitionName, @Param("partitionVal") String partitionVal);
}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/184284.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

STL-空间配置器

近来看了看《STL源码剖析》中的空间配置器&#xff0c;尝试着读了一下&#xff0c;觉得模板还是强大的&#xff0c;同时对于allocator的函数有了进一步的认识。 #if 0 #include<memory> //alloctor 的必要接口 allocator::valuetype allocator::pointer allocator::cons…

vscode非常好用的扩展插件

1、Code Spell Checker&#xff1a; 帮助我们检查单词是否拼写错误&#xff0c;检查规则遵循驼峰拼写法。 2、Color Highlight&#xff1a;高亮显示颜色值 3、Svg Preview&#xff1a; 实时预览svg图片&#xff08;修改width、height、fill等值来实时查看效果&#xff09; 4、…

Kong处理web服务跨域

前言 好久没写文章了&#xff0c;大概有半年多了&#xff0c;这半年故事太多&#xff0c;本文写不下&#xff0c;就写写文章标题问题&#xff01; 问题描述 关于跨域的本质问题我这里不过多介绍&#xff0c;详细请看历史文章 跨域产生的原因以及常见的解决方案。 我这边是新…

PyCharm免费安装和新手使用教程

PyCharm是一款由JetBrains公司开发的Python集成开发环境&#xff08;IDE&#xff09;。它提供了一系列强大的功能&#xff0c;包括自动代码完成、语法高亮、自动缩进、代码重构、调试器、测试工具、版本控制工具等&#xff0c;使开发者可以更加高效地开发Python应用程序。 新手…

主流数据库类型总结

前言&#xff1a;随着互联网的高速发展&#xff0c;为了满足不同的应用场景&#xff0c;数据库的种类越来越多容易混淆&#xff0c;所以有必要在此总结一下。数据库根据数据结构可分为关系型数据库和非关系型数据库。非关系型数据库中根据应用场景又可分为键值&#xff08;Key-…

Leetcode394. 字符串解码

Every day a Leetcode 题目来源&#xff1a;394. 字符串解码 解法1&#xff1a;栈 本题中可能出现括号嵌套的情况&#xff0c;比如 2[a2[bc]]&#xff0c;这种情况下我们可以先转化成 2[abcbc]&#xff0c;在转化成 abcbcabcbc。我们可以把字母、数字和括号看成是独立的 TO…

滴滴就系统故障再次致歉

滴滴出行官博发文就11月27日夜间发生的系统故障再次致歉&#xff0c;同时表示&#xff0c;初步确定&#xff0c;这起事故的起因是底层系统软件发生故障&#xff0c;并非网传的“遭受攻击”&#xff0c;后续将深入开展技术风险隐患排查和升级工作&#xff0c;全面保障服务稳定性…

第20 章 多线程

20.1线程简介. 20.2创建线程 2.1继承Thread类 Thread 类是java.lang包中的一个类&#xff0c;从这个类中实例化的对象代表线程&#xff0c;程序员启动一个新线程需要建立Thread 实例。Thread类中常用的两个构造方法如下: public Thread():创建一个新的线程对象。 public Threa…

【数据结构】单链表---C语言版

【数据结构】单链表---C语言版 一、顺序表的缺陷二、链表的概念和结构1.概念&#xff1a; 三、链表的分类四、链表的实现1.头文件&#xff1a;SList.h2.链表函数&#xff1a;SList.c3.测试函数&#xff1a;test.c 五、链表应用OJ题1.移除链表元素&#xff08;1&#xff09;题目…

多媒体信号处理复习笔记 --脑图版本

多媒体信号处理复习笔记 --脑图版本 依据 [2020多媒体信号处理复习笔记] 考前复习时使用Xmind制作 例图: PDF下载 BaiduYunPan 提取码&#xff1a;jbyw CSDN 下载

从零构建属于自己的GPT系列1:文本数据预处理、文本数据tokenizer、逐行代码解读

&#x1f6a9;&#x1f6a9;&#x1f6a9;Hugging Face 实战系列 总目录 有任何问题欢迎在下面留言 本篇文章的代码运行界面均在PyCharm中进行 本篇文章配套的代码资源已经上传 从零构建属于自己的GPT系列1&#xff1a;文本数据预处理 从零构建属于自己的GPT系列2&#xff1a;语…

【LeeCode】数组总结

二分法 暴力解法时间复杂度&#xff1a;O(n) 二分法时间复杂度&#xff1a;O(logn) 循环不变量原则 双指针法 双指针法&#xff08;快慢指针法&#xff09;&#xff1a;通过一个快指针和慢指针在一个for循环下完成两个for循环的工作。 暴力解法时间复杂度&#xff1a;O(n^2…

渲染到纹理:原理及WebGL实现

这篇文章是WebGL系列的延续。 第一个是从基础知识开始的&#xff0c;上一个是向纹理提供数据。 如果你还没有阅读过这些内容&#xff0c;请先查看它们。 NSDT在线工具推荐&#xff1a; Three.js AI纹理开发包 - YOLO合成数据生成器 - GLTF/GLB在线编辑 - 3D模型格式在线转换 - …

ffmpeg 把mp4文件中某段视频转成gif文件

一 缘起背景&#xff1a; 有视频文件转gif动图的需求&#xff1b;网上下载的转换工具需要注册会员、否则带水印&#xff0c;还限制时长。 二 工具环境&#xff1a; win10 下 dos 操作 ffmpeg 三 操作命令&#xff1a; ffmpeg -i test.mp4 -ss 00:01:01 -t 00:00:19 -vf &q…

什么牌子的台灯对孩子的眼睛好?安利五款适合孩子备考的护眼台灯

近年来&#xff0c;青少年的近视问题越来越严重&#xff0c;近视率持续升高&#xff0c;不少上小学一年级就已经戴上了厚厚的近视眼镜。导致这种现象发生的原因有两个&#xff0c;一个是孩子长时间使用电子产品导致。还有就是现在孩子的学习任务&#xff0c;不仅远比80、90后上…

HNU 练习八 结构体编程题4. 看电影

【问题描述】 湖南大学正在举办一场重要的国际学术会议&#xff0c;出席会议的 n 位科学家来自不同的国家&#xff0c;每位科学家都只熟悉一种语言&#xff0c;为方便起见&#xff0c;世界上所有的语言用1~1000的数字编号来列出。 晚上&#xff0c;主办方安排所有科学家去看电影…

【开源】基于JAVA的高校学生管理系统

项目编号&#xff1a; S 029 &#xff0c;文末获取源码。 \color{red}{项目编号&#xff1a;S029&#xff0c;文末获取源码。} 项目编号&#xff1a;S029&#xff0c;文末获取源码。 目录 一、摘要1.1 项目介绍1.2 项目录屏 二、功能模块2.1 学生管理模块2.2 学院课程模块2.3 学…

WebSocket 是什么原理?为什么可以实现持久连接?

WebSocket 是一种用于实现持久连接的通信协议&#xff0c;它的原理和工作方式相对复杂&#xff0c;但我们可以尝试以尽可能简单和清晰的方式来解释它。 WebSocket 的原理 在理解 WebSocket 的工作原理之前&#xff0c;我们首先要了解 HTTP 协议的短连接性质。在传统的 HTTP 通信…

Python基础语法之学习表达式进行符串格式化

Python基础语法之学习表达式进行符串格式化 一、代码二、效果 一、代码 print("11等于%d" % (1 1)) print(f"2/1等于{2 / 1}") print("字符串类型是%s" % type("字符串"))二、效果 坚持追求自己的梦想&#xff0c;即使道路漫长曲折&…

Android设置文字颜色渐变

项目中用到了很多文字颜色渐变的设计&#xff0c;因此做一下记录。 核心代码如下&#xff1a; /*** 统一文字渐变色设置* param colors 渐变色字符串数组* param positions 渐变色位置数组&#xff0c;可为空* param start 渐变起始点&#xff0c;可为空* param end 渐变结束…