MySQL:DBA看主从延迟

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档

目录

1、从DBA的视角来看影响主从延迟因素

1.1 主库更新频繁或主库有大事务

1.1.1 程序相关

1.1.2 变更相关

1.2 从库负载较高(CPU负载高、IO负载高、网络负载高)

2、主从延迟的应对策略

2.1 化解大事务

2.2 控制从库读

2.3 控制主库写

2.4 引入其他的存储

总结


提示:以下是本篇文章正文内容,下面案例可供参考

1、从DBA的视角来看影响主从延迟因素

1.1 主库更新频繁或主库有大事务

1.1.1 程序相关

1.1.1.1 避免大事务方式做数据操作,把大事务拆分为小事务。

例如,我一个事务里要对10w行数据做变更,那么这就是一个典型的大事务,我们可以采取多批次分批处理的方式,将10w行数据的变更分到1000次小事务中,每个事务处理的变更数量就变成了100,加快了处理速度,减少了主从延迟。

1.1.1.2 过高的并发适当做流量限制

这个很好理解,频繁的写操作,代表的是频繁的IO资源使用

1.1.2 变更相关

1.1.2.1 DML变更

单SQL扫描行数大于10w的不建议直接执行,需改为基于主键或选择性高的索引进行变更

1.1.2.2 DDL变更

存在延迟风险的,错峰执行,避免对业务造成长时间的影响

工具手动执行(工具可控制从库延迟时间和不锁表,对延迟和锁表敏感业务场景)

1.2 从库负载较高(CPU负载高、IO负载高、网络负载高)

对延迟敏感的业务从库避免执行长的查询语句——慢SQL

例如复杂的嵌套查询语句,没走索引且数据量大的SQL

2、主从延迟的应对策略

基于以上影响主从延迟的因素,我们不难总结有以下三个方面去减少主从延迟。主从延迟不能完全避免,只能尽可能的缩短,或者采取其他的策略去降低延迟带来的影响。

2.1 化解大事务

编写程序或者SQL的时候,需要注意

我司的SQL提交平台,会列出来影响扫描影响行数,帮助做决策。

2.2 控制从库读

这个就得从业务上去把控了

比如我们经常写一些跑批的定时任务,那么就得避开业务高峰期。

我们直接读库的操作,如果数据变化不是非常频繁,可以短暂的借助于分布式缓存进行一个缓冲过渡

管理系统经常要把各种数据关联到一起显示及过滤,在提升复杂度的同事,也可能会导致索引失效,扫描的行数急剧上升,可以寻求其他的替代方案,避免直接对数据库进行复杂嵌套查询。

2.3 控制主库写

2.4 引入其他的存储

分布式缓存,短时间内不失为一个绝佳的方案,读写快


总结

每天进步一点点!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/777816.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

《Vision mamba》论文笔记

原文出处: [2401.09417] Vision Mamba: Efficient Visual Representation Learning with Bidirectional State Space Model (arxiv.org) 原文笔记: What: Vision Mamba: Efficient Visual Representation Learning with Bidirectional St…

Ollama + Open WebUI实践

在上一篇文章Ollama实践中, 我们已经学会了如何用Ollama在本地运行大模型。 但是所有的操作都是在命令行中进行的, 不是很直观。 如果有一个漂亮的UI界面就更好了。 Open WebUI 就是一个可以实现UI界面的开源工具, 可以生成类似openAI风格的U…

人工智能(pytorch)搭建模型25-基于pytorch搭建FPN特征金字塔网络的应用场景,模型结构介绍

大家好,我是微学AI,今天给大家介绍一下人工智能(pytorch)搭建模型25-基于pytorch搭建FPN特征金字塔网络的应用场景,模型结构介绍。特征金字塔网络(FPN)是一种深度学习模型结构,主要应用于目标检测任务中&am…

基于PaddleNLP的深度学习对文本自动添加标点符号(二)

前言 基于PaddleNLP的深度学习对文本自动添加标点符号的源码版来了,本篇文章主要讲解如何文本自动添加标点符号的原理和相关训练方法,前一篇文章讲解的是使用paddlepaddle已经训练好的一些模型,在一些简单场景下可以通过这些模型进行预测&…

水位计在水利工程安全监测中起到的作用

水利工程,作为人类调控水资源、抵御水患以及利用水能的重要工具,其安全性、稳定性与高效性显得尤为关键。水位是水利工程中最基础且至关重要的参数,其精确且实时的监测对于工程的日常运行与管理具有无可替代的重要性。水位计,作为…

设计模式 - 简单工厂模式

文章目录 前言 大家好,今天给大家介绍一下23种常见设计模式中的一种 - 工厂模式 1 . 问题引入 请用C、Java、C#或 VB.NET任意一种面向对象语言实现一个计算器控制台程序,要求输入两个数和运算符 号,得到结果。 下面的代码实现默认认为两个操作数为Inte…

设计模式-设配器模式

目录 🎊1.适配器模式介绍 🎃2.适配器类型 🎏3.接口适配器 🎐4.类的适配器 🎎5.优缺点 1.适配器模式介绍 适配器模式(Adapter Pattern)是作为两个不兼容的接口之间的桥梁。这种类型的设…

LeetCode 406. 根据身高重建队列

假设有打乱顺序的一群人站成一个队列,数组 people 表示队列中一些人的属性(不一定按顺序)。每个 people[i] [hi, ki] 表示第 i 个人的身高为 hi ,前面 正好 有 ki 个身高大于或等于 hi 的人。 请你重新构造并返回输入数组 peopl…

戴尔电脑Dell SupportAssist占用内存高,卸载Dell SupportAssist

咨询戴尔客服了解到,SupportAssist是机器出厂自带的一款应用,主要的功能是可以检查驱动更新以及做一些硬件方面的健康检测,有时候后台运行可能会导致进程占用内存比较大,导致访问被的应用崩溃。 咨询卸载不影响之后,然…

计算机网络——29ISP之间的路由选择:BGP

ISP之间的路由选择:BGP 层次路由 一个平面的路由 一个网络中的所有路由器的地位一样通过LS,DV,或者其他路由算法,所有路由器都要知道其他所有路由器(子网)如何走所有路由器在一个平面 平面路由的问题 …

flutter 修改app名字和图标

一、修改名字 在Android中修改应用程序名称&#xff1a; 在AndroidManifest.xml文件中修改应用程序名称&#xff1a; 打开Flutter项目中的android/app/src/main/AndroidManifest.xml文件。找到<application>标签&#xff0c;然后在android:label属性中修改应用程序的名称…

安卓Activity上滑关闭效果实现

最近在做一个屏保功能&#xff0c;需要支持如图的上滑关闭功能。 因为屏保是可以左右滑动切换的&#xff0c;内部是一个viewpager 做这个效果的时候&#xff0c;关键就是要注意外层拦截触摸事件时&#xff0c;需要有条件的拦截&#xff0c;不能影响到内部viewpager的滑动处理…

Excel Worksheets、Range的错误

前提&#xff1a;使用Excel 托管 1、Worksheet.Range属性 当使用无效的单元格地址时&#xff0c;会引发COMException错误&#xff0c;具体如下&#xff1a; System.Runtime.InteropServices.COMException:"异常来自 HRESULT:0x800A03EC" 2、Workbook.Worksheets属…

爬取豆瓣电影分类排行榜中的电影详情数据

进入界面&#xff0c;右键打开检测&#xff0c;选择网络 然后网页滚动条拉倒最下面使其刷出新的数据&#xff0c;然后查看数据包 编写代码 import requests import jsonif __name__ __main__:get_url https://movie.douban.com/j/chart/top_listheaders {User-Agent:Mozil…

边缘计算与云计算总结

一. EdgeGallery 简介 MEC场景下的EdgeGallery是让资源边缘化&#xff0c;实时完成移动网络边缘的业务处理&#xff0c;MEC场景下的EdgeGallery让开发者能更便捷地使用 5G 网络能力&#xff0c;让5G能力在边缘触手可及。 EdgeGallery是由华为、信通院、中国移动、中国联通、…

Spring面试题系列-1

Spring框架是由于软件开发的复杂性而创建的。Spring使用的是基本的JavaBean来完成以前只可能由EJB完成的事情。然而&#xff0c;Spring的用途不仅仅限于服务器端的开发。从简单性、可测试性和松耦合性角度而言&#xff0c;绝大部分Java应用都可以从Spring中受益。 Spring是什么…

语音模块摄像头模块阿里云结合,实现垃圾的智能识别

语音模块&摄像头模块&阿里云结合 文章目录 语音模块&摄像头模块&阿里云结合1、实现的功能2、配置2.1 软件环境2.2 硬件配置 3、程序介绍3.1 程序概况3.2 语言模块SDK配置介绍3.3 程序文件3.3.1 开启摄像头的程序3.3.2 云端识别函数( Py > C ) & 串口程序…

Spring Boot 防护 XSS + SQL 注入攻击

XSS跨站脚本攻击 ① XSS漏洞介绍 跨站脚本攻击XSS是指攻击者往Web页面里插入恶意Script代码&#xff0c;当用户浏览该页之时&#xff0c;嵌入其中Web里面的Script代码会被解析执行&#xff0c;从而达到恶意攻击用户的目的。XSS攻击针对的是用户层面的攻击&#xff01; ② XSS…

Android 8.1 仅支持PIN码的锁屏方式

Android 8.1 仅支持PIN码的锁屏方式 最近收到客户需求&#xff0c;要求设备仅支持PIN码的锁屏方式&#xff0c;具体修改参照如下&#xff1a; /vendor/mediatek/proprietary/packages/apps/MtkSettings/src/com/android/settings/password/ChooseLockGeneric.java // Used fo…

k8s 中的 deployment,statefulset,daemonset 控制器的区别

参考&#xff1a; k8s 说一下deployment&#xff0c;statefulset&#xff0c;daemonset 的区别 原创 Deployment、StatefulSet、DaemonSet的区别Deployment和Statefulset区别StatefulSet 和 Deployment 区别及选择方式 先介绍下k8s中&#xff0c;三种常见的控制器类型&#x…