读高性能MySQL(第4版)笔记19_云端和合规性

1. 如何构建数据库环境

1.1. 托管MySQL

1.2. VM上构建

1.3. 天下没有免费的午餐,每一个选择都伴随着一系列的权衡

2. 托管MySQL

2.1. 服务商提供了一个可访问的数据库设置程序,而不需要用户深入了解MySQL的具体细节

2.2. 使用托管MySQL将缺乏很多的可见性和控制能力

2.3. Aurora MySQL

2.4. 谷歌云平台(GCP)提供了CloudSQL

3. Aurora MySQL

3.1. Aurora MySQL是一个兼容MySQL的托管数据库

3.2. 将计算和存储分开,这使二者可以更灵活地单独扩展

3.3. Aurora中的所有托管解决方案都不兼容MySQL 8.0,而一些较旧的解决方案只兼容MySQL   5.6

3.4. 标准的Aurora产品是长期运行的计算实例,在其中选择一个实例类型

3.5. Aurora集群内的复制完全是Amazon专有的,而不是我们在Oracle MySQL中所知道和使用的复制

3.6. Aurora无服务器(Serverless)

3.6.1. Aurora MySQL的无服务器服务移除了长期运行的计算程序,并利用亚马逊的无服务器平台为数据库的计算层提供服务

3.7. Aurora全局数据库(Global Database)

3.8. Aurora多主节点(Multi-Master)

3.8.1. 多主节点是Aurora集群的一种特殊风格,可以同时在多个计算节点上接受写操作

4. GCP Cloud SQL

4.1. Cloud SQL是GCP的托管MySQL的产品

4.2. 它运行的是社区版MySQL,但特别禁用了某些功能,以实现产品的多租户和可管理

4.3. SUPER权限被禁用

4.4. 插件加载功能被禁用

4.5. 一些客户端也被禁用了,如mysqldump和mysqlimport

4.6. 原生的高可用性支持

4.7. 静止数据的原生加密

4.8. 使用多种方法实现灵活管理的升级

5. 虚拟机上的MySQL

5.1. 在虚拟机上运行MySQL就像在裸金属服务器上运行一样,你可以完整和彻底地控制所有的操作面

5.2. CPU

5.2.1. 虚拟CPU,而不是物理CPU

5.2.2. vCPU数量的计数公式

5.2.2.1. (CPU核的数量×95%CPU总使用量)×2
5.2.2.2. 建议将50%作为常规的使用率目标,最高可达到65%~70%
5.2.2.3. 如果维持在70%或更高的CPU使用率,将可能会看到延迟增加,此时应该考虑添加更多的CPU

5.2.3. 运行的是一个高流量的Web应用程序,则可能需要确保使用更新一代的芯片

5.3. 内存

5.3.1. RAM可以极大地影响MySQL的性能

5.3.2. 应为工作数据集选择最适合需求的机器规格,但错误的做法是RAM太多而不是不够

5.4. 网络性能

5.4.1. 如果有一个将读取大量数据的批处理进程,则你可能会发现在较小的机型上带宽已耗尽

5.5. 选择正确的磁盘类型

5.5.1. 高读密集型的工作负载将受益于更多的内存而不是磁盘性能,因为内存访问要快几个数量级

5.5.2. 如果工作集大于InnoDB缓冲池,那么将总是需要到磁盘上读取一些数据

5.5.3. 写密集型的工作负载总是会转移到磁盘上,这也是大多数人第一次看到磁盘瓶颈的地方

5.6. 磁盘的连接类型

5.6.1. 本地连接磁盘的好处是,其提供了令人难以置信的高性能和一致的吞吐量,但也很容易导致数据丢失

5.6.1.1. 被视为仅用于短暂数据的磁盘

5.6.2. 网络连接的磁盘可提供冗余和可靠性

5.6.2.1. 网络连接的磁盘可能会遇到本地连接的磁盘不会出现的停顿

5.6.3. 还可以使用磁盘快照技术让副本复制变得非常快,即使在许多TB级大小的磁盘上

5.6.3.1. 可以让需要在副本可用之前赶上来的复制的延迟降到最低

5.7. SSD与HDD

5.7.1. SSD的启动速度比HDD快两到三倍

5.7.2. 如果启动时间很重要,特别是在停机或重新启动的情况下,那么请始终使用SSD

5.8. IOPS和吞吐量

5.8.1. Percona Toolkit包中的pt-diskstats

5.9. 只允许服务器恢复在线和复制,以让它自己自然地重新连接

5.9.1. 使用SSD引导磁盘来允许尽可能快地重新启动。通常系统会在5分钟内恢复在线

5.9.2. 禁止长达5分钟时间内的任何服务器宕机的告警通知,以使系统完全重启并恢复正常

5.9.3. 如果源服务器重新启动,你可以编写一个选项来动态关闭read_only标志,从而让写入在没有人工干预的情况下继续进行

5.9.4. 通过自动地向可能需要了解中断的团队或渠道发送邮件或消息,来让沟通最大化

5.10. 建议将操作系统和MySQL数据分开

5.10.1. 磁盘快照将仅限于MySQL数据,并且不包含任何操作系统信息

5.10.2. 在使用网络连接的磁盘的情况下,可以轻松地断开磁盘的连接并重新连接到另一台机器

5.10.3. 对于网络连接的磁盘,还可以升级或替换操作系统,而不必将数据重新复制到文件系统中

5.11. 备份二进制日志

5.11.1. 将二进制日志发送到一个存储桶中

5.11.2. 在桶上设置生命周期控制,以便在一段确定的时间后自动清除旧文件

5.11.3. 阻止在特定时间之前删除文件,或完全不允许删除

5.11.4. 控制谁可以读取或删除这些数据对于维护安全的备份策略至关重要

5.11.5. 建议允许所有数据库机器写入,但没有机器能够读取或删除。分别或同时控制受限账户、机器的读取和删除

5.12. 自动扩展磁盘

5.12.1. 对于网络连接的磁盘,需要为预分配的而不是已使用的空间付费

5.12.2. 一种优化方法是将磁盘空间使用率目标提到更高的百分比

6. 合规性

6.1. DBA的工作并不局限于在业务运行时管理这些数据,还需要帮助企业保护数据,并使数据符合法律要求,或获得对企业至关重要的监管认证

6.2. 合规是一个涉及政策和控制的广泛领域,对每种政策和控制的解释也很多

6.3. GRC

6.3.1. 治理(Governance)

6.3.2. 风险管理(Risk management)

6.3.3. 合规性(Compliance)

6.4. 控制是公司内部定义的流程和规则,用于减少意外风险结果发生的概率

6.5. 合规性的构建是一个持续的过程,在需要的时候不容易“添加”

6.6. 法规法案

6.6.1. 服务组织控制类型2(SOC 2)

6.6.2. 2002年发布的萨班斯-奥克斯利法案(SOX)

6.6.3. 支付卡行业数据安全标准(PCI-DSS)

6.6.4. 1996年发布的《健康保险可携带性和责任法案》(HIPAA)

6.6.5. 联邦风险和授权管理计划(FedRAMP)

6.6.6. 通用数据保护条例(GDPR)是欧盟于2016年推出的

6.6.7. 2020年,欧盟司法法院裁决了欧盟和Facebook爱尔兰分部之间的一桩案件。这项通常被称为Schrems II

6.7. 不要共享用户

6.7.1. 不要跨服务共享数据库凭据

6.8. 不要在代码仓库中提交生产数据库凭据

6.8.1. 一种常见的做法是在合并一个pull请求之前,扫描代码库寻找潜在的机密字符串(GitHub等代码仓库托管服务可以实现

6.9. 确保密码始终以加密方式而不是以明文形式存储

6.9.1. 机密信息的长度做了限制,如果想存储比数据库的用户和密码对更长的内容,可能会导致意外

6.10. 区域的可用性

6.11. 角色与数据分离

6.11.1. 基于数据泄露将给企业或客户带来的风险等级对数据进行分离

6.12. 出于合规性原因进行分片

6.13. 独立的数据库用户

6.14. 跟踪变更

6.14.1. 很多合规性法规都附带了跟踪变更的控制措施

6.15. 很多合规性法规都附带了跟踪变更的控制措施

6.16. ⑩数据访问日志

6.16.1. 要求维护特定数据集的变更日志或访问日志

6.16.2. Percona审计日志插件是Percona发行的MySQL分支的一部分,但是默认情况下没有安装或启用

6.17. ⑾schema变更的版本控制

6.18. 建议设置这样一个策略:“删除六个月内未连接过数据库的用户”。这一做法将有助于防止使用不需要的、现在已成为负担的访问

7. 不建议使用触发器

7.1. 触发器会导致写性能下降,这会在最糟糕的时候对性能造成影响

7.2. 触发器相当于在数据库中存储业务逻辑,这是不推荐的

7.3. 在数据库中存储代码可能会绕过测试、转移和部署代码的任何过程。触发器可能意外地导致故障

7.4. 触发器只能支持跟踪写入操作。无法扩展成可以跟踪读取访问的解决方案

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/117367.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

中国艺术孙溟㠭篆刻《绕绕》

孙溟展先生现在的这方篆刻作品,没有使用大篆和小篆文字来篆刻,彰显篆刻的金石魅力。一改以往的不同,以圆形组合设计,用篆刻的刀法刻出,即体现篆刻的美,又达到了作者想表达的感情。这方篆刻作品溟展先生起名…

2023/10/23 mysql学习

数据库修改 show databases; 展示所有数据库 create database 数据库名; 创建数据库 create database if not exists 数据库名; 如果未创建过当前数据库名则创建 drop database 数据库名; drop database if exists 数据库名;用法和创建类似 删除数据库 use 数据库名; 跳…

WPF十六(页面内嵌加载)

在WPF中进行页面内嵌的加载 当存在一定需求时,比如当前页面C左侧是一个A页面,右侧是一个B页面,A页面是一个公用页面时,此时只需要做内嵌A页面,然后B页面进行正常处理,既可以节省时间,又做到了WP…

nodejs+vue备忘记账系统-计算机毕业设计

本文首先介绍了备忘记账系统管理技术的发展背景与发展现状,然后遵循软件常规开发流程,首先针对系统选取适用的语言和开发平台,目 录 摘 要 I ABSTRACT II 目 录 II 第1章 绪论 1 1.1背景及意义 1 1.2 国内外研究概况 1 1.3 研究的内容 1 第2章…

【目标检测】非极大值抑制NMS的原理与实现

非极大值抑制(Non-Maximum Suppression,NMS)是目标检测中常用的一种技术,它的主要作用是去除冗余和重叠过高的框,并保留最佳的几个。 NMS计算的具体步骤如下: 首先根据目标检测模型输出结果,得…

Linux内核的基本工作原理和关键概念

Linux内核是操作系统的核心部分,负责管理系统的硬件资源、文件系统、进程管理、内存管理和设备驱动等功能。以下是有关Linux内核的基本工作原理和关键概念的概述: 1. 体系结构: - Linux内核支持多种硬件架构,包括x86、ARM、MI…

Plooks大型视频在线一起看网站源码

在前段时间,因为想和异地的朋友一起看电影,但是发现有电影的地方没有一起看功能,有一起看功能的视频网站没有电影,所以就想自己做一个一起看网站,于是就有了Plooks。 Plooks是一个完整的视频网站,其中包括…

SpringBoot Web请求响应

目录 前言请求PostmanPostman使用 简单参数原始方式接收普通参数SpringBoot方式接收普通参数参数名不一致问题 实体参数简单实体参数复杂实体对象 数组集合参数数组参数集合参数 日期参数JSON参数路径参数 响应ResponseBody统一响应结果请求响应案例案例需求与准备工作案例实现…

ubuntu实现自动挂载u盘和SD卡

编写shell脚本 vim /home/usb-mount.sh#!/bin/bashACTION$1 DEVBASE$2 DEVICE"/dev/${DEVBASE}"# See if this drive is already mounted MOUNT_POINT$(/bin/mount | /bin/grep ${DEVICE} | /usr/bin/awk { print $3 })do_mount() {if [[ -n ${MOUNT_POINT} ]]; the…

Rust所有权

文章目录 什么是所有权Stack vs Heap所有权规则变量作用域String类型内存与分配所有权与函数 引用与借用可变引用悬垂引用引用的规则 切片字符串切片其他类型的切片 什么是所有权 什么是所有权 所有程序在运行时都必须管理其使用计算机内存的方式: 一些语言中具有垃…

Mr.Alright---MTK安卓13 抬手亮屏功能的逻辑

该功能在系统设置-显示-拿起设备时唤醒 alps\vendor\mediatek\proprietary\packages\apps\MtkSettings\src\com\android\settings\display\LiftToWakePreferenceController.javapublic boolean isAvailable() {SensorManager sensors (SensorManager) mContext.getSystemServ…

分库分表-ShardingSphere 4.x(2)

❤️作者简介:2022新星计划第三季云原生与云计算赛道Top5🏅、华为云享专家🏅、云原生领域潜力新星🏅 💛博客首页:C站个人主页🌞 💗作者目的:如有错误请指正,将…

小知识(6) el-table表格选中行和回显行(vue3)

el-table表格选中行和回显行 官方文档说明 https://element-plus.org/zh-CN/component/table.html#table-%E6%96%B9%E6%B3%95 环境&#xff1a;vue3element-plus 选中行selection <el-table ref"baseTableRef" row-key"id" border :selection"tr…

SpringBoot整合XXL-JOB详解

❤️作者简介&#xff1a;2022新星计划第三季云原生与云计算赛道Top5&#x1f3c5;、华为云享专家&#x1f3c5;、云原生领域潜力新星&#x1f3c5; &#x1f49b;博客首页&#xff1a;C站个人主页&#x1f31e; &#x1f497;作者目的&#xff1a;如有错误请指正&#xff0c;将…

12.4 组播鼠标批量执行

组播模式相比单播模式可以提高网络的效率和带宽利用率&#xff0c;因为组播数据包只需要发送一次&#xff0c;就可以被多个接收者接收&#xff0c;而不需要每个接收者都单独发送一份数据包。这在需要同时向多个接收者发送相同数据的场景下特别有用&#xff0c;如视频会议、在线…

【zookeeper】zk的ZAB原子广播协议

zk的ZAB原子广播协议来源于paxos算法[1]。paxos算法是一种基于消息传递的消息一致性算法&#xff0c;其特点是在可靠的通信环境下&#xff0c;可以保证消息的最终一致性。paxos要求每台server都持有自己的一个事务id的记录&#xff0c;这个事务id会每通过一个提议就自增加一&am…

矢量图形编辑软件 illustrator 2023 mac 中文软件特点

illustrator 2023 mac是一款矢量图形编辑软件&#xff0c;用于创建和编辑排版、图标、标志、插图和其他类型的矢量图形。 illustrator 2023 mac软件特点 矢量图形&#xff1a;illustrator创建的图形是矢量图形&#xff0c;可以无限放大而不失真&#xff0c;这与像素图形编辑软…

Ubuntu - sudo apt update 报错源问题解决方案

sudo apt update 报错…lease’ does not have a Release file. 反正就是觉得是网络的问题 尝试添加国内清华源、阿里源 不行 尝试DNS 为8.8.8.8&#xff0c;114.114.114.114 还是不行 解决方案&#xff1a;设置里面让 Ubuntu 找到适合自己的源 1、Settings -> About…

eval()函数的用法,计算字符串中的值,模板字符串进行计算

eval函数的定义&#xff1a; eval() 函数计算 JavaScript 字符串&#xff0c;并把它作为脚本代码来执行。 如果参数是一个表达式&#xff0c;eval() 函数将执行表达式。如果参数是Javascript语句&#xff0c;eval()将执行 Javascript 语句。 let a1 10; let a2 20; let calcu…

Android grantUriPermission的使用场景和方式

#grantUriPermission 作用 临时授权。 背景&#xff1a;FileProvider引入后应用之间想访问文件&#xff0c;都需要使用此接口。特别是两个独立的应用之间互通数据的时候。例如我们应用从图库获取文件的uri&#xff0c;显示在应用内的ImageView中。 #grantUriPermission 使用方…