服务器雪崩的应对策略之----SQL优化

SQL语句的优化是数据库性能优化的重要方面，特别是在处理大规模数据或高频访问时。作为一个C++程序员，理解SQL优化不仅有助于编写高效的数据库操作代码，还能增强对系统性能瓶颈的整体把握。以下是详细的SQL语句优化技巧和策略：

SQL优化

      • 1. 选择合适的数据类型
      • 2. 使用索引
      • 3. 优化查询
      • 4. 范式化和反范式化
      • 5. 查询重写
      • 6. 使用缓存
      • 7. 优化数据库设计
      • 8. 分析和监控
      • 9. 调整配置
          • 1、内存分配
          • 2、连接池

1. 选择合适的数据类型

示例

  • 使用CHAR而不是VARCHAR：
 -- 如果用户的状态是固定长度（如'active', 'inactive'），可以使用CHARCREATE TABLE users (id INT PRIMARY KEY,status CHAR(8));
  • 使用TINYINT代替INT：
    -- 如果用户的年龄范围在0-255，可以使用TINYINT
CREATE TABLE users 
(id INT PRIMARY KEY,age TINYINT
);

2. 使用索引

示例

  • 创建索引：

    -- 为用户的年龄创建索引
CREATE INDEX idx_users_age ON users(age);

  • 避免过多的索引：

    -- 如果只需查询用户的年龄和名字，不需要对所有列都创建索引
CREATE INDEX idx_users_age_name ON users(age, name);

  • 组合索引：

    -- 为用户的年龄和注册日期创建组合索引
CREATE INDEX idx_users_age_reg_date ON users(age, registration_date);

3. 优化查询

示例

  • 选择合适的查询：

    -- 避免使用SELECT *
SELECT name, age FROM users WHERE age > 30;

  • 使用子查询和联结：

    -- 将子查询改写为JOIN
SELECT u.name, o.order_date
FROM users u
JOIN orders o ON u.id = o.user_id
WHERE u.age > 30;

  • WHERE条件优化：

    -- 将最可能过滤大量数据的条件放在前面
SELECT * FROM users WHERE age > 30 AND status = 'active';

  • 避免函数和操作符：

    -- 避免对列进行函数操作
SELECT * FROM users WHERE registration_date >= '2023-01-01';

4. 范式化和反范式化

示例

  • 范式化：

    -- 第三范式设计：拆分表结构
CREATE TABLE orders 
(id INT PRIMARY KEY,user_id INT,product_id INT,order_date DATE,FOREIGN KEY (user_id) REFERENCES users(id)
);

  • 反范式化：

    -- 在高频读取的情况下，减少JOIN操作，反范式化
CREATE TABLE order_details 
(id INT PRIMARY KEY,user_name VARCHAR(255),product_name VARCHAR(255),order_date DATE
);

5. 查询重写

示例

  • EXISTS vs IN：

    -- 使用EXISTS而不是IN
SELECT name FROM users WHERE EXISTS 
(SELECT 1 FROM orders WHERE orders.user_id = users.id AND orders.total > 100
);

  • JOIN优化：

    -- 使用临时表优化大表JOIN
CREATE TEMPORARY TABLE temp_orders AS
SELECT * FROM orders WHERE order_date >= '2023-01-01';SELECT u.name, t.order_date FROM users u JOIN temp_orders t ON u.id = t.user_id;

6. 使用缓存

示例

  • 查询缓存：

    -- MySQL查询缓存示例（假设MySQL版本支持）
SET GLOBAL query_cache_size = 1048576; -- 1MB

  • 应用缓存：

    // 在C++应用层使用Memcached缓存常用数据
// 使用libmemcached库
#include <libmemcached/memcached.h>memcached_st *memc;
memcached_return rc;
memcached_server_st *servers = NULL;
char *key = "user_123";
char *value;memc = memcached_create(NULL);
servers = memcached_server_list_append(servers, "localhost", 11211, &rc);
rc = memcached_server_push(memc, servers);
memcached_server_list_free(servers);value = memcached_get(memc, key, strlen(key), NULL, NULL, &rc);

7. 优化数据库设计

示例

  • 分区：

    -- 将大表按月份分区
CREATE TABLE orders 
(id INT PRIMARY KEY,user_id INT,order_date DATE
)
PARTITION BY RANGE (YEAR(order_date)) 
(PARTITION p2023 VALUES LESS THAN (2024),PARTITION p2024 VALUES LESS THAN (2025)
);

  • 分片：

    -- 数据库分片：例如根据用户ID进行分片
-- 分片1：存储用户ID 1-1000
-- 分片2：存储用户ID 1001-2000

8. 分析和监控

示例

  • 使用EXPLAIN：

    -- 使用EXPLAIN分析查询执行计划
EXPLAIN SELECT name FROM users WHERE age > 30;

  • 监控系统性能：

    -- 监控查询时间、锁等待、磁盘IO等指标
SHOW STATUS LIKE 'Handler_read_rnd_next';
SHOW ENGINE INNODB STATUS;

9. 调整配置

示例

1、内存分配

调整数据库管理系统（DBMS）的内存配置参数，可以显著提高数据库性能。以下是MySQL的示例：

  • 调整InnoDB缓冲池大小：InnoDB缓冲池用于缓存数据和索引，是MySQL最重要的内存分配参数。

    -- 查看当前缓冲池大小
SHOW VARIABLES LIKE 'innodb_buffer_pool_size';-- 将缓冲池大小设置为1GB
SET GLOBAL innodb_buffer_pool_size = 1024 * 1024 * 1024;

  • 调整查询缓存大小：查询缓存可以缓存常见查询的结果。

    -- 查看当前查询缓存大小
SHOW VARIABLES LIKE 'query_cache_size';-- 将查询缓存大小设置为64MB
SET GLOBAL query_cache_size = 64 * 1024 * 1024;-- 启用查询缓存
SET GLOBAL query_cache_type = 1;
2、连接池

使用数据库连接池可以减少数据库连接的建立和关闭开销，提高应用程序的性能。以下是如何在C++应用中使用连接池的示例，使用MySQL Connector/C++库：

  • 使用MySQL Connector/C++库配置连接池：
    // 在C++应用中使用连接池
// 使用MySQL Connector/C++库
#include <mysql_driver.h>
#include <mysql_connection.h>
#include <cppconn/driver.h>
#include <cppconn/connection.h>
#include <cppconn/statement.h>
#include <cppconn/exception.h>
#include <cppconn/resultset.h>
#include <mutex>
#include <queue>
#include <memory>
#include <condition_variable>class ConnectionPool 
{
public:static ConnectionPool& getInstance() {static ConnectionPool instance;return instance;}std::shared_ptr<sql::Connection> getConnection() {std::unique_lock<std::mutex> lock(mutex_);while (pool_.empty()) {condition_.wait(lock);}auto conn = pool_.front();pool_.pop();return conn;}void releaseConnection(std::shared_ptr<sql::Connection> conn) {std::unique_lock<std::mutex> lock(mutex_);pool_.push(conn);condition_.notify_one();}private:ConnectionPool() {for (int i = 0; i < pool_size_; ++i) {auto conn = driver_->connect(url_, user_, password_);pool_.push(std::shared_ptr<sql::Connection>(conn, [this](sql::Connection* conn) {releaseConnection(std::shared_ptr<sql::Connection>(conn));}));}}~ConnectionPool() {while (!pool_.empty()) {pool_.pop();}}ConnectionPool(const ConnectionPool&) = delete;ConnectionPool& operator=(const ConnectionPool&) = delete;sql::mysql::MySQL_Driver* driver_ = sql::mysql::get_mysql_driver_instance();std::queue<std::shared_ptr<sql::Connection>> pool_;std::mutex mutex_;std::condition_variable condition_;const std::string url_ = "tcp://127.0.0.1:3306";const std::string user_ = "user";const std::string password_ = "password";const int pool_size_ = 10;
};// 使用连接池获取和释放连接
int main() 
{auto& pool = ConnectionPool::getInstance();auto conn = pool.getConnection();try {std::shared_ptr<sql::Statement> stmt(conn->createStatement());std::shared_ptr<sql::ResultSet> res(stmt->executeQuery("SELECT 'Hello, World!' AS _message"));while (res->next()) {std::cout << res->getString("_message") << std::endl;}} catch (sql::SQLException &e) {std::cerr << "SQLException: " << e.what() << std::endl;}// 连接会自动返回到连接池return 0;
}

这个示例展示了如何创建一个简单的连接池类，并在C++应用中使用该连接池来管理和复用数据库连接。连接池的使用可以显著减少数据库连接的建立和销毁时间，从而提高应用程序的性能和响应速度。

通过这些示例，可以更直观地理解各项SQL优化策略的具体应用及其效果。

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/859558.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

智能化改造助力企业高质量发展

智能化改造助力企业高质量发展

引言 背景介绍 在当今全球经济环境中&#xff0c;变化和不确定性已成为常态。企业面临的竞争压力不断增加&#xff0c;市场竞争日益激烈。新兴市场的崛起、技术进步和消费者需求的快速变化&#xff0c;使得传统的商业模式和生产方式面临巨大挑战。为了在这样的环境中保持竞争力…
阅读更多...
摄影约拍管理系统

摄影约拍管理系统

摘 要 摄影约拍管理系统是一种基于SSM框架的系统&#xff0c;旨在为摄影师和用户提供便捷的约拍服务。本文通过对系统的设计与实现&#xff0c;解决了传统约拍方式中存在的信息不对称、预约流程繁琐等问题。本文介绍了系统的研究背景与意义&#xff0c;分析了国内外发展现状&a…
阅读更多...
应届毕业之本科简历制作

应届毕业之本科简历制作

因为毕设以及编制岗位面试&#xff0c;最近好久没有更新了&#xff0c;刚好有同学问如何制作简历&#xff0c;我就准备将我自己制作简历的流程分享给各位&#xff0c;到此也算是一个小的结束&#xff0c;拿了工科学位证书毕业去做&#x1f402;&#x1f40e;了。 简历主要包含内…
阅读更多...
光泽正在褪去，所以我们又回到了人工智能领域。

光泽正在褪去，所以我们又回到了人工智能领域。

光泽正在褪去&#xff0c;所以我们又回到了人工智能领域。 人工智能冬天将被私有化 自从“人工智能”这个流行词在20世纪50年代被创造出来以来&#xff0c;人工智能经历了几次繁荣和萧条周期。 一种新的技术方法看起来很有趣&#xff0c;并取得了一些成果。它被荒谬地炒作并获…
阅读更多...
中国341城市生态系统服务价值数据集（2000-2020年）

中国341城市生态系统服务价值数据集（2000-2020年）

生态系统服务反映了人类直接或者间接从自然生态系统中获得的各种惠益&#xff0c;对支撑和维持人类生存和福祉起着重要基础作用。目前针对全国城市尺度的生态系统服务价值的长期评估还相对较少。我们在Xie等&#xff08;2017&#xff09;的静态生态系统服务当量因子表基础上&am…
阅读更多...
MySQL——数据库级别的外键

MySQL——数据库级别的外键

仅作了解 方式一&#xff1a;在创建表的时候&#xff0c;增加约束&#xff08;较复杂&#xff09; CREATE TABLE IF NOT EXISTS grade(gradeid INT(10) NOT NULL AUTO_INCREMENT COMMENT 年级id,gradename VARCHAR(50) NOT NULL COMMENT 年级名字,PRIMARY KEY(gradeid) )ENGI…
阅读更多...
设计模式导读：建造者模式的细腻之处与编程技巧

设计模式导读：建造者模式的细腻之处与编程技巧

笔者的碎碎念 其实之前有写过建造者模式的文章&#xff0c;但是感觉其实写的不怎么样&#xff0c;而且自己也理解的一般&#xff0c;但是阅读一些框架源码发现&#xff0c;这些模式真的蛮重要的&#xff0c;很多框架例如OkHttp&#xff0c;Retrofit等等都大量使用了建造者模式…
阅读更多...
人脸处理——人脸换脸基础算法探索与应用测试指南

人脸处理——人脸换脸基础算法探索与应用测试指南

人工智能&#xff08;AI&#xff09;彻底改变了我们生活的许多方面&#xff0c;而这项技术的应用之一就是AI换脸工具。这些工具使用先进的计算机视觉技术和深度学习算法&#xff0c;例如生成对抗网络 (GAN)&#xff0c;在照片或视频中将一个人的脸与另一个人的脸交换。 1. Dee…
阅读更多...
Java简易仓管系统

Java简易仓管系统

java import java.sql.*; import javax.sql.DataSource; import org.apache.commons.dbcp2.BasicDataSource; import java.util.*;// 商品类 class Product {private String name;private int quantity;public Product(String name, int quantity) {this.name name;this.quant…
阅读更多...
无废话版的TypeScript(TS)教程可以满足日常项目使用

无废话版的TypeScript(TS)教程可以满足日常项目使用

中文官网 在中文网(官网也可以)点击立即试用->在浏览器中运行->在这里可以演示本篇博客内的内容 在这个页面右边点击js就是ts编译后的js内容,也可以点击左上角进行版本设置和一些配置,这个看个人意愿,我本人打开网站直接用了 类型推断 不加类型时,TS会进行类型推断,以…
阅读更多...
源代码防泄密如何做？10种方法教你源代码防泄密

源代码防泄密如何做？10种方法教你源代码防泄密

企业如何正确做好源代码防泄密工作&#xff1f;推荐10种方法教你源代码防泄密。1. 使用加密技术 强加密算法&#xff1a;使用AES、RSA等强加密算法对源代码进行加密&#xff0c;确保只有授权用户才能解密和访问源代码。 2. 代码混淆 混淆工具&#xff1a;使用ProGuard、Obfusc…
阅读更多...
Ubuntu使用cat替代vim编写文件

Ubuntu使用cat替代vim编写文件

docker创建容器&#xff0c;进入容器之后无法使用vi&#xff0c;vim&#xff0c;gedit apt update时报错&#xff0c;无法安装指令&#xff0c;sources.list无法编辑 使用cat编辑文件 rootabcd:/# cat >文件名 << EOF > 内容 > EOF编写文件时加上EOF&#xff0c…
阅读更多...
六西格玛培训公司：解锁成功之门，让企业与个人共赴“嗨”途

六西格玛培训公司：解锁成功之门，让企业与个人共赴“嗨”途

在竞争激烈的21世纪&#xff0c;六西格玛培训公司手握一把神奇的钥匙&#xff0c;帮助企业及个人轻松开启成功的大门。 对企业来说&#xff1a; 产品质量飞跃&#xff1a;不再是偶尔的精品&#xff0c;而是每个产品都如同精雕细琢的艺术品&#xff0c;吸引无数顾客争相购买。…
阅读更多...
【Python】 异步编程

【Python】 异步编程

【Python】 异步编程 1. nest_asyncio基础定义2. nest_asyncio 举例实现基本用法 1. nest_asyncio基础定义 nest_asyncio.apply() 是 Python 编程中与异步编程相关的一个调用&#xff0c;它用于解决某些特定环境下的异步编程问题。下面是对这个调用的详细解释&#xff1a; nes…
阅读更多...
【微信小程序 笔记】

【微信小程序 笔记】

协同工作和发布 - 协同工作 了解权限管理需求 在中大型的公司里&#xff0c;人员的分工非常仔细&#xff1a;同一个小程序项目&#xff0c;一般会有不同岗位、不同角色的员工同时参与设计与开发。 此时出于管理需要&#xff0c;我们迫切需要对不同岗位、不同角色的员工的权限进…
阅读更多...
web3.0链游农民世界开发搭建0撸狼人杀玩法模式定制开发

web3.0链游农民世界开发搭建0撸狼人杀玩法模式定制开发

随着区块链技术的飞速发展&#xff0c;Web3.0时代的链游已成为游戏行业的新宠。本文将介绍一款基于Web3.0的链游——农民世界&#xff0c;如何定制开发0撸狼人杀玩法模式&#xff0c;以及该模式的专业性、深度思考和逻辑性。 一、背景介绍 农民世界是一款以农业为主题的链游…
阅读更多...
嵌入式系统基础

嵌入式系统基础

嵌入式系统基础主要包括以下几个方面&#xff1a; 1、定义&#xff1a; 嵌入式系统是以应用为中心&#xff0c;以计算机技术为基础&#xff0c;软硬件可裁剪&#xff0c;适应应用系统对功能、可靠性、成本、体积、功耗严格要求的专用计算机系统。它由硬件和软件组成&#xff0…
阅读更多...
css 修改 input range 样式

css 修改 input range 样式

这段必须要加上&#xff0c;清除默认样式,根据mdn文档介绍&#xff0c;这个样式兼容性不太好&#xff0c;应该多看看目标用户的浏览器支不支持。 -webkit-appearance: none; -moz-appearance: none; appearance: none; input[typerange]{-webkit-appearance: none;width:90px;h…
阅读更多...
.NET 通过UserInit键实现Windows权限维持

.NET 通过UserInit键实现Windows权限维持

01阅读须知 此文所节选自小报童《.NET 内网实战攻防》专栏&#xff0c;主要内容有.NET在各个内网渗透阶段与Windows系统交互的方式和技巧&#xff0c;对内网和后渗透感兴趣的朋友们可以订阅该电子报刊&#xff0c;解锁更多的报刊内容。 02基本介绍 本文内容部分节选自小报童…
阅读更多...
Spring Boot 学习第七天：动态代理机制与Spring AOP

Spring Boot 学习第七天：动态代理机制与Spring AOP

1 概述 在Java的世界中&#xff0c;实现AOP的主流方式是采用动态代理机制&#xff0c;这点对于Spring AOP也一样。代理机制的主要目的就是为其他对象提供一种dialing以控制对当前对象的访问&#xff0c;用于消除或缓解直接访问对象带来的问题。通过这种手段&#xff0c;一个对象…
阅读更多...
最新文章

Copyright @ 2022~2023