Mysqld的关键优化参数

skip-name-resolve

现象

mysql连接很慢，登陆到服务器上查看服务器日志都是正常的，无可疑记录，登陆到mysql服务器上，查看下进程，发现有很多这样的连接：
218 | unauthenticated user | 192.168.10.6:44500 | NULL  | Connect | NULL | login | NULL
219 | unauthenticated user | 192.168.10.6:44501 | NULL  | Connect | NULL | login | NULL  
 

原因是由于mysql对连接的客户端进行DNS反向解析。

有2种解决办法：
1，把client的ip写在mysql服务器的/etc/hosts文件里，随便给个名字就可以了。
2，在 my.cnf 中加入 skip_name_resolve=on

mysql是这样来处理客户端解析过程

  • mysql-client向mysqld发起连接请求；
  • mysqld创建子线程来处理该连接请求；
  • 子线程首先去检查主机名是否存在于performance_schema.host_cache表中；
  • 如果是，则进入权限验证阶段；
  • 如果否，那么会尝试解析将IP地址解析为主机名；
  • 然后再将主机名解析为IP地址；
  • 将解析到的结果和原始IP地址进行比较；
  • 如果相同则添加到host_cache中然后进行权限验证;
  • 如果不相同，那么返回报错
  • 注：只有非本地主机的 TCP 连接会使用主机缓存；使用网络回环地址或 socket 建立的连接不会使用主机缓存
     

所谓反向解析是这样的

mysql接收到连接请求后，获得的是客户端的ip，为了更好的匹配mysql.user里的权限记录（某些是用hostname定义的）。
如果mysql服务器设置了dns服务器，并且客户端ip在dns上并没有相应的hostname，那么这个过程很慢，导致连接等待。

添加skip-name-resolve以后就跳过着一个过程了。

How MySQL
uses DNS When a new thread connects to mysqld, mysqld will
spawn a new thread to handle the request. This thread will first check
if the hostname is in the hostname cache. If not the thread will call
gethostbyaddr_r() and gethostbyname_r() to resolve the hostname. If
the operating system doesn’t support the above thread-safe calls, the
thread will lock a mutex and call gethostbyaddr() and gethostbyname()
instead. Note that in this case no other thread can resolve other
hostnames that is not in the hostname cache until the first thread is
ready. You can disable DNS host lookup by starting mysqld with
–skip-name-resolve. In this case you can however only use IP names in
the MySQL privilege tables. If you have a very slow DNS and many
hosts, you can get more performance by either disabling DNS lookop
with –skip-name-resolve or by increasing the HOST_CACHE_SIZE define
(default: 128) and recompile mysqld. You can disable the hostname
cache with –skip-host-cache. You can clear the hostname cache with
FLUSH HOSTS or mysqladmin flush-hosts. If you don’t want to allow
connections over TCP/IP, you can do this by starting mysqld with
–skip-networking.
 

根据文档说明，如果你的mysql主机查询DNS很慢或是有很多客户端主机时会导致连接很慢，由于我们的开发机器是不能够连接外网的，所以DNS解析是不可能完成的，从而也就明白了为什么连接那么慢了。同时，请注意在增加该配置参数后，mysql的授权表中的host字段就不能够使用域名而只能够使用 ip地址了，因为这是禁止了域名解析的结果。

skip-host-cache

主机缓存的作用

  • 通过缓存 IP 到主机名查找的结果，可以避免每次客户端进行连接时都去寻找DNS进行解析，所能缓存条目的数量受 host_cache_size 控制。
  • 缓存中包含客户端连接过程中发生的错误信息。如果同一主机连续多次连接错误，那么将阻止该主机的进一步连接，该行为受 max_connect_errors 控制。
     
参数 host_cache_size与skip-host-cache和skip_name_resolve 的作用
  • host_cache_size：控制主机缓存的数量，设置为0时，禁用主机缓存，每次服务器连接时，服务器都会进行DNS查找，相比skip-host-cache来说，host_cache_size更加灵活，可以随时变更或禁用。
  • skip-host-cache：作用类似于host_cache_size，但mysql在运行时无法对该参数进行变更，并且skip-host-cache在之后的版本中已弃用。
  • skip_name_resolve：检查客户端连接时是否解析主机名，变量为off，则mysqld 会在检查客户端连接时解析主机名。若变量为on，mysqld 只使用 IP ;在这种情况下，授权表中的所有列值都必须是 IP地址
     

read_buffer_size

read_buffer_size参数用于控制每次从MySQL服务器读取数据时使用的缓冲区大小，单位为字节，默认值为 1MB。

线上配置参考

[client]
port = 3306
socket=/var/lib/mysql/mysql.sock[mysqld]
########basic settings########
server-id = 11 
port = 3306
user = mysql
bind_address = 0.0.0.0
autocommit = 1
character_set_server=utf8
skip_name_resolve = 1
log_bin_trust_function_creators = 1
max_connections = 800
max_connect_errors = 1000
datadir = /data/mysql/data
transaction_isolation = READ-COMMITTED
explicit_defaults_for_timestamp = 1
join_buffer_size = 134217728
tmp_table_size = 67108864
tmpdir = /data/mysql/tmp/
max_allowed_packet = 16777216
sql_mode = "STRICT_TRANS_TABLES,NO_ENGINE_SUBSTITUTION,NO_ZERO_DATE,NO_ZERO_IN_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER"
interactive_timeout = 1800
wait_timeout = 1800
read_buffer_size = 16777216
read_rnd_buffer_size = 33554432
sort_buffer_size = 33554432
########log settings########
log_error = error.log
slow_query_log = 1
slow_query_log_file = /data/mysql/logs/slow/slow.log
log_queries_not_using_indexes = 1
log_slow_admin_statements = 1
log_slow_slave_statements = 1
log_throttle_queries_not_using_indexes = 10
expire_logs_days = 90
long_query_time = 2
min_examined_row_limit = 100
########replication settings########
master_info_repository = TABLE
relay_log_info_repository = TABLE
log_bin = /data/mysql/logs/bin_log/bin.log
sync_binlog = 1
gtid_mode = on
enforce_gtid_consistency = 1
log_slave_updates
binlog_format = row 
relay_log = relay.log
relay_log_recovery = 1
binlog_gtid_simple_recovery = 1
slave_skip_errors = ddl_exist_errors
########innodb settings########
innodb_page_size = 8192
innodb_buffer_pool_size = 12G
innodb_buffer_pool_instances = 8
innodb_buffer_pool_load_at_startup = 1
innodb_buffer_pool_dump_at_shutdown = 1
innodb_lru_scan_depth = 2000
innodb_lock_wait_timeout = 5
innodb_io_capacity = 4000
innodb_io_capacity_max = 8000
innodb_flush_method = O_DIRECT
innodb_file_format = Barracuda
innodb_file_format_max = Barracuda
#innodb_log_group_home_dir = /redolog/
#innodb_undo_directory = /undolog/
innodb_undo_logs = 128
innodb_undo_tablespaces = 3
innodb_flush_neighbors = 1
innodb_log_file_size = 4G
innodb_log_buffer_size = 16777216
innodb_purge_threads = 4
innodb_large_prefix = 1
innodb_thread_concurrency = 64
innodb_print_all_deadlocks = 1
innodb_strict_mode = 1
innodb_sort_buffer_size = 67108864 
########semi sync replication settings########
plugin_load = "rpl_semi_sync_master=semisync_master.so;rpl_semi_sync_slave=semisync_slave.so"
loose_rpl_semi_sync_master_enabled = 1
loose_rpl_semi_sync_slave_enabled = 1
loose_rpl_semi_sync_master_timeout = 5000[mysqld-5.7]
innodb_buffer_pool_dump_pct = 40
innodb_page_cleaners = 4
innodb_undo_log_truncate = 1
innodb_max_undo_log_size = 2G
innodb_purge_rseg_truncate_frequency = 128
binlog_gtid_simple_recovery=1
log_timestamps=system
transaction_write_set_extraction=MURMUR32
show_compatibility_56=on

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/592304.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

Springcloud 微服务实战笔记 Eureka

Springcloud 微服务实战笔记 Eureka

服务治理 服务注册 在服务治理框架中，通常都会构建一个注册中心，每个服务单元向注册中心登记自己提供的服务，将主机与端口号、版本号、通信协议等一些附加信息告知注册中心，注册中心按服务名分类组织服务清单。当服务启动后&…
阅读更多...
PS制作2寸或者1寸排版打印照

PS制作2寸或者1寸排版打印照

最近家人需要2寸照，然后之前照的摄影馆给打印的是一版1寸照纸质和一张精修的原版照，然后要打印2寸照的话就存在两种选择： 需要自己做排版打印照，拿去打印店打印，要么就是直接拿着这张精修的单照去打印店让打印店的工作…
阅读更多...
如何删除K8S中的Pod

如何删除K8S中的Pod

天行健，君子以自强不息；地势坤，君子以厚德载物。 每个人都有惰性，但不断学习是好好生活的根本，共勉！ 文章均为学习整理笔记，分享记录为主，如有错误请指正，共同学习进步。…
阅读更多...
代码随想录|贪心day2

代码随想录|贪心day2

122.力扣（LeetCode）官网 - 全球极客挚爱的技术成长平台 买股票的最佳时机，这道题其实和53有一点像，因为不需要写出哪个区间卖出买进，所以判断prices[i] - prices[i - 1]的值的大小，如果这个值是正的&#…
阅读更多...
java 打印日志的几种方式

java 打印日志的几种方式

java 打印日志的几种方式 Java 日志框架进化史日志门面与日志系统 Log4jslf4jLog4j2slf4jLogbackslf4j 一、先简单介绍五种 （1）最简单的方式，就是system.println.out(error) ,这样直接在控制台打印消息了； （2&#xff…
阅读更多...
龙格-库塔(Runge–Kutta)法 (Dopri5, Euler method,Explicit midpoint method)

龙格-库塔(Runge–Kutta)法 (Dopri5, Euler method,Explicit midpoint method)

在数值分析中，龙格-库塔方法是一系列隐式和显式迭代方法，其中包括欧拉方法， 显式中心点法， ,后向欧拉方法, ，用于联立非线性方程近似解的时间离散化。[2]这些方法是由德国数学家Carl Runge和Wilhelm Kutta。 显式欧拉…
阅读更多...
如何在iPhone设备中查看崩溃日志

如何在iPhone设备中查看崩溃日志

​ 目录 如何在iPhone设备中查看崩溃日志 摘要 引言 导致iPhone设备崩溃的主要原因是什么？ 使用克魔助手查看iPhone设备中的崩溃日志 奔溃日志分析 总结 摘要 本文介绍了如何在iPhone设备中查看崩溃日志，以便调查崩溃的原因。我们将展示三种不同的…
阅读更多...
打破无声世界：让您的网站会说话

打破无声世界：让您的网站会说话

导语：在当今的互联网世界，技术创新日新月异，为广大开发者提供了无数便捷的工具。本文将为您介绍前端文本语音API，这一神奇的技术能够实现文字到语音的转换，为您的项目增添更多可能性。同时，我们还将为您提供…
阅读更多...
uniapp中uview组件库的Input 输入框 的使用方法

uniapp中uview组件库的Input 输入框 的使用方法

目录 #平台差异说明 #基本使用 #输入框的类型 #可清空字符 #下划线 #前后图标 #前后插槽 API #Props #Events #Methods #Slots 去除fixed、showWordLimit、showConfirmBar、disableDefaultPadding、autosize字段 此组件为一个输入框，默认没有边框和样式…
阅读更多...
UE5 VR版增强输入初体验 官方模板学习

UE5 VR版增强输入初体验 官方模板学习

问题 我们传统的输入方式，是通过编辑器设置输入操作映射，然后BindAction和BindAxis绑定 这边插播一条增强输入知识点，参考知乎大佬文章 和增强输入的VR模板教学：如何使用VR模板在UE5中使用增强输入系统_哔哩哔哩_bilibili 实践操…
阅读更多...
再见2023，你好2024（附新年烟花python实现）

再见2023，你好2024（附新年烟花python实现）

亲爱的朋友们： 写点什么呢，我已经停更两个月了。2023年快结束了，时间真的过得好快，总要写点什么留下纪念吧。这一年伴随着许多挑战和机会，给了我无数的成长和体验。坦白说，有时候我觉得自己好像是在时间的…
阅读更多...
FPGA - 240102 - FPGA期末速成

FPGA - 240102 - FPGA期末速成

TAG - F P G A 、期末、速成 FPGA、期末、速成 FPGA、期末、速成 // – 习题1 – //CPLD（Complex Programmable Logic Device）是 Complex PLD 的简称，一种较 PLD 为复杂的逻辑元件。CPLD 逻辑资源多寄存器少，FPGA 逻辑弱而寄存器…
阅读更多...
Go后端开发 -- main函数 变量 常量 函数

Go后端开发 -- main函数 变量 常量 函数

Go后端开发 – main函数 & 变量 & 常量 & 函数 文章目录 Go后端开发 -- main函数 & 变量 & 常量 & 函数一、第一个main函数1.创建工程2.main函数解析 二、变量声明1.单变量声明2.多变量声明 三、常量1.常量的定义2.优雅的常量 iota 四、函数1.函数返回…
阅读更多...
vim学习记录

vim学习记录

目录 历史记录前言相关资料配置windows互换ESC和Caps Lock按键 基本操作替换字符串 历史记录 2024年1月2日, 搭建好框架,开始学习; 前言 vim使用很久了,但是都是一些基本用法,主要是用于配置Linux,进行一些简单的编写文档和程序.没有进行过大型程序开发,没有达到熟练使用的程…
阅读更多...
OpenHarmony之HDF驱动框架

OpenHarmony之HDF驱动框架

概述 HDF（Hardware Driver Foundation）驱动框架，为驱动开发者提供驱动框架能力，包括驱动加载、驱动服务管理、驱动消息机制和配置管理。并以组件化驱动模型作为核心设计思路，让驱动开发和部署更加规范，旨在…
阅读更多...
小红书、抖音、视频号下载工具：随心管理个人作品集 | 开源日报 No.134

小红书、抖音、视频号下载工具：随心管理个人作品集 | 开源日报 No.134

karanpratapsingh/system-design Stars: 20.6k License: NOASSERTION 这个项目是关于系统设计的。它提供了有关系统设计的课程内容，包括 IP、OSI 模型、TCP 和 UDP 等主题。该项目的核心优势和特点如下： 提供全面而高效的系统架构定义。从基础设施到数…
阅读更多...
C#使用纯OpenCvSharp部署yolov8-pose姿态识别

C#使用纯OpenCvSharp部署yolov8-pose姿态识别

【源码地址】 github地址：https://github.com/ultralytics/ultralytics 【算法介绍】 Yolov8-Pose算法是一种基于深度神经网络的目标检测算法，用于对人体姿势进行准确检测。该算法在Yolov8的基础上引入了姿势估计模块，通过联合检测和姿势…
阅读更多...
安全与认证Week3

安全与认证Week3

Key Management 密钥管理 密钥交换、证书 密钥的类别 密钥管理方面 密钥分发问题 密钥分发方案 简单的密钥分发：允许安全通信，但不存在先前或之后的密钥。 带机密性和身份验证的密钥分发：提供更高级别的安全性。 混合密钥分发 公钥分发 公开…
阅读更多...
CodeWave智能开发平台--02--目标:文档快速阅读

CodeWave智能开发平台--02--目标:文档快速阅读

CodeWave智能开发平台的02次接触-实现快速了解CodeWave平台 CodeWave参考资源 网易数帆CodeWave开发者社区课程中心 网易数帆CodeWave开发者社区文档中心 CodeWave智能开发平台-文档快速阅读指北 大家如果看了本专栏中的第一篇博客，应该知道我接触CodeWave不久&a…
阅读更多...
RabbitMQ（七）ACK 消息确认机制

RabbitMQ（七）ACK 消息确认机制

目录 一、简介1.1 背景1.2 定义1.3 如何查看确认/未确认的消息数？ 二、消息确认机制的分类2.1 消息发送确认1）ConfirmCallback方法2）ReturnCallback方法3）代码实现方式一：统一配置a.配置类a.生产者c.消费者d.测试结果 …
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023