Mysql 集群双主双从安装使用详细讲解

文章目录

  • 下载Mysql
  • 安装单机Mysql
  • 配置Mysql集群
    • 双Master配置
      • master1配置
      • master2配置
      • 配置说明
    • 双Slave配置
      • Slave1配置
      • Slave2配置
    • 双 Master 机上创建账号,并授权远程复制
      • 查询Master1的状态
      • 查询Master2的状态
    • 双Slave机上执行 change master 同步Master数据
      • Slave1 复制 Master1的命令:
      • Slave2 复制 Master2的命令:
      • 启动两台Slave服务器复制功能
      • 查看Slave状态
      • 两个主节点互相复制 change master
        • Master2复制Master1
        • Master1复制Master2
      • 启动两台 Master 服务器复制功能
      • 查看两台 Master 服务的 Slave 服务器状态
    • 测试
      • 基础同步功能测试
        • 创建数据库
        • 创建表
  • 总结
  • 问题解决
    • 手动新增了Slave数据,导致Master添加数据同步到Slave主键重复
  • 超详细的配置文件说明

在这里插入图片描述

下载Mysql

https://downloads.mysql.com/archives/community/
本文使用 5.7 版本用作演示
https://downloads.mysql.com/archives/get/p/23/file/mysql-5.7.35-linux-glibc2.12-x86_64.tar.gz

安装单机Mysql

将下载的安装包放在自定义目录,/opt/mysql_cluster

[root@test11 mysql_cluster]# ll -h
总用量 645M
-rw------- 1 root root 636M 113 10:40 mysql-5.7.35-linux-glibc2.12-x86_64.tar.gz
[root@test11 mysql_cluster]# pwd
/opt/mysql_cluster

解压

 tar -zxvf mysql-5.7.35-linux-glibc2.12-x86_64.tar.gz 

目录重命名

 mv mysql-5.7.35-linux-glibc2.12-x86_64 mysql

创建数据目录 data

[root@test11 mysql]# ls
bin  docs  include  lib  LICENSE  man  README  share  support-files
[root@test11 mysql]# mkdir data
[root@test11 mysql]# ls
bin  data  docs  include  lib  LICENSE  man  README  share  support-file

初始化数据库

[root@test11 mysql]# bin/mysqld --initialize --user=mysql --basedir=/opt/mysql_cluster/mysql --datadir=/opt/mysql_cluster/mysql/data
2021-11-03T06:03:52.986320Z 0 [Warning] TIMESTAMP with implicit DEFAULT value is deprecated. Please use --explicit_defaults_for_timestamp server option (see documentation for more details).
2021-11-03T06:04:08.835688Z 0 [Warning] InnoDB: New log files created, LSN=45790
2021-11-03T06:04:11.597368Z 0 [Warning] InnoDB: Creating foreign key constraint system tables.
2021-11-03T06:04:11.787206Z 0 [Warning] No existing UUID has been found, so we assume that this is the first time that this server has been started. Generating a new UUID: dd8ddd56-3c6b-11ec-b99c-000c291ccf3d.
2021-11-03T06:04:11.824783Z 0 [Warning] Gtid table is not ready to be used. Table 'mysql.gtid_executed' cannot be opened.
2021-11-03T06:04:13.055062Z 0 [Warning] A deprecated TLS version TLSv1 is enabled. Please use TLSv1.2 or higher.
2021-11-03T06:04:13.055076Z 0 [Warning] A deprecated TLS version TLSv1.1 is enabled. Please use TLSv1.2 or higher.
2021-11-03T06:04:13.055776Z 0 [Warning] CA certificate ca.pem is self signed.
2021-11-03T06:04:13.466286Z 1 [Note] A temporary password is generated for root@localhost: i;6dJztrpaiK

root@localhost: i;6dJztrpaiK 就是Mysql初始化的密码

启动服务

# 修改目录权限
chown -R mysql:mysql mysql
# 启动
nohup bin/mysqld --defaults-file=conf/my.cnf --user=mysql > run.log &
# 查看
[root@test13 mysql]# ps -ef|grep mysql
mysql    19518 18856  0 15:43 pts/1    00:00:00 bin/mysqld --defaults-file=conf/my.cnf --user=mysql

修改默认密码

[root@test13 mysql]# bin/mysql -h0.0.0.0 -P13306 -uroot -p
Enter password: 
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 4
Server version: 5.7.35-logCopyright (c) 2000, 2021, Oracle and/or its affiliates.Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.mysql> set password=password("123456");
Query OK, 0 rows affected, 1 warning (0.00 sec)mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)

修改远程连接权限

mysql> grant all privileges on *.* to "root"@"%" identified by "123456";
Query OK, 0 rows affected, 1 warning (0.01 sec)mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)

此时Mysql的单机版就安装完成了,其他服务器也可以连接,我们将集群配置加上。

配置Mysql集群

双Master配置

master1配置

# MySQL服务器序号(集群时,每个节点ID不能相同)
server-id = 1 
## ===========================binlog配置开始==============================
# 启用二进制日志
log_bin = mysql-bin # 设置binlog格式,取值:STATEMENT、ROW、mixed
binlog_format = ROW# 从库的中继日志,主库日志写到中继日志,中继日志到从库;slave从节点启动
#relay-log=mysql-relay-bin#超过30天的binlog删除
expire_logs_days = 30 # binlog文件的大小
max_binlog_size=1G# 该从库是否写入二进制日志。如果需要成为多主则可启用,只读可以不需要
log-slave-updates=1# 在主主同步配置时,需要将两台服务器的auto_increment_increment增长量都配置为2,而要把auto_increment_offset分别配置为1和2.
# 该服务器自增列的初始值。(与 Master2,...... MasterN 的不同点)
auto-increment-offset=1# 该服务器自增列增量。其默认值是1, 取值范围是1 .. 65535
auto-increment-increment=2# 设置不要复制的数据库(可设置多个)
binlog-ignore-db=information_schema
binlog-ignore-db=mysql
binlog-ignore-db=performance_schema
binlog-ignore-db=sys#设置需要复制的数据库(可选)。
# 如果要配置了此项,则 mysql 只复制下面指定的数据库。
# 如果不配置此项,则 mysql 默认复制所有的数据库(不包含 binlog-ignore-db 的数据库)
# binlog-do-db=需要复制的主数据库1
# binlog-do-db=需要复制的主数据库2
## ===========================binlog配置结束==============================

master2配置

# MySQL服务器序号(集群时,每个节点ID不能相同)
server-id = 3 
## ===========================binlog配置开始==============================
# 启用二进制日志
log_bin = mysql-bin # 设置binlog格式,取值:STATEMENT、ROW、mixed
binlog_format = ROW# 从库的中继日志,主库日志写到中继日志,中继日志到从库;slave从节点启动
#relay-log=mysql-relay-bin#超过30天的binlog删除
expire_logs_days = 30 # binlog文件的大小
max_binlog_size=1G# 该从库是否写入二进制日志。如果需要成为多主则可启用,只读可以不需要
log-slave-updates=1# 在主主同步配置时,需要将两台服务器的auto_increment_increment增长量都配置为2,而要把auto_increment_offset分别配置为1和2.
# 该服务器自增列的初始值。(与 Master2,...... MasterN 的不同点)
auto-increment-offset=2# 该服务器自增列增量。其默认值是1, 取值范围是1 .. 65535
auto-increment-increment=2# 设置不要复制的数据库(可设置多个)
binlog-ignore-db=information_schema
binlog-ignore-db=mysql
binlog-ignore-db=performance_schema
binlog-ignore-db=sys#设置需要复制的数据库(可选)。
# 如果要配置了此项,则 mysql 只复制下面指定的数据库。
# 如果不配置此项,则 mysql 默认复制所有的数据库(不包含 binlog-ignore-db 的数据库)
# binlog-do-db=需要复制的主数据库1
# binlog-do-db=需要复制的主数据库2
## ===========================binlog配置结束==============================

启动服务 nohup bin/mysqld --defaults-file=conf/my.cnf --user=mysql > run.log &

配置说明

  1. auto_increment_offset和auto_increment_increment配置
mysql中有自增长字段,在做数据库的主主同步时需要设置自增长的两个相关配置:auto_increment_offset和auto_increment_increment。
auto_increment_offset表示自增长字段从那个数开始,他的取值范围是1 .. 65535
auto_increment_increment表示自增长字段每次递增的量,其默认值是1,取值范围是1 .. 65535
在主主同步配置时,需要将两台服务器的auto_increment_increment增长量都配置为2,而要把auto_increment_offset分别配置为1和2.
这样才可以避免两台服务器同时做更新时自增长字段的值之间发生冲突。

双Slave配置

我们按照服务安装与第一步相同目录也部署相同

Slave1配置

修改my.cnf

[mysqld]#从服务器唯一ID
server-id=2
#启用中继日志
relay-log=mysql-relay

Slave2配置

修改my.cnf

[mysqld]#从服务器唯一ID
server-id=4
#启用中继日志
relay-log=mysql-relay

重启使配置生效

双 Master 机上创建账号,并授权远程复制

grant replication slave on *.* TO 'slave'@'%' identified by '123456';

查询Master1的状态

show master status;
mysql> show master status;
+------------------+----------+--------------+-------------------------------------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB                                | Executed_Gtid_Set |
+------------------+----------+--------------+-------------------------------------------------+-------------------+
| mysql-bin.000001 |      849 |              | information_schema,mysql,performance_schema,sys |                   |
+------------------+----------+--------------+-------------------------------------------------+-------------------+
1 row in set (0.00 sec)

查询Master2的状态

show master status;
mysql> show master status;
+------------------+----------+--------------+-------------------------------------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB                                | Executed_Gtid_Set |
+------------------+----------+--------------+-------------------------------------------------+-------------------+
| mysql-bin.000001 |     1291 |              | information_schema,mysql,performance_schema,sys |                   |
+------------------+----------+--------------+-------------------------------------------------+-------------------+
1 row in set (0.00 sec)

分别记录下 File 和 Position 的值 ,执行完此步骤后不要再操作主服务器MYSQL,防止主服务器状态值变化。

双Slave机上执行 change master 同步Master数据

#复制主机的命令
change master to master_host='主机的IP地址',
# 刚刚创建的用户
master_user='slave',
# slave密码
master_password='123123',
master_port=13306,
master_log_file='mysql-bin.具体数字',
master_log_pos=154;

Slave1 复制 Master1的命令:

mysql> change master to master_host='10.8.10.11',-> master_user='slave',-> master_password='123456',-> master_port=13306,-> master_log_file='mysql-bin.000001',-> master_log_pos=849;
Query OK, 0 rows affected, 1 warning (0.25 sec)

Slave2 复制 Master2的命令:

mysql> change master to master_host='10.8.10.12',-> master_user='slave',-> master_password='123456',-> master_port=13306,-> master_log_file='mysql-bin.000001',-> master_log_pos=1291;
Query OK, 0 rows affected, 1 warning (0.25 sec)

启动两台Slave服务器复制功能

Slave1

mysql> start slave;
Query OK, 0 rows affected (0.10 sec)

Slave2

mysql> start slave;
Query OK, 0 rows affected (0.10 sec)

如果想停止slave同步,在slave节点执行

mysql> stop slave;
Query OK, 0 rows affected (0.05 sec)
mysql> reset slave all;
Query OK, 0 rows affected (0.11 sec)

重新配置主从,执行完show master status;返回的值会变化
mysql> reset master;

查看Slave状态

show slave status\G;

Slave_IO_RunningSlave_SQL_Running 两个参数都是Yes,则说明主从配置成功!
Slave1
在这里插入图片描述

Slave2
在这里插入图片描述

两个主节点互相复制 change master

因为是双主双从,所以要配置 Master2 复制 Master1, Master1 复制 Master2 。

Master2复制Master1

在 Master2 上执行 的命令
相当于Master2 作为 从机,复制主机 Master1 上的数据。

change master to master_host='10.8.10.11',    ## Master1 的host IP
master_user='slave',
master_port=13306,
master_password='123456',
master_log_file='mysql-bin.000001',master_log_pos=849;  ## Master1 的mysql-bin 相应参数
mysql> change master to master_host='10.8.10.11',  -> master_user='slave',-> master_password='123456',-> master_log_file='mysql-bin.000001',master_log_pos=849;
Query OK, 0 rows affected, 1 warning (0.11 sec)

Master1复制Master2

在 Master1 上的执行命令:
相当于Master1 作为 从机,复制主机 Master2 上的数据。

change master to master_host='10.8.10.12',  ## Master2 的host IP
master_user='slave',
master_port=13306,
master_password='123456',
master_log_file='mysql-bin.000001',master_log_pos=1291;  ## Master2 的mysql-bin 相应参数
mysql> change master to master_host='10.8.10.12',  -> master_user='slave',-> master_password='123456',-> master_log_file='mysql-bin.000001',master_log_pos=1291; 
Query OK, 0 rows affected, 1 warning (0.34 sec)

启动两台 Master 服务器复制功能

两台Master服务器都需要执行

mysql> start slave;
Query OK, 0 rows affected (0.01 sec)

查看两台 Master 服务的 Slave 服务器状态

show slave status\G;

Master1
在这里插入图片描述
Master2
在这里插入图片描述
Slave_IO_RunningSlave_SQL_Running 两个参数都是Yes,则说明主从配置成功!

测试

基础同步功能测试

创建数据库

Master1创建数据库其他四个Mysql也查看到数据库
在这里插入图片描述

创建表

Master2 test数据库创建表其他四个节点同步成功,这里只截了两张图
在这里插入图片描述
在这里插入图片描述

数据增删改查就不一一在这里展示了,都可以成功。但是不能再slave节点插入数据,插入的话不会同步到Master节点

总结

  • Master1、Master2 增删改数据库、表、数据都会同步到其他三个节点
  • Slave 节点不能尽心增删改操作,不会同步到其他节点
  • Master 中其中一个节点挂了,同步该Master的Slave也不会同步数据,当Master恢复后,数据自动恢复同步
  • Slave节点宕机不影响,Slave恢复后自动恢复同步数据
  • Slave 增加数据后会导致数据同步失败(如果Slave添加的数据与Master的主键重复会同步失败,从而导致后续Slave节点数据都同步失败;如果主键不重复会继续成功)

问题解决

手动新增了Slave数据,导致Master添加数据同步到Slave主键重复

在失败的Slave查看下状态,我们可以看到提示主键重复

Could not execute Write_rows event on table test.test_table; Duplicate entry '2' for key 'PRIMARY', Error_code: 1062; handler error HA_ERR_FOUND_DUPP_KEY; the event's master log mysql-bin.000001, end_log_pos 1145
mysql> show slave status\G;
*************************** 1. row ***************************Slave_IO_State: Waiting for master to send eventMaster_Host: 10.8.10.12Master_User: slaveMaster_Port: 13306Connect_Retry: 60Master_Log_File: mysql-bin.000001Read_Master_Log_Pos: 2255Relay_Log_File: mysql-relay.000002Relay_Log_Pos: 1075Relay_Master_Log_File: mysql-bin.000001Slave_IO_Running: YesSlave_SQL_Running: NoReplicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 1062Last_Error: Could not execute Write_rows event on table test.test_table; Duplicate entry '2' for key 'PRIMARY', Error_code: 1062; handler error HA_ERR_FOUND_DUPP_KEY; the event's master log mysql-bin.000001, end_log_pos 1145Skip_Counter: 0Exec_Master_Log_Pos: 909Relay_Log_Space: 2624Until_Condition: NoneUntil_Log_File: Until_Log_Pos: 0Master_SSL_Allowed: NoMaster_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: NULL
Master_SSL_Verify_Server_Cert: NoLast_IO_Errno: 0Last_IO_Error: Last_SQL_Errno: 1062Last_SQL_Error: Could not execute Write_rows event on table test.test_table; Duplicate entry '2' for key 'PRIMARY', Error_code: 1062; handler error HA_ERR_FOUND_DUPP_KEY; the event's master log mysql-bin.000001, end_log_pos 1145Replicate_Ignore_Server_Ids: Master_Server_Id: 3Master_UUID: 2e8a60d2-3c75-11ec-b3aa-000c29dfb115Master_Info_File: /opt/mysql_cluster/mysql/data/master.infoSQL_Delay: 0SQL_Remaining_Delay: NULLSlave_SQL_Running_State: Master_Retry_Count: 86400Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: 211103 16:58:29Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: Executed_Gtid_Set: Auto_Position: 0Replicate_Rewrite_DB: Channel_Name: Master_TLS_Version: 
1 row in set (0.00 sec)

此时Slave_SQL_Running状态No,也就是说失败自动停止了同步,我们把我们误操作写入从数据库的表的数据(重复的主键ID)数据删除,然后在Slave2执行

mysql> start slave;
Query OK, 0 rows affected (0.12 sec)

查看Slave2数据库中的数据已经同步成功,查看状态Slave_SQL_Running状态Yes

参考资料:https://xiaojin21cen.blog.csdn.net/article/details/103913870
https://www.cnblogs.com/yuanfang0903/p/11232655.html

超详细的配置文件说明

根据个人实际使用情况进行配置

[client] 
port = 3306 
socket = /opt/mysql/mysql.sock
[mysqld] 
lower_case_table_names = 1
port = 3306 
socket = /opt/mysql/mysql.sock
basedir = /opt/mysql
datadir = /home/mysql/data
pid-file = /opt/mysql/mysql.pid 
user = mysql 
bind-address = 0.0.0.0
#lower_case_table_names=1 
# MySQL服务器序号(集群时,每个节点ID不能相同)
server-id = 1 init-connect = 'SET NAMES utf8'
character-set-server = utf8 # 禁止MySQL对外部连接进行DNS解析,使用这一选项可以消除MySQL进行DNS解析的时间。但需要注意,如果开启该选项,# 则所有远程主机连接授权都要使用IP地址方式,否则MySQL将无法正常处理连接请求
#skip-name-resolve #skip-networking # MySQL能有的连接数量。当主要MySQL线程在一个很短时间内得到非常多的连接请求,这就起作用,
# 然后主线程花些时间(尽管很短)检查连接并且启动一个新线程。back_log值指出在MySQL暂时停止回答新请求之前的短时间内多少个请求可以被存在堆栈中。
# 如果期望在一个短时间内有很多连接,你需要增加它。也就是说,如果MySQL的连接数据达到max_connections时,新来的请求将会被存在堆栈中,
# 以等待某一连接释放资源,该堆栈的数量即back_log,如果等待连接的数量超过back_log,将不被授予连接资源。
# 另外,这值(back_log)限于您的操作系统对到来的TCP/IP连接的侦听队列的大小。
# 你的操作系统在这个队列大小上有它自己的限制(可以检查你的OS文档找出这个变量的最大值),试图设定back_log高于你的操作系统的限制将是无效的。
back_log = 300 # MySQL的最大连接数,如果服务器的并发连接请求量比较大,建议调高此值,以增加并行连接数量,当然这建立在机器能支撑的情况下,因为如果连接数越多,介于MySQL会为每个连接提供连接缓冲区,就会开销越多的内存,所以要适当调整该值,不能盲目提高设值。可以过'conn%'通配符查看当前状态的连接数量,以定夺该值的大小。
max_connections = 1000 # 对于同一主机,如果有超出该参数值个数的中断错误连接,则该主机将被禁止连接。如需对该主机进行解禁,执行:FLUSH HOST。
max_connect_errors = 6000 # MySQL打开的文件描述符限制,默认最小1024;当open_files_limit没有被配置的时候,比较max_connections*5和ulimit -n的值,哪个大用哪个,
# 当open_file_limit被配置的时候,比较open_files_limit和max_connections*5的值,哪个大用哪个。
open_files_limit = 65535 # MySQL每打开一个表,都会读入一些数据到table_open_cache缓存中,当MySQL在这个缓存中找不到相应信息时,才会去磁盘上读取。默认值64
# 假定系统有200个并发连接,则需将此参数设置为200*N(N为每个连接所需的文件描述符数目);
# 当把table_open_cache设置为很大时,如果系统处理不了那么多文件描述符,那么就会出现客户端失效,连接不上
table_open_cache = 128 # 接受的数据包大小;增加该变量的值十分安全,这是因为仅当需要时才会分配额外内存。例如,仅当你发出长查询或MySQLd必须返回大的结果行时MySQLd才会分配更多内存。
# 该变量之所以取较小默认值是一种预防措施,以捕获客户端和服务器之间的错误信息包,并确保不会因偶然使用大的信息包而导致内存溢出。
max_allowed_packet = 4M # 一个事务,在没有提交的时候,产生的日志,记录到Cache中;等到事务提交需要提交的时候,则把日志持久化到磁盘。默认binlog_cache_size大小32K
binlog_cache_size = 1M # 定义了用户可以创建的内存表(memory table)的大小。这个值用来计算内存表的最大行数值。这个变量支持动态改变
max_heap_table_size = 8M # MySQL的heap(堆积)表缓冲大小。所有联合在一个DML指令内完成,并且大多数联合甚至可以不用临时表即可以完成。
# 大多数临时表是基于内存的(HEAP)表。具有大的记录长度的临时表 (所有列的长度的和)或包含BLOB列的表存储在硬盘上。
# 如果某个内部heap(堆积)表大小超过tmp_table_size,MySQL可以根据需要自动将内存中的heap表改为基于硬盘的MyISAM表。还可以通过设置tmp_table_size选项来增加临时表的大小。也就是说,如果调高该值,MySQL同时将增加heap表的大小,可达到提高联接查询速度的效果
tmp_table_size = 16M # MySQL读入缓冲区大小。对表进行顺序扫描的请求将分配一个读入缓冲区,MySQL会为它分配一段内存缓冲区。read_buffer_size变量控制这一缓冲区的大小。
# 如果对表的顺序扫描请求非常频繁,并且你认为频繁扫描进行得太慢,可以通过增加该变量值以及内存缓冲区大小提高其性能
read_buffer_size = 2M # MySQL的随机读缓冲区大小。当按任意顺序读取行时(例如,按照排序顺序),将分配一个随机读缓存区。进行排序查询时,
# MySQL会首先扫描一遍该缓冲,以避免磁盘搜索,提高查询速度,如果需要排序大量数据,可适当调高该值。但MySQL会为每个客户连接发放该缓冲空间,所以应尽量适当设置该值,以避免内存开销过大
read_rnd_buffer_size = 8M # MySQL执行排序使用的缓冲大小。如果想要增加ORDER BY的速度,首先看是否可以让MySQL使用索引而不是额外的排序阶段。
# 如果不能,可以尝试增加sort_buffer_size变量的大小
sort_buffer_size = 8M 
# 联合查询操作所能使用的缓冲区大小,和sort_buffer_size一样,该参数对应的分配内存也是每连接独享
join_buffer_size = 8M #指定用于索引的缓冲区大小,增加它可得到更好处理的索引(对所有读和多重写),到你能负担得起那样多。如果你使它太大,
# 系统将开始换页并且真的变慢了。对于内存在4GB左右的服务器该参数可设置为384M或512M。通过检查状态值Key_read_requests和Key_reads,
# 可以知道key_buffer_size设置是否合理。比例key_reads/key_read_requests应该尽可能的低,
# 至少是1:100,1:1000更好(上述状态值可以使用SHOW STATUS LIKE 'key_read%'获得)。注意:该参数值设置的过大反而会是服务器整体效率降低
key_buffer_size = 4M 
# 这个值(默认8)表示可以重新利用保存在缓存中线程的数量,当断开连接时如果缓存中还有空间,那么客户端的线程将被放到缓存中,
# 如果线程重新被请求,那么请求将从缓存中读取,如果缓存中是空的或者是新的请求,那么这个线程将被重新创建,如果有很多新的线程,
# 增加这个值可以改善系统性能.通过比较Connections和Threads_created状态的变量,可以看到这个变量的作用。(–>表示要调整的值)
# 根据物理内存设置规则如下:
# 1G  —> 8
# 2G  —> 16
# 3G  —> 32
# 大于3G  —> 64
thread_cache_size = 64 query_cache_type = 1 #MySQL的查询缓冲大小(从4.0.1开始,MySQL提供了查询缓冲机制)使用查询缓冲,MySQL将SELECT语句和查询结果存放在缓冲区中,
# 今后对于同样的SELECT语句(区分大小写),将直接从缓冲区中读取结果。根据MySQL用户手册,使用查询缓冲最多可以达到238%的效率。
# 通过检查状态值'Qcache_%',可以知道query_cache_size设置是否合理:如果Qcache_lowmem_prunes的值非常大,则表明经常出现缓冲不够的情况,
# 如果Qcache_hits的值也非常大,则表明查询缓冲使用非常频繁,此时需要增加缓冲大小;如果Qcache_hits的值不大,则表明你的查询重复率很低,
# 这种情况下使用查询缓冲反而会影响效率,那么可以考虑不用查询缓冲。此外,在SELECT语句中加入SQL_NO_CACHE可以明确表示不使用查询缓冲
query_cache_size = 8M #指定单个查询能够使用的缓冲区大小,默认1M
query_cache_limit = 2M # 分词词汇最小长度,默认4
ft_min_word_len = 4 ## ===========================binlog配置开始==============================
# 启用二进制日志
log_bin = mysql-bin # 设置binlog格式,取值:STATEMENT、ROW、mixed
binlog_format = ROW# 从库的中继日志,主库日志写到中继日志,中继日志到从库;slave从节点启动
#relay-log=mysql-relay-bin#超过30天的binlog删除
expire_logs_days = 30 # binlog文件的大小
max_binlog_size=1G# 该从库是否写入二进制日志。如果需要成为多主则可启用,只读可以不需要
log-slave-updates=1# 在主主同步配置时,需要将两台服务器的auto_increment_increment增长量都配置为2,而要把auto_increment_offset分别配置为1和2.
# 该服务器自增列的初始值。(与 Master2,...... MasterN 的不同点)
auto-increment-offset=1# 该服务器自增列增量。其默认值是1, 取值范围是1 .. 65535
auto-increment-increment=2# 设置不要复制的数据库(可设置多个)
binlog-ignore-db=information_schema
binlog-ignore-db=mysql
binlog-ignore-db=performance_schema
binlog-ignore-db=sys#设置需要复制的数据库(可选)。
# 如果要配置了此项,则 mysql 只复制下面指定的数据库。
# 如果不配置此项,则 mysql 默认复制所有的数据库(不包含 binlog-ignore-db 的数据库)
#binlog-do-db=需要复制的主数据库1
#binlog-do-db=需要复制的主数据库2## ===========================binlog配置结束==============================
#错误日志路径
log_error = /opt/mysql/mysql-error.log #慢查询时间 超过1秒则为慢查询
slow_query_log = 1 long_query_time = 1 #慢查询日志
slow_query_log_file = /opt/mysql/mysql-slow.log performance_schema = 0 
explicit_defaults_for_timestamp 
lower_case_table_names = 0
# lower_case_file_system = ON #MySQL选项以避免外部锁定。该选项默认开启
skip-external-locking #默认存储引擎default_storage_engine = InnoDB 
#default-storage-engine = MyISAM # InnoDB为独立表空间模式,每个数据库的每个表都会生成一个数据空间
# 独立表空间优点:
# 1.每个表都有自已独立的表空间。
# 2.每个表的数据和索引都会存在自已的表空间中。
# 3.可以实现单表在不同的数据库中移动。
# 4.空间可以回收(除drop table操作处,表空不能自已回收)
# 缺点:
# 单表增加过大,如超过100G
# 结论:
# 共享表空间在Insert操作上少有优势。其它都没独立表空间表现好。当启用独立表空间时,需合理调整:innodb_open_files
innodb_file_per_table = 1# 限制Innodb能打开的表的数据,如果库里的表特别多的情况,请增加这个。这个值默认是300
innodb_open_files = 500 # InnoDB使用一个缓冲池来保存索引和原始数据, 不像MyISAM.
# 这里设置越大,在存取表里面数据时所需要的磁盘I/O越少.
# 在一个独立使用的数据库服务器上,可以设置这个变量到服务器物理内存大小的80%
# 设置过大,由于物理内存的竞争可能导致操作系统的换页颠簸.
# 在32位系统上你每个进程可能被限制在 2-3.5G 用户层面内存限制
innodb_buffer_pool_size = 64M # innodb使用后台线程处理数据页上的读写 I/O(输入输出)请求,根据你的 CPU 核数来更改,默认是4
# 注:这两个参数不支持动态改变,需要把该参数加入到my.cnf里,修改完后重启MySQL服务,允许值的范围从 1-64
innodb_write_io_threads = 4 
innodb_read_io_threads = 4# 默认设置为 0,表示不限制并发数,这里推荐设置为0,更好去发挥CPU多核处理能力,提高并发量
innodb_thread_concurrency = 0# InnoDB中的清除操作是一类定期回收无用数据的操作。在之前的几个版本中,清除操作是主线程的一部分,这意味着运行时它可能会堵塞其它的数据库操作。
# 从MySQL5.5.X版本开始,该操作运行于独立的线程中,并支持更多的并发数。用户可通过设置innodb_purge_threads配置参数来选择清除操作是否使用单
# 独线程,默认情况下参数设置为0(不使用单独线程),设置为 1 时表示使用单独的清除线程。建议为1
innodb_purge_threads = 1 # 0:log buffer每秒就会被刷写日志文件到磁盘,提交事务的时候不做任何操作(执行是由mysql的master thread线程来执行)
# 主线程中每秒会将重做日志缓冲写入磁盘的重做日志文件(REDO LOG)中。不论事务是否已经提交)默认的日志文件是ib_logfile0,ib_logfile1
# 1:每次提交事务的时候,都会将log buffer刷写到日志。
# 2:每次提交事务都会写日志,但并不会执行刷的操作。每秒定时会刷到日志文件。要注意的是,并不能保证100%每秒一定都会刷到磁盘,这要取决于进程的调度。
# 每次事务提交的时候将数据写入事务日志,而这里的写入仅是调用了文件系统的写入操作,而文件系统是有 缓存的,所以这个写入并不能保证数据已经写入到物理磁盘
# 默认值1是为了保证完整的ACID。当然,你可以将这个配置项设为1以外的值来换取更高的性能,但是在系统崩溃的时候,你将会丢失1秒的数据。
# 设为0的话,mysqld进程崩溃的时候,就会丢失最后1秒的事务。设为2,只有在操作系统崩溃或者断电的时候才会丢失最后1秒的数据。InnoDB在做恢复的时候会忽略这个值。
# 注意
# 设为1当然是最安全的,但性能页是最差的(相对其他两个参数而言,但不是不能接受)。如果对数据一致性和完整性要求不高,完全可以设为2,如果只最求性能,例如高并发写的日志服务器,设为0来获得更高性能
innodb_flush_log_at_trx_commit = 2 # 此参数确定些日志文件所用的内存大小,以M为单位。缓冲区更大能提高性能,但意外的故障将会丢失数据。MySQL开发人员建议设置为1-8M之间
innodb_log_buffer_size = 2M # 此参数确定数据日志文件的大小,更大的设置可以提高性能,但也会增加恢复故障数据库所需的时间
innodb_log_file_size = 32M # 为提高性能,MySQL可以以循环方式将日志文件写到多个文件。推荐设置为3
innodb_log_files_in_group = 3 # innodb主线程刷新缓存池中的数据,使脏数据比例小于90%
innodb_max_dirty_pages_pct = 90 # InnoDB事务在被回滚之前可以等待一个锁定的超时秒数。InnoDB在它自己的锁定表中自动检测事务死锁并且回滚事务。InnoDB用LOCK TABLES语句注意到锁定设置。默认值是50秒
innodb_lock_wait_timeout = 120 # 批量插入缓存大小, 这个参数是针对MyISAM存储引擎来说的。适用于在一次性插入100-1000+条记录时, 提高效率。默认值是8M。可以针对数据量的大小,翻倍增加。
bulk_insert_buffer_size = 8M# MyISAM设置恢复表之时使用的缓冲区的尺寸,当在REPAIR TABLE或用CREATE INDEX创建索引或ALTER TABLE过程中排序 MyISAM索引分配的缓冲区
myisam_sort_buffer_size = 8M # 如果临时文件会变得超过索引,不要使用快速排序索引方法来创建一个索引。注释:这个参数以字节的形式给出
myisam_max_sort_file_size = 10G # 如果该值大于1,在Repair by sorting过程中并行创建MyISAM表索引(每个索引在自己的线程内)
myisam_repair_threads = 1 # 服务器关闭交互式连接前等待活动的秒数。交互式客户端定义为在mysql_real_connect()中使用CLIENT_INTERACTIVE选项的客户端。默认值:28800秒(8小时)
interactive_timeout = 28800 # 服务器关闭非交互连接之前等待活动的秒数。在线程启动时,根据全局wait_timeout值或全局interactive_timeout值初始化会话wait_timeout值,
# 取决于客户端类型(由mysql_real_connect()的连接选项CLIENT_INTERACTIVE定义)。参数默认值:28800秒(8小时)
# MySQL服务器所支持的最大连接数是有上限的,因为每个连接的建立都会消耗内存,因此我们希望客户端在连接到MySQL Server处理完相应的操作后,
# 应该断开连接并释放占用的内存。如果你的MySQL Server有大量的闲置连接,他们不仅会白白消耗内存,而且如果连接一直在累加而不断开,
# 最终肯定会达到MySQL Server的连接上限数,这会报'too many connections'的错误。对于wait_timeout的值设定,应该根据系统的运行情况来判断。
# 在系统运行一段时间后,可以通过show processlist命令查看当前系统的连接状态,如果发现有大量的sleep状态的连接进程,则说明该参数设置的过大,
# 可以进行适当的调整小些。要同时设置interactive_timeout和wait_timeout才会生效。
wait_timeout = 28800 [mysqldump] 
quick
#服务器发送和接受的最大包长度
max_allowed_packet = 16M 
[myisamchk] 
key_buffer_size = 8M 
sort_buffer_size = 8M 
read_buffer = 4M 
write_buffer = 4M [mysqld_safe]
log-error=/opt/mysql/mysqld.log
pid-file=/opt/mysql/mysqld.pid

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/509604.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

ElasticSearch 新增节点,横向扩容

文章目录查看当前ES状态新增节点配置遇到的问题查看当前ES状态 这里默认都是在Kibana进行操作 GET _cluster/health{"cluster_name" : "bjga-gz","status" : "yellow","timed_out" : false,"number_of_nodes" :…

输入和输出(IO)概述

什么是IO:(Input/Output):输入和输出. IO设备: 和电脑通信的设备. 输入设备:麦克风,扫描器,键盘,鼠标等. 输出设备:显示器,打印机,投影仪,耳机,音响等. 为什么程序需要IO呢? 案例1:打游戏操作,得分比较高,存储游戏的信息(XXX-888分). 此时需要把游戏中的数据存储起来,只能…

java中有关文件流的操作

文件流: 顾名思义,程序和文件打交道. 此时我们谈及的文件,值得是纯文本文件(txt的,不要使用Word,Excel), 在字节流中,暂时不要使用中文. FileInputStream: 文件的字节输入流 FileOutputStream: 文件的字节输出流 FileReader:文件的字符输入流 FileWriter:文件的字符输出流…

数据结构实验之二叉树一:树的同构

题目描述 给定两棵树T1和T2。如果T1可以通过若干次左右孩子互换就变成T2,则我们称两棵树是“同构”的。例如图1给出的两棵树就是同构的,因为我们把其中一棵树的结点A、B、G的左右孩子互换后,就得到另外一棵树。而图2就不是同构的。 图1 …

java中字符编码详解

字符编码的发展历程: 阶段1: 计算机只认识数字,我们在计算机里一切数据都是以数字来表示,因为英文符号有限, 所以规定使用的字节的最高位是0.每一个字节都是以0~127之间的数字来表示,比如A对应65,a对应97. 这就是美国标准信息交换码-ASCII. 阶段2: 随着计算机在全球的普及…

java中的包装流和缓冲流概述

处理流/包装流(相对于节点流更高级)装饰设计模式/包装模式: 1:隐藏了底层的节点流的差异,并对外提供了更方便的输入/输出功能,让我们只关心高级流的操作. 2:使用处理流包装了节点流,程序直接操作处理流,让节点流与底层的设备做IO操作. 3:只需要关闭处理流即可. 包装流如何区…

转换流和内存流

转换流:把字节流转成字符流: InputStreamReader:把字节输入流转成字符输入流. OutputStreamWriter:把字节输出流转成字符输出流. 为什么有字节转字符流,没有字符转字节流. 字节流可以操作一切文件(纯文本文件/二进制文件).字符流是用来操作中文纯文本使用的,本身是对字节流的…

windows配置gvim高效率编程(cc++)带自动补全代码

对vim的配置足以处理一般的比赛获其他编程项目要求,如自动缩进,自动补全等等。先上几张截图,看看效果: 可以看见vim简洁高效的界面和不错的缩进功能。 debug功能 一、安装gvim 下载资源并安装 百度云下载网址http://pan.baid…

Flink 1.12 CDH 6.3 集成

之前记录的:Flink 1.9 CDH 6.3 集成 有些下载链接可能被官方关闭了,这里介绍1.12版本集成,并把安装包下载地址换为百度网盘链接 下载安装包 链接: https://pan.baidu.com/s/112fiaaMAMMXMsyiTDh3qjg 提取码: ar5f 安装包内容 FLINK-1.12…

合并流

合并流/顺序流(SequenceInputStream): 就是把多个输入流,合并成一个流对象.

gvim常用的配置及插件 -windows

gvim常用的配置及插件 接触vim也已经有一年多了,期间也用过一段时间的SourceInsight,SourceInsight是Windows下一款不错的查看代码的软件。利用它可以迅速的了解一个大型程序的结构。后来在Linux下进行了一段时间的程序开发,就回到vim上了,经…

CDH 6 安装服务哈希验证失败 解决方法

当安装cdh 6,使用本地搭建的parcel时,出现了哈希验证失败的问题: 查看了parcel的sha值,与官网的一致,没有问题: #parcel sha值 [rootlocalhost bigdata]# sha1sum CDH-6.0.0-1.cdh6.0.0.p0.537114-el7.pa…

gvim配置

手把手教你把Vim改装成一个IDE编程环境(图文) By:吴垠Date:2007-09-07Version:0.5Email:lazy.fox.wu#gmail.comHomepage:http://blog.csdn.net/wooinCopyright:该文章版权由吴垠和他可爱的老婆小包子所有。可在非商业目的下任意传播和复制。对于商业目的下对本文的任何行为需…

Gvim开发环境配置笔记--Windows篇

环境:Windows7 旗舰版 1、安装Gvim7.3 : 下载地址http://www.vim.org/download.php#pc。 2、安装中文帮助:vimcdoc-1.8.0-setup.exe 地址http://vimcdoc.sourceforge.net/ 会自动识别gvim的安装路径, 安装完后,gvim菜单…

Grafana : 前端页面 通过API Key免登录访问Grafana

文章目录场景一是使用匿名登陆,最简单方便二是使用grafana颁发一个API Key。场景 平台要集成grafana,想绕过用户登录,目前知道有2个方法。 前提:先修改配置defaults.ini/grafana.ini允许嵌入 allow_embedding true一是使用匿名…

CentOS 使用iso镜像安装本地 yum 源

文章目录下载服务器镜像挂载iso镜像修改yum源挂载iso到系统中查看挂载状态挂载完成后清缓存安装服务测试下载服务器镜像 下载与我们服务器相同版本的服务器镜像。 查看当前服务器版本 [rootiZot101s4kxuygvttz67vjZ yum.repos.d]# cat /etc/redhat-release CentOS Linux re…

Grafana Prometheus 服务安装部署(Linux服务器监控)

文章目录一、概述二、安装Prometheus1.安装node_exporter2.安装Prometheus三、安装Grafana展示监控监控进程一、概述 Prometheus 介绍 Prometheus是一套开源的监控&报警&时间序列数据库的组合,起始是由SoundCloud公司开发的。随着发展,越来越多…

Vim升华之树形目录插件NERDTree安装图解

无意中看到实验室的朋友使用的vim竟然能在左边显示树形目录,感觉很方便,这样子文件夹有什么文件一目了然。她说是一个插件叫NERDTree,安装执行后的效果如下,不是你想要的效果就别安了。我的系统是Ubuntu12.04,版本不同…

Grafana Prometheus Process-Exporter 服务进程监控

文章目录一、process-exporter安装二、Grafana展示离线导入在线导入之前介绍到Grafana Prometheus 安装部署并监控Linux服务器状态 https://datamining.blog.csdn.net/article/details/122671215 ,这里我们介绍服务进程的通用监控。一、process-exporter安装 GitHu…

算法6:只有五行的Floyd最短路算法

暑假,小哼准备去一些城市旅游。有些城市之间有公路,有些城市之间则没有,如下图。为了节省经费以及方便计划旅程,小哼希望在出发之前知道任意两个城市之前的最短路程。上图中有4个城市8条公路,公路上的数字表示这条公路…