mysql集群MHA方式部署

1. 基本信息

部署机器角色部署路径
192.168.242.71MySQL-Mater + MHA-NodeMySQL: /alidata1/mysql-5.7.43
192.168.242.72MySQL-Slave + MHA-NodeMHA-Node: /alidata1/admin/tools/mha4mysql-node-0.58
192.168.242.73MySQL-Slave + MHA-Node
192.168.242.74MHA-ManagerMHA-Manager: /alidata1/admin/tools/mha4mysql-manager-0.58
192.168.242.100VIP

2. 简介

## 简介
MHA(Master HA) 是一款开源的 MySQL 的高可用程序,它为 MySQL主从复制架构提供了自动化主故障转移功能.
MHA 在监控到 master 节点故障时,会提升其中拥有最新数据的 slave 节点成为新的master节点, 在此期间,MHA 会通过于其它从节点获取额外信息来避免一致性方面的问题.
MHA 还提供了 master 节点的在线切换功能,即按需切换 master/slave 节点.
MHA 能够在30秒内实现故障切换,并能在故障切换中,最大可能的保证数据一致性.## 原理
(1) 获取从宕机崩溃的 master 保存二进制日志事件(binlog events)
(2) 识别含有最新更新的 slave
(3) 将差异的中继日志(relay log)应用到其他 slave
(4) 将 master 保存的二进制日志事件(binlog events)应用到要提升为master节点的slave
(5) 将这 slave 只读模式解除并提升为新 master, 重新部署主从关系

3. 安装MHA

3.1 提前操作
## 1.  安装mysql主从 -- 略
## MHA-0.58 支持GTID ,只要保证MySQL主从关系正常即可## 2. 所有机器两两之间ssh免密
## (1) 在任意一台机器使用root用户执行命令ssh-keygen生成公秘钥(如 192.168.242.71), 然后ssh-copy-id到所有机器(192.168.242.71/72/73/74)
## (2) 将此机器的公秘钥scp到所有机器(192.168.242.71/72/73/74)## 2. MySQL-Master主机配置虚拟ip -- 192.168.242.71
# /sbin/ifconfig ens33:1 192.168.242.100/24
3.2 安装MHA-Node
## 1.将安装包上传到所有机器, 包括MHA-Manager机器 (192.168.242.71/72/73/74)
# pwd
/alidata1/admin/tools/
# tar xf mha4mysql-node-0.58.tar.gz## 2.编译
# cd mha4mysql-node-0.58
# yum install -y make gcc perl-DBD-MySQL perl-Config-Tiny perl-Log-Dispatch perl-Parallel-ForkManager perl-ExtUtils-CBuilder perl-ExtUtils-MakeMaker perl-CPAN
# perl Makefile.PL
# make && make install
3.3 安装MHA-Manager
## 1.将安装包上传MHA-Manager机器 (192.168.242.74)
# pwd
/alidata1/admin/tools/
# tar xf mha4mysql-manager-0.58.tar.gz## 2.编译
# cd mha4mysql-manager-0.58
# yum install -y make gcc perl-DBD-MySQL perl-Config-Tiny perl-Log-Dispatch perl-Parallel-ForkManager perl-ExtUtils-CBuilder perl-ExtUtils-MakeMaker perl-CPAN
# perl Makefile.PL
# make && make install## 3.拷贝可执行文件到/usr/local/bin
# chmod +x  samples/scripts/*
# cp samples/scripts/* /usr/local/bin/## 4. 修改可执行文件 /usr/local/bin/master_ip_failover, 内容如下
#!/usr/bin/env perl
use strict;
use warnings FATAL => 'all';use Getopt::Long;my (
$command, $ssh_user, $orig_master_host, $orig_master_ip,
$orig_master_port, $new_master_host, $new_master_ip, $new_master_port
);
#############################添加内容部分#########################################
my $vip = '192.168.242.100'; ## 指定vip的地址 192.168.242.100
my $brdc = '192.168.242.255';    ## 指定vip的广播地址 192.168.242.255
my $ifdev = 'ens33';             ## 指定vip绑定的网卡 ens33
my $key = '1';                   ## 指定vip绑定的虚拟网卡序列号
my $ssh_start_vip = "sudo /sbin/ifconfig ens33:$key $vip"; ## 代表此变量值为ifconfig ens33:1 192.168.242.100
my $ssh_stop_vip = "sudo /sbin/ifconfig ens33:$key down";  ## 代表此变量值为ifconfig ens33:1 192.168.242.100 down
my $exit_code = 0;               ## 指定退出状态码为0#my $ssh_start_vip = "/usr/sbin/ip addr add $vip/24 brd $brdc dev $ifdev label $ifdev:$key;/usr/sbin/arping -q -A -c 1 -I $ifdev $vip;iptables -F;";
#my $ssh_stop_vip = "/usr/sbin/ip addr del $vip/24 dev $ifdev label $ifdev:$key";##################################################################################
GetOptions(
'command=s' => \$command,
'ssh_user=s' => \$ssh_user,
'orig_master_host=s' => \$orig_master_host,
'orig_master_ip=s' => \$orig_master_ip,
'orig_master_port=i' => \$orig_master_port,
'new_master_host=s' => \$new_master_host,
'new_master_ip=s' => \$new_master_ip,
'new_master_port=i' => \$new_master_port,
);exit &main();sub main {print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n";if ( $command eq "stop" || $command eq "stopssh" ) {my $exit_code = 1;
eval {
print "Disabling the VIP on old master: $orig_master_host \n";
&stop_vip();
$exit_code = 0;
};
if ($@) {
warn "Got Error: $@\n";
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "start" ) {my $exit_code = 10;
eval {
print "Enabling the VIP - $vip on the new master - $new_master_host \n";
&start_vip();
$exit_code = 0;
};
if ($@) {
warn $@;
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "status" ) {
print "Checking the Status of the script.. OK \n";
exit 0;
}
else {
&usage();
exit 1;
}
}
sub start_vip() {
`ssh root\@$new_master_host \" $ssh_start_vip \"`;   ## 直接写死root 否则主从切换时报错 ssh_user 没有初始化
}
## A simple system call that disable the VIP on the old_master
sub stop_vip() {
`ssh root\@$orig_master_host \" $ssh_stop_vip \"`;   ## 直接写死root 否则主从切换时报错 ssh_user 没有初始化
}sub usage {
print
"Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
}## 5.新建配置文件
# vim /alidata1/admin/tools/mysql_mha.conf
[server default]
## 指定manager日志路径
manager_log=/alidata1/admin/logs/mha4mysql/manager.log
## 指定manager工作目录
manager_workdir=/alidata1/admin/tools/mha4mysql-manager-0.58
## 指定mha在远程节点上的工作目录
remote_workdir=/alidata1/admin/tools/mha4mysql-manager-0.58
## 指定master保存binlog的位置,这里的路径要与master里配置的binlog的路径一致,以便MHA能找到
master_binlog_dir=/alidata1/mysql-5.7.43/binlog
## 设置监控主库,发送ping包的时间间隔,默认是3秒,尝试三次没有回应的时候自动进行failover
ping_interval=1
## 设置自动failover时候的切换脚本
master_ip_failover_script=/usr/local/bin/master_ip_failover
user=admin
password=Mysql_Admin_wMMpb8ks9
repl_user=repl
repl_password=Mysql_Repl_oOev7cU4h
port=3306
secondary_check_script=/usr/local/bin/masterha_secondary_check -s 192.168.242.72 -s 192.168.242.73
ssh_user=root[server1]
hostname=192.168.242.71
port=3306
ssh_user=root[server2]
hostname=192.168.242.72
port=3306
ssh_user=root
# candidate_master=1  ## 设置为候选master,设置该参数以后,发生主从切换以后将会将此从库提升为主库,即使这个从库不是集群中最新的slave
# check_repl_delay=0  ## 默认情况下如果一个slave落后master 超过100M的relay logs的话 ## MHA将不会选择该slave作为一个新的master, 因为对于这个slave的恢复需要花费很长时间## 通过设置check_repl_delay=0 MHA触发切换在选择一个新的master的时候将会忽略复制延时, ## 这个参数对于设置了candidate_master=1的主机非常有用,因为这个候选主在切换的过程中一定是新的master[server3]
hostname=192.168.242.73
port=3306
ssh_user=root## 5.启动MHA-Manager
## --remove_dead_master_conf: 当成功failover后,MHA manager将会自动删除配置文件中关于dead master的配置选项
## --ignore_last_failover: 如果最近failover 失败,MHA 将不会再次开启failover机制,因为这个问题可能再次发生。## 常规步骤:手动清理failover 错误文件,此文件一般在manager_workdir/app_name.failover.error文件,然后在启动failover机制。## 如果设置此参数,MHA 将会继续failover 不管上次的failover状态。
# nohup masterha_manager --conf=/alidata1/admin/tools/mha4mysql-manager-0.58/mysql_mha.conf --remove_dead_master_conf --ignore_last_failover > /alidata1/admin/logs/mha4mysql/mha_manager.log < /dev/null 2>&1 &## 6. 常用命令 -- MHA-Manager机器执行
## (1) 测试 ssh 连通性
# masterha_check_ssh --conf=/alidata1/admin/tools/mha4mysql-manager-0.58/mysql_mha.conf 
## (2) 测试 mysql 主从连接情况
# masterha_check_repl -conf=/alidata1/admin/tools/mha4mysql-manager-0.58/mysql_mha.conf 
## (3) 查看状态
# masterha_check_status --conf=/alidata1/admin/tools/mha4mysql-manager-0.58/mysql_mha.conf
## (4) 停止
## masterha_stop --conf=/alidata1/admin/tools/mha4mysql-manager-0.58/mysql_mha.conf

4. 模拟MySQL-Master 宕机

## 1. 使用命令行先初始化一些数据
# ./bin/mysql -h192.168.242.100 --port=3306 --user=admin -p'Mysql_Admin_wMMpb8ks9'
mysql> create database db_test;
mysql> create table db_test.t_test (   `id` int NOT NULL AUTO_INCREMENT,   `name` varchar(255) DEFAULT NULL,   PRIMARY KEY (`id`) );# for i in `seq 1 2500`; do ./bin/mysql -h192.168.242.100 -uadmin -p'Mysql_Admin_wMMpb8ks9' -e "insert into db_test.t_test(id, name) values($i,$i);"; done## 2. 停止MySQL-master
# systemctl stop mysqld    ## 192.168.242.71上操作##  大约15s后 虚拟ip 192.168.242.100会转移到192.168.242.72上 
## 在192.168.242.73上执行 show slave status\G 会发现主节点已变成192.168.242.72
## 同时 MHA-Manager 进程会停止
## 从日志/alidata1/admin/logs/mha4mysql/mha_manager.log 可以看到  15:34:35发现主节点不可用  15:34:51迁移完成

5.原来主节点恢复到MHA集群中

## 1. 新的主节点上增加一些数据 -- 模拟验证
# for i in `seq 2501 5000`; do ./bin/mysql -h192.168.242.100 -uadmin -p'Mysql_Admin_wMMpb8ks9' -e "insert into db_test.t_test(id, name) values($i,$i);"; done## 2.将旧主(192.168.242.71) 配置成新主(192.168.242.72)的从节点
## 2.1 修改新主(192.168.242.72)配置, 注释掉 read_only = on## 2.2 修改配置 /etc/my.cnf   [mysqld] 下新增配置
log_slave_updates = 1   ## 从库会将自己执行的事务写入到从库的二进制日志中   主主模式需要## 这样做的目的是为了保证主从复制链路的完整性和一致性 以便其他从库可以正确地复制从库上执行的事务## A >> B >> C
read_only = on
relay_log = /alidata1/mysql-5.7.43/logs/relay.log
relay_log_purge = on
relay_log_recovery = on## 2.3 启动旧主(192.168.242.71)上的musql
# systemctl restart mysqld ## 2.4 新主(192.168.242.72,)上备份数据 并恢复到旧主(192.168.242.71)
# mysqldump -uroot -p'Mysql_Root_lj11tLZgs' --single-transaction --set-gtid-purged=ON -A -B > all.sql  ## 备份 192.168.242.72执行
## 数据恢复到 192.168.242.71
# mysql -uroot -p'Mysql_Root_lj11tLZgs' -e 'reset master;'  
# mysql -uroot -p'Mysql_Root_lj11tLZgs' < all.sql## 2.5 配置主从 -- 192.168.242.71 操作
mysql > stop slave;
mysql > CHANGE MASTER TO MASTER_HOST='192.168.242.72',MASTER_USER='repl',MASTER_PASSWORD='Mysql_Repl_oOev7cU4h',MASTER_PORT=3306,MASTER_AUTO_POSITION=1;
mysql > start slave;
mysql > show slave status\G;## 3. 修改MHA-Manager配置并启动  -- 192.168.242.74
# pwd
/alidata1/admin/tools/mha4mysql-manager-0.58
#  rm -rf mysql_mha.failover.complete
# vim mysql_mha.conf
...
secondary_check_script=/usr/local/bin/masterha_secondary_check -s 192.168.242.71 -s 192.168.242.73
...[server1]
hostname=192.168.242.71
port=3306
ssh_user=root# nohup masterha_manager --conf=/alidata1/admin/tools/mha4mysql-manager-0.58/mysql_mha.conf --remove_dead_master_conf --ignore_last_failover > /alidata1/admin/logs/mha4mysql/mha_manager.log < /dev/null 2>&1 &## 至此MHA集群已经恢复, 此时将192.168.242.72上mysql关闭后,VIP会再次漂移,表示集群状态正常

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/web/62527.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

【C++】8___继承

目录 一、基本语法 二、继承方式 三、对象模型 四、继承中的构造与析构的顺序 五、继承中同名成员处理 六、多继承语法 七、菱形继承 一、基本语法 好处&#xff1a;减少重复的代码 语法&#xff1a; class 子类 &#xff1a; 继承方式 父类 子类 也称为 派生类 父类…

Netty客户端接收不到服务端发送的数据问题

文章目录 前言问题描述相关代码解决方法 前言 环境 JDK&#xff1a;64位 jdk1.8.0_201 Netty&#xff1a;4.1.39.Final 问题描述 项目中使用Netty接受客户端的消息&#xff0c;客户端为硬件设备&#xff0c;在接受数据后发送数据到服务端。 同时因为客户端没有联网&#xff…

IDEA方法注释模板设置

目录 创建模板 新建模板&#xff1a;命名为* 设置模板内容-IDEA格式模板 设置模板应用场景 设置参数 创建模板 /**Enter这里我们也按照这种习惯来设置IDEA的方法注释&#xff1a;File-->Settings-->Editor-->Live Templates 先新建模板组&#xff0c;然后在模板组中…

vscode 配置C/C++环境控制台参数

您可以通过以下步骤在VS Code中配置C/C环境的控制台参数&#xff1a; 1&#xff0c;打开VS Code并进入您的C/C项目 2&#xff0c;点击左侧的"调试"图标&#xff0c;然后点击顶部的齿轮图标&#xff0c;选择“launch.json”。 3&#xff0c;在"launch.json&qu…

深度学习笔记之BERT(五)TinyBERT

深度学习笔记之TinyBERT 引言回顾&#xff1a;DistilBERT模型TinyBERT模型结构TinyBERT模型策略Transformer层蒸馏嵌入层蒸馏预测层蒸馏 TinyBERT模型的训练效果展示 引言 上一节介绍了 DistilBERT \text{DistilBERT} DistilBERT模型&#xff0c;本节将继续介绍优化性更强的知…

正则表达式——参考视频B站《奇乐编程学院》

智能指针 一、背景&#x1f388;1.1. 模式匹配&#x1f388;1.2. 文本替换&#x1f388;1.3. 数据验证&#x1f388;1.4. 信息提取&#x1f388;1.5. 拆分字符串&#x1f388;1.6. 高级搜索功能 二、原料2.1 参考视频2.2 验证网址 三、用法3.1 限定符3.1.1 ?3.1.2 *3.1.3 3.1.…

appium学习之二:adb命令

1、查看设备 adb devices 2、连接 adb connect IP:端口 3、安装 adb install xxx.apk 4、卸载 adb uninstall 【包名】 5、把对应目录下的1.txt文件传到手机sdcard下 adb push 1.txt /sdcard 6、进入对应的设备里 adb shell 7、切入sdcard目录 cd /sdcard 8、ls 查…

Tablesaw封装Plot.ly实现数据可视化

上文介绍tablesaw的数据处理功能&#xff0c;本文向你展示其数据可视化功能&#xff0c;并通过几个常用图表示例进行说明。 Plot.ly包装 可视化是数据分析的重要组成部分&#xff0c;无论你只是“查看”新数据集还是验证机器学习算法的结果。Tablesaw是一个开源、高性能的Java…

Python实现中国象棋

探索中国象棋 Python 代码实现&#xff1a;从规则逻辑到游戏呈现 中国象棋&#xff0c;这款源远流长的棋类游戏&#xff0c;承载着深厚的文化底蕴与策略智慧。如今&#xff0c;借助 Python 与 Pygame 库&#xff0c;我们能够在数字世界中复刻其魅力&#xff0c;深入探究代码背后…

互联网、物联网的相关标准

互联网的相关标准 网络通信协议&#xff1a; HTTP&#xff08;Hypertext Transfer Protocol&#xff09;&#xff1a;用于在网络中传输文本、图像、音频和视频等数据的协议。它基于请求-响应模型&#xff0c;客户端发送请求给服务器&#xff0c;服务器返回响应。HTTPS&a…

学习Ajax (概述,应用场景,使用jQury 实现ajax)

目录 前言 概述 什么是Ajax? 同步交互与异步交互的区别是什么呢&#xff1f; 应用场景 场景1 在搜索框搜索 资源 场景2 登录业务的对用户名处理 AJAX的优缺点 优点&#xff1a; 缺点&#xff1a; 使用jQury 实现ajax 使用步骤 1 引入jQury 文件 2 使用Ajax 函数…

网迅通推出新一代智能家居拓展网关

Zigbee 型智能家居拓展网关 产品概述 A、概述 Zigbee 是一种短距离、低功耗的无线通信技术名称。其特点是近距离、低复杂度、低功耗、低数据速率、低成本。ZigBee 模块是一种物联网无线数据终端&#xff0c;利用 ZigBee 网络为用户提供无线数据传输功能。该产品采用高性能的…

ArcGIS字符串补零与去零

我们有时候需要 对属性表中字符串的补零与去零操作 我们下面直接视频教学 下面看视频教学 ArcGIS字符串去零与补零 推荐学习 ArcGIS全系列实战视频教程——9个单一课程组合 ArcGIS10.X入门实战视频教程&#xff08;GIS思维&#xff09; ArcGIS之模型构建器&#xff08;Mod…

NIFI使用

1 从Kafka接收消息&#xff0c;存储到数据库中。 &#xff08;1&#xff09; ConsumerKafka processor &#xff08;2&#xff09;Execute Scripts Processor 我这里是使用JS脚本进行处理。 还有很多其他语言的脚本。 var flowFile session.get(); if (flowFile ! null) {v…

linux系统使用nginx代理mysql数据库

##使用nginx代理mysql数据库 ##安装nginx ./configure --prefix/home/yym/nginx/nginx-install/ --with-http_addition_module --with-http_realip_module --with-stream make && make install ##nginx配置文件 stream { upstream mysqlserver { serv…

kubeadm安装K8s集群之高可用组件keepalived+nginx

系列文章目录 1.kubeadm安装K8s集群之基础环境配置 2.kubeadm安装K8s集群之高可用组件keepalivednginx 3.kubeadm安装K8s集群之master节点加入 4.kubeadm安装K8s集群之worker1节点加入 kubeadm安装K8s集群之高可用组件keepalivednginx 1.安装kubeadm、kubectl、kubelet2.安装高…

子网划分实例

看到有人问这个问题&#xff1a; 想了一下&#xff0c;这是一个子网划分的问题&#xff1a; 处理方法如图&#xff1a; 这是一个子网划分的问题 设备1用三层交换机&#xff0c;端口设置为路由模式&#xff0c;设备2和设备3为傻瓜交换机模式 设备2和设备3下挂设备都是26为掩码&…

【前端知识】微前端框架qiankun

微前端框架qiankun 简介一、核心思想二、主要特性三、关键技术四、使用场景五、使用示例六、优势与劣势七、总结 使用一、创建主应用&#xff08;Angular CLI项目&#xff09;二、创建子应用&#xff08;Vue CLI项目&#xff09;三、启动并测试 使用场景一、大型前端应用的拆分…

Ubuntu22.04深度学习环境安装【Anaconda+Pycharm】

anaconda可以提供多个独立的虚拟环境&#xff0c;方便我们学习深度学习&#xff08;比如复现论文&#xff09;&#xff1b; Pycharm编辑器可以高效的编写python代码&#xff0c;也是一个很不错的工具。 下面就记录下Ubuntu22.04的安装流程&#xff1a; 1.Anaconda安装 下载Ana…

Transformer图解

前言 transformer是目前NLP甚至是整个深度学习领域不能不提到的框架&#xff0c;同时大部分LLM也是使用其进行训练生成模型&#xff0c;所以transformer几乎是目前每一个机器人开发者或者人工智能开发者不能越过的一个框架。接下来本文将从顶层往下去一步步掀开transformer的面…