• Mysql MHA

    MHA概述

    MHA(MasterHigh Availability)
    基于主库的高可用环境下，可以实现主从复制、故障切换； 主从的架构，最少需要一主两从。

    作用
    解决Mysql的单点故障问题，一旦主库崩溃，MHA可以在0-30s内自动完成故障切换。

    原理
    MHA使用的是半同步复制，只要有一台从服务器写入数据，就会自动提交给客户端，
    如果master崩溃，slave就会从主的二进制日志保存文件，
    并且会识别最新更新的日志，差异部分会同步到slave，
    将一个新的slave提升为master，其他的slave继续和新的master同步。

    搭建Mysql MHA

    1. 实验配置：
    2. 20.0.0.10：MHA manager
    3. 20.0.0.81：master
    4. 20.0.0.82：salve1
    5. 20.0.0.83：salve2
    6. node组件-->需要部署在所有服务器上(manager组件依赖于node组件，node组件监控mysql的状态)
    7. node组件靠ssh来进行通信

    1.修改主机名

    1. 81：
    2. hostnamectl set-hostname Master
    3. su
    4.  
    5. 82：
    6. hostnamectl set-hostname Slave1
    7. su
    8.  
    9. 83：
    10. hostnamectl set-hostname Slave2
    11. su

    2.修改Master的Mysql配置文件

    1. 81：
    2. vim /etc/my.cnf
    3. --
    4. server-id = 1
    5. log_bin = master-bin
    6. log-slave-updates = true
    7. --
    8. systemctl restart mysqld

    3.修改Slave的Mysql配置文件

    1. 82：
    2. vim /etc/my.cnf
    3. --
    4. server-id = 2  #三台服务器的 server-id 不能一样
    5. log_bin = master-bin
    6. relay-log = relay-log-bin
    7. relay-log-index = slave-relay-bin.index
    8. --
    9. systemctl restart mysqld
    1. 83：
    2. vim /etc/my.cnf
    3. --
    4. server-id = 3  #三台服务器的 server-id 不能一样
    5. relay-log = relay-log-bin
    6. relay-log-index = slave-relay-bin.index
    7. --
    8. systemctl restart mysqld

    4.三个节点创建软链接

    1. ln -s /usr/local/mysql/bin/mysql /usr/sbin/
    2. ln -s /usr/local/mysql/bin/mysqlbinlog /usr/sbin/

    5.配置Mysql一主两从

    1. //所有数据库节点进行mysql授权
    2. mysql -uroot -p123456
    3.  
    4. #从数据库同步使用
    5. grant replication slave on *.* to 'myslave'@'20.0.0.%' identified by '123456';	
    6. 	
    7. #manager 使用
    8. grant all privileges on *.* to 'mha'@'20.0.0.%' identified by 'manager';		
    9.  
    10. #防止从库通过主机名连接不上主库
    11. grant all privileges on *.* to 'mha'@'master' identified by 'manager';				
    12. grant all privileges on *.* to 'mha'@'slave1' identified by 'manager';
    13. grant all privileges on *.* to 'mha'@'slave2' identified by 'manager';
    14. flush privileges;
    15.  
    16. //在Master节点查看二进制文件和同步点
    17. show master status;

    1. //在Slave1、Slave2节点执行同步操作
    2. change master to master_host='20.0.0.81',master_user='myslave',master_password='123456',master_log_file='master-bin.000001',master_log_pos=1737; 
    3. start slave;
    4.  
    5. //在Slave1、Slave2节点查看数据同步结果
    6. show slave status\G;

    1. //两个从库必须设置为只读模式
    2. set global read_only=1;
    3.  
    4. //在Master主库新建库，测试是否同步
    5. create database test_db;

    6.安装MHA软件

    1. //所有服务器上都安装MHA依赖的环境，首先安装epel源
    2. yum install epel-release --nogpgcheck -y
    3. yum install -y perl-DBD-MySQL \
    4. perl-Config-Tiny \
    5. perl-Log-Dispatch \
    6. perl-Parallel-ForkManager \
    7. perl-ExtUtils-CBuilder \
    8. perl-ExtUtils-MakeMaker \
    9. perl-CPAN
    10.  
    11. //安装MHA软件包，先在所有服务器上安装node组件
    12. cd /opt
    13. --拖入node包--
    14. tar zxvf mha4mysql-node-0.57.tar.gz
    15. cd mha4mysql-node-0.57
    16. perl Makefile.PL
    17. make && make install
    18.  
    19. //在MHA manager节点上安装manager组件
    20. cd /opt
    21. --拖入manager包--
    22. tar zxvf mha4mysql-manager-0.57.tar.gz
    23. cd mha4mysql-manager-0.57
    24. perl Makefile.PL
    25. make && make install
    1. //manager组件安装后在/usr/local/bin下面会生成几个工具，主要包括以下：
    2. masterha_check_ssh：检测MHA的ssh的配置情况
    3. masterha_check_repl：检测Mysql的复制情况
    4. masterha_manager：启动manager的脚本
    5. masterha_check_status：检测MHA的运行状态
    6. masterha_master_monitor：检测master主机的情况(是否宕机)
    7. masterha_master_switch：控制故障转移
    8. masterha_conf_host：添加或者删除配置的server信息
    9. masterha_stop：停止MHA的脚本
    10.  
    11. //node组件安装后也会在/usr/local/bin下面会生成几个脚本
    12. save_binary_logs：保存和复制master的二进制日志
    13. apply_diff_relay_logs：识别二进制日志当中的差异事件，然后发送给其他的slave
    14. filter_mysqlbinlog：去除不必要的回滚事件(MHA已经不用)
    15. purge_relay_logs：同步之后清除中继日志(不会阻塞sql的限制)

    7.所有服务器配置免密认证

    1. //在manager节点上配置到所有数据库节点的无密码认证
    2. ssh-keygen -t rsa  #一路按回车键
    3. ssh-copy-id 20.0.0.81
    4. ssh-copy-id 20.0.0.82
    5. ssh-copy-id 20.0.0.83
    6.  
    7. //在master上配置到数据库节点 slave1 和 slave2 的无密码认证
    8. ssh-keygen -t rsa
    9. ssh-copy-id 20.0.0.82
    10. ssh-copy-id 20.0.0.83
    11.  
    12. //在slave1上配置到数据库节点 master 和 slave2 的无密码认证
    13. ssh-keygen -t rsa
    14. ssh-copy-id 20.0.0.81
    15. ssh-copy-id 20.0.0.83
    16.  
    17. //在slave2上配置到数据库节点 master 和 slave1 的无密码认证
    18. ssh-keygen -t rsa
    19. ssh-copy-id 20.0.0.81
    20. ssh-copy-id 20.0.0.82

    8.在manager节点上配置MHA

    1. //在 manager 节点上复制相关脚本到/usr/local/bin 目录
    2. cp -rp /opt/mha4mysql-manager-0.57/samples/scripts /usr/local/bin
    3.  
    4. #拷贝后会有四个执行文件
    5. cd /usr/local/bin/scripts/
    6. ll
    7. master_ip_failover  		自动切换时 VIP 管理的脚本
    8. master_ip_online_change 	在线切换时 vip 的管理
    9. power_manager 				故障发生后关闭主机的脚本
    10. send_report 				因故障切换后发送报警的脚本
    11.  
    12. //复制上述的自动切换时VIP管理的脚本到/usr/local/bin目录，
    13. 这里使用master_ip_failover脚本来管理VIP和故障切换
    14. cp /usr/local/bin/scripts/master_ip_failover /usr/local/bin
    15.  
    16. //修改内容
    17. vim /usr/local/bin/master_ip_failover
    18. --
    19. #!/usr/bin/env perl
    20. use strict;
    21. use warnings FATAL => 'all';
    22.  
    23. use Getopt::Long;
    24. my (
    25. $command, $ssh_user, $orig_master_host, $orig_master_ip,
    26. $orig_master_port, $new_master_host, $new_master_ip, $new_master_port
    27. );
    28. my $vip = '20.0.0.100';
    29. my $brdc = '20.0.0.255';
    30. my $ifdev = 'ens33';
    31. my $key = '1';
    32. my $ssh_start_vip = "/sbin/ifconfig ens33:$key $vip";
    33. my $ssh_stop_vip = "/sbin/ifconfig ens33:$key down";
    34. my $exit_code = 0;
    35. GetOptions(
    36. 'command=s' => \$command,
    37. 'ssh_user=s' => \$ssh_user,
    38. 'orig_master_host=s' => \$orig_master_host,
    39. 'orig_master_ip=s' => \$orig_master_ip,
    40. 'orig_master_port=i' => \$orig_master_port,
    41. 'new_master_host=s' => \$new_master_host,
    42. 'new_master_ip=s' => \$new_master_ip,
    43. 'new_master_port=i' => \$new_master_port,
    44. );
    45.  
    46. exit &main();
    47.  
    48. sub main {
    49. print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n";
    50. if ( $command eq "stop" || $command eq "stopssh" ) {
    51. my $exit_code = 1;
    52. eval {
    53. print "Disabling the VIP on old master: $orig_master_host \n";
    54. &stop_vip();
    55. $exit_code = 0;
    56. };
    57. if ($@) {
    58. warn "Got Error: $@\n";
    59. exit $exit_code;
    60. }
    61. exit $exit_code;
    62. }
    63. elsif ( $command eq "start" ) {
    64. my $exit_code = 10;
    65. eval {
    66. print "Enabling the VIP - $vip on the new master - $new_master_host \n";
    67. &start_vip();
    68. $exit_code = 0;
    69. };
    70. if ($@) {
    71. warn $@;
    72. exit $exit_code;
    73. }
    74. exit $exit_code;
    75. }
    76. elsif ( $command eq "status" ) {
    77. print "Checking the Status of the script.. OK \n";
    78. exit 0;
    79. }
    80. else {
    81. &usage();
    82. exit 1;
    83. }
    84. }
    85. sub start_vip() {
    86. `ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`;
    87. }
    88. ### A simple system call that disable the VIP on the old_master
    89. sub stop_vip() {
    90. `ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`;
    91. }
    92.  
    93. sub usage {
    94. print
    95. "Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
    96. }
    97. --
    98.  
    99. //创建 MHA 软件目录并拷贝配置文件，这里使用app1.cnf配置文件来管理 mysql 节点服务器
    100. mkdir /etc/masterha
    101. cp /opt/mha4mysql-manager-0.57/samples/conf/app1.cnf /etc/masterha
    102. vim /etc/masterha/app1.cnf	
    103. --
    104. [server default]
    105. manager_log=/var/log/masterha/app1/manager.log
    106. manager_workdir=/var/log/masterha/app1
    107. master_binlog_dir=/usr/local/mysql/data
    108. master_ip_failover_script=/usr/local/bin/master_ip_failover
    109. master_ip_online_change_script=/usr/local/bin/master_ip_online_change
    110. password=manager
    111. ping_interval=1
    112. remote_workdir=/tmp
    113. repl_password=123456
    114. repl_user=myslave
    115. secondary_check_script=/usr/local/bin/masterha_secondary_check -s 20.0.0.82 -s 20.0.0.83
    116. #从对主监听
    117. shutdown_script=""
    118. ssh_user=root
    119. user=mha
    120.  
    121. [server1]
    122. hostname=20.0.0.81
    123. #主服务器
    124. port=3306
    125.  
    126. [server2]
    127. candidate_master=1   
    128. check_repl_delay=0
    129. hostname=20.0.0.82
    130. #备用主服务器
    131. port=3306
    132.  
    133. [server3]
    134. hostname=20.0.0.83
    135. #从服务器2
    136. port=3306
    137. --

    9.在Master节点上手动开启虚拟IP

    1. 81:
    2. /sbin/ifconfig ens33:1 20.0.0.100/24

    10.在manager节点上测试ssh无密码认证

    1. 10：
    2. masterha_check_ssh -conf=/etc/masterha/app1.cnf

    11.在manager节点上测试mysql主从连接情况

    1. 10：
    2. masterha_check_repl -conf=/etc/masterha/app1.cnf

    12.在manager节点上启动MHA

    1. 10：
    2. nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &

    13.查看MHA状态

    1. 10：
    2. masterha_check_status --conf=/etc/masterha/app1.cnf

    14.查看MHA日志

    1. 10：
    2. cat /var/log/masterha/app1/manager.log | grep "current master"

    15.查看Master的VIP地址是否存在

    1. 81：
    2. ifconfig

    故障模拟

    1. //在manager节点上监控观察日志记录
    2. tail -f /var/log/masterha/app1/manager.log
    3.  
    4. //在Master节点master上停止mysql服务
    5. systemctl stop mysqld

    故障修复

    1.修改Master的Mysql配置文件

    1. 81：
    2. vim /etc/my.cnf
    3. --
    4. log_bin = master-bin
    5. relay-log = relay-log-bin
    6. relay-log-index = slave-relay-bin.index
    7. --
    8. systemctl restart mysqld.service

    2.修改Slave1的Mysql配置文件

    1. 82：
    2. vim /etc/my.cnf
    3. --
    4. log_bin = master-bin
    5. log-slave-updates = true
    6. --
    7. systemctl restart mysqld.service

    3.关闭manager服务并修改配置文件

    1. 10：
    2. masterha_stop --conf=/etc/masterha/app1.cnf
    3. vim /etc/masterha/app1.cnf
    4. --
    5. [server default]
    6. manager_log=/var/log/masterha/app1/manager.log
    7. manager_workdir=/var/log/masterha/app1
    8. master_binlog_dir=/usr/local/mysql/data
    9. master_ip_failover_script=/usr/local/bin/master_ip_failover
    10. master_ip_online_change_script=/usr/local/bin/master_ip_online_change
    11. password=manager
    12. ping_interval=1
    13. remote_workdir=/tmp
    14. repl_password=123
    15. repl_user=myslave
    16. secondary_check_script=/usr/local/bin/masterha_secondary_check -s 20.0.0.81 -s 20.0.0.83
    17. shutdown_script=""
    18. ssh_user=root
    19. user=mha
    20. [server1]
    21. hostname=20.0.0.82
    22. port=3306
    23. [server2]
    24. candidate_master=1
    25. check_repl_delay=0
    26. hostname=20.0.0.81
    27. port=3306
    28. [server3]
    29. hostname=20.0.0.83
    30. port=3306
    31. --

    4.在manager节点上启动MHA

    1. 10：
    2. nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &

    5.配置主从复制

    1. 82：
    2. mysql -u root -p123456
    3. show master status;

    1. 81：
    2. mysql -u root -p123456
    3. stop slave;
    4. change master to master_host='20.0.0.82',master_user='myslave',master_password='123456',master_log_file='master-bin.000003',master_log_pos=154;
    5. reset slave;
    6. start slave;

    6.测试

    1. 82(新主)：
    2. create database test1_db;

  • 相关阅读:
    关于青语言语法设计的讨论
    初识网页与浏览器
    高德地图使用自定义地图无效问题
    centos 7安装podman(类似docker)
    视频拉流推流技术梳理
    ElasticSearch - () Python操作es
    GDPU 数据结构 天码行空4
    git的使用规范及技巧总结
    AI与Prompt：解锁软件开发团队的魔法咒语，在复杂任务上生成正确率更高的代码
    可解释人工智能（XAI）
  • 原文地址：https://blog.csdn.net/pupcarrot/article/details/134400769