MHA部署

参考：http://www.cnblogs.com/gomysql/p/3675429.html

1.在所有节点安装MHA node所需的perl模块（DBD:mysql）：

yum install perl-DBD-MySQL -y

2.在所有的节点安装mha node：

1wget http://mysql-master-ha.googlecode.com/files/mha4mysql-node-0.53.tar.gz(http://ftp.debian.org/debian/pool/main/m/mha4mysql-node/mha4mysql-node_0.54.orig.tar.gz)
2tar xf mha4mysql-node-0.53.tar.gz
3cd mha4mysql-node-0.53
4perl Makefile.PL
5make && make install

执行  perl Makefile.PL  时报错： Can't locate CPAN.pm in @INC 

这是没有安装perl-CPAN造成的，解决方法： yum -y install perl-CPAN 

安装完成后会在/usr/local/bin目录下生成以下脚本文件：

1apply_diff_relay_logs           识别差异的中继日志事件并将其差异的事件应用于其他的slave
2filter_mysqlbinlog              去除不必要的ROLLBACK事件（MHA已不再使用这个工具）
3purge_relay_logs                清除中继日志（不会阻塞SQL线程）
4save_binary_logs                保存和复制master的二进制日志

3.安装MHA Manager

MHA Manager中主要包括了几个管理员的命令行工具，例如master_manger，master_master_switch等。MHA Manger也依赖于perl模块，具体如下：

• 安装MHA Node软件包之前需要安装依赖。这里使用yum完成，没有epel源的可以使用上面提到的脚本（epel源安装也简单）。注意：在MHA Manager的主机也是需要安装MHA Node。

  1yum install perl-DBD-MySQL perl-Config-Tiny perl-Log-Dispatch perl-Parallel-ForkManager perl-Time-HiRes -y
  2
  3wget http://ftp.debian.org/debian/pool/main/m/mha4mysql-manager/mha4mysql-manager_0.55.orig.tar.gz
  4tar zxvf mha4mysql-manager_0.55.orig.tar.gz
  5cd mha4mysql-manager-0.55
  6perl Makefile.PL
  7make && make install
  

• 安装完成后会在/usr/local/bin目录下面生成以下脚本

  1apply_diff_relay_logs           识别差异的中继日志事件并将其差异的事件应用于其他的slave
  2filter_mysqlbinlog              去除不必要的ROLLBACK事件（MHA已不再使用这个工具）
  3masterha_check_ssh              检查MHA的SSH配置状况
  4masterha_check_repl             检查MySQL复制状况
  5masterha_manger                 启动MHA
  6masterha_check_status           检测当前MHA运行状态
  7masterha_master_monitor         检测master是否宕机
  8masterha_master_switch          控制故障转移（自动或者手动）
  9masterha_conf_host              添加或删除配置的server信息
  10purge_relay_logs                清除中继日志（不会阻塞SQL线程）
  11save_binary_logs                保存和复制master的二进制日志
  

• 可选步骤，拷贝相关脚本。这些脚本不完整，需要自己修改，如果开启下面的任何一个脚本对应的参数，而对应这里的脚本又没有修改，则会抛错：

  cp ./samples/scripts/* /usr/local/bin/
  

4.配置SSH登录无密码验证

5.搭建主从复制环境

注意：binlog-do-db 和 replicate-ignore-db 设置必须相同。 MHA 在启动时候会检测过滤规则，如果过滤规则不同，MHA 不启动监控和故障转移。

• 备份主库

•   mysqldump -uroot -p --master-data=2 -A > /data/all.sql
  

• 在主库创建复制用户

  1grant replication slave on *.* to 'my-slave'@'%' identified by '123456';
  2flush privileges;
  

• 定位binlog

  head -n 30 all.sql | grep 'CHANGE MASTER TO'
  

• 将all.sql导入备机

• 开启备份

  1CHANGE MASTER TO MASTER_HOST='*.*.*.*',MASTER_USER='my-slave', MASTER_PASSWORD='123456',MASTER_LOG_FILE='mysql-bin.000010',MASTER_LOG_POS=112;
  2start slave;
  

• 手动设置read-only

  mysql -uroot -p -e 'set global read_only=1'
  

• 添加监控账户

  1grant all on *.* to 'root'@'%' IDENTIFIED by '123456'
  2flush privileges
  

6.配置MHA

• 拷贝配置文件

• 1  mkdir -p /etc/masterha
  2  cp mha4mysql-manager-0.55/samples/conf/app1.cnf /etc/masterha/
  

• 修改配置文件/etc/masterha/app1.cnf，将注释删掉

• 1  [server default]
  2  manager_workdir=/var/log/masterha              //设置manager的工作目录
  3  manager_log=/var/log/masterha/app1/manager.log          //设置manager的日志
  4  master_binlog_dir=/data/mysql                         //设置master 保存binlog的位置，以便MHA可以找到master的日志，我这里的也就是mysql的数据目录
  5  master_ip_failover_script= /usr/local/bin/master_ip_failover    //设置自动failover时候的切换脚本
  6  master_ip_online_change_script= /usr/local/bin/master_ip_online_change  //设置手动切换时候的切换脚本
  7  password=123456         //设置mysql中root用户的密码，这个密码是前文中创建监控用户的那个密码
  8  user=root               设置监控用户root
  9  ping_interval=1         //设置监控主库，发送ping包的时间间隔，默认是3秒，尝试三次没有回应的时候自动进行railover
  10  remote_workdir=/tmp     //设置远端mysql在发生切换时binlog的保存位置
  11  repl_password=123456    //设置复制用户的密码
  12  repl_user=repl          //设置复制环境中的复制用户名
  13  report_script=/usr/local/send_report    //设置发生切换后发送的报警的脚本
  14  secondary_check_script= /usr/local/bin/masterha_secondary_check -s server03 -s server02            
  15  shutdown_script=""      //设置故障发生后关闭故障主机脚本（该脚本的主要作用是关闭主机放在发生脑裂,这里没有使用）
  16  ssh_user=root           //设置ssh的登录用户名
  17  
  18  [server1]
  19  hostname=192.168.0.50
  20  port=3306
  21  
  22  [server2]
  23  hostname=192.168.0.60
  24  port=3306
  25  candidate_master=1   //设置为候选master，如果设置该参数以后，发生主从切换以后将会将此从库提升为主库，即使这个主库不是集群中事件最新的slave
  26  check_repl_delay=0   //默认情况下如果一个slave落后master 100M的relay logs的话，MHA将不会选择该slave作为一个新的master，因为对于这个slave的恢复需要花费很长时间，通过设置check_repl_delay=0,MHA触发切换在选择一个新的master的时候将会忽略复制延时，这个参数对于设置了candidate_master=1的主机非常有用，因为这个候选主在切换的过程中一定是新的master
  27  
  28  [server3]
  29  hostname=192.168.0.70
  30  port=3306
  

• 注：这里有个坑，就是secondary_check_script，完全不知道这个脚本干嘛的，然后还报错说不认识server03和server02，改成server3和server2也没用，索性将它注释了，一切太平

• 在每个slave节点上设置relay log的清除方式

  mysql -uroot -p -e 'set global relay_log_purge=0'
  

• 创建purge_relay_log.sh脚本

  1#!/bin/bash
  2user=root
  3passwd=123456
  4port=3306
  5log_dir='/data/masterha/log'
  6work_dir='/data'
  7purge='/usr/local/bin/purge_relay_logs'
  8
  9if [ ! -d $log_dir ]
  10then
  11   mkdir $log_dir -p
  12fi
  13
  14$purge --user=$user --password=$passwd --disable_relay_log_purge --port=$port --workdir=$work_dir >> $log_dir/purge_relay_logs.log 2>&1
  

• crontab里添加

  0 4 * * * /bin/bash /root/purge_relay_log.sh
  

 7.检查SSH配置

masterha_check_ssh --conf=/etc/masterha/app1.cnf

8.检查复制状况(确保主库没有slave信息,否则会报错)

需注释掉 master_ip_failover_script= /usr/local/bin/master_ip_failover ,等到编辑了master_ip_failover脚本以后再开启

masterha_check_repl --conf=/etc/masterha/app1.cnf

如果报mysqlbinlong version not found

1ln -s {mysql_home}/bin/mysqlbinlog /usr/local/bin/mysqlbinlog
2ln -s {mysql_home}/bin/mysql /usr/local/bin/mysql

我这边还报了个unknown variable 'default-character-set=utf8mb4',解决方法:修改my.cnf

#default-character-set=utf8mb4loose-default-character-set=utf8mb4

9.开启MHA Manager监控

nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &

启动参数介绍：

--remove_dead_master_conf      该参数代表当发生主从切换后，老的主库的ip将会从配置文件中移除。

--manger_log                            日志存放位置

--ignore_last_failover                 在缺省情况下，如果MHA检测到连续发生宕机，且两次宕机间隔不足8小时的话，则不会进行Failover，之所以这样限制是为了避免ping-pong效应。该参数代表忽略上次MHA触发切换产生的文件，默认情况下，MHA发生切换后会在日志目录，也就是上面我设置的/data产生app1.failover.complete文件，下次再次切换的时候如果发现该目录下存在该文件将不允许触发切换，除非在第一次切换后收到删除该文件，为了方便，这里设置为--ignore_last_failover。

关闭命令: masterha_stop --conf=/etc/masterha/app1.cnf 

10.检查MHA Manager的状态

masterha_check_status --conf=/etc/masterha/app1.cnf

华丽的分割线,做到这就不做了,因为用不了VIP.......

11.配置虚拟ip

• 安装keepalived(主库,备选主库)

  1wget http://www.keepalived.org/software/keepalived-1.2.12.tar.gz
  2tar zxvf keepalived-1.2.12.tar.gz           
  3cd keepalived-1.2.12
  4./configure --prefix=/usr/local/keepalived
  5make &&  make installmkdir /etc/keepalivedcp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/cp /usr/local/keepalived/sbin/keepalived /usr/sbin/
  

• 在主库上配置keepalived

  1global_defs {
  2     notification_email {
  3     saltstack@163.com
  4   }
  5   notification_email_from dba@dbserver.com
  6   smtp_server 127.0.0.1
  7   smtp_connect_timeout 30
  8   router_id MySQL-HA
  9}
  10
  11vrrp_instance VI_1 {
  12    state BACKUP
  13    interface eth1
  14    virtual_router_id 51
  15    priority 150
  16    advert_int 1
  17    nopreempt
  18
  19    authentication {
  20    auth_type PASS
  21    auth_pass 1111
  22    }
  23
  24    virtual_ipaddress {
  25        192.168.0.88
  26    }
  27}
  

• 在备选主库上配置keepalived

  1global_defs {
  2     notification_email {
  3     saltstack@163.com
  4   }
  5   notification_email_from dba@dbserver.com
  6   smtp_server 127.0.0.1
  7   smtp_connect_timeout 30
  8   router_id MySQL-HA
  9}
  10
  11vrrp_instance VI_1 {
  12    state BACKUP
  13    interface eth1
  14    virtual_router_id 51
  15    priority 120
  16    advert_int 1
  17    nopreempt
  18
  19    authentication {
  20    auth_type PASS
  21    auth_pass 1111
  22    }
  23
  24    virtual_ipaddress {
  25        192.168.0.88
  26    }
  27}
  

• 启动keepalive

  service keepalived start
  

• MHA引入keepalived

  1#!/usr/bin/env perl
  2
  3use strict;
  4use warnings FATAL => 'all';
  5
  6use Getopt::Long;
  7
  8my (
  9    $command,          $ssh_user,        $orig_master_host, $orig_master_ip,
  10    $orig_master_port, $new_master_host, $new_master_ip,    $new_master_port
  11);
  12
  13my $vip = '192.168.0.88';
  14my $ssh_start_vip = "service keepalived start";
  15my $ssh_stop_vip = "service keepalived stop";
  16
  17GetOptions(
  18    'command=s'          => \$command,
  19    'ssh_user=s'         => \$ssh_user,
  20    'orig_master_host=s' => \$orig_master_host,
  21    'orig_master_ip=s'   => \$orig_master_ip,
  22    'orig_master_port=i' => \$orig_master_port,
  23    'new_master_host=s'  => \$new_master_host,
  24    'new_master_ip=s'    => \$new_master_ip,
  25    'new_master_port=i'  => \$new_master_port,
  26);
  27
  28exit &main();
  29
  30sub main {
  31
  32    print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n";
  33
  34    if ( $command eq "stop" || $command eq "stopssh" ) {
  35
  36        my $exit_code = 1;
  37        eval {
  38            print "Disabling the VIP on old master: $orig_master_host \n";
  39            &stop_vip();
  40            $exit_code = 0;
  41        };
  42        if ($@) {
  43            warn "Got Error: $@\n";
  44            exit $exit_code;
  45        }
  46        exit $exit_code;
  47    }
  48    elsif ( $command eq "start" ) {
  49
  50        my $exit_code = 10;
  51        eval {
  52            print "Enabling the VIP - $vip on the new master - $new_master_host \n";
  53            &start_vip();
  54            $exit_code = 0;
  55        };
  56        if ($@) {
  57            warn $@;
  58            exit $exit_code;
  59        }
  60        exit $exit_code;
  61    }
  62    elsif ( $command eq "status" ) {
  63        print "Checking the Status of the script.. OK \n";
  64        #`ssh $ssh_user\@cluster1 \" $ssh_start_vip \"`;
  65        exit 0;
  66    }
  67    else {
  68        &usage();
  69        exit 1;
  70    }
  71}
  72
  73# A simple system call that enable the VIP on the new master
  74sub start_vip() {
  75    `ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`;
  76}
  77# A simple system call that disable the VIP on the old_master
  78sub stop_vip() {
  79     return 0  unless  ($ssh_user);
  80    `ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`;
  81}
  82
  83sub usage {
  84    print
  85    "Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
  86}
  

• 再次检查集群状态

  masterha_check_repl --conf=/etc/masterha/app1.cnf