Mysql 迁移流程
核心原则，不能影响线上的服务
原 mysql 开启 binlog
配置 my.cnf
server-id = 11
log_bin = mysql-bin
binlog-format = mixed
添加同步用户
create user 'repl'@'%' IDENTIFIED BY 'lper';
grant replication client,replication slave on *.* to repl@'%';
使用 xtrabackup 在线备份 mysql
安装 percona-xtrabackup，备份
yum install percona-xtrabackup-24
innobackupex --slave-info --user="root" --password="toor" --host="127.0.0.1" --no-timestamp ./backup
安装一台新的mysql服务器，利用备份恢复数据
应用日志
innobackupex --apply-log backup
拷贝恢复数据
innobackupex --copy-back ./backup
恢复权限
chown -R mysql:mysql /var/lib/mysql
把(原)mysql作为(master)，新(mysql)做(slave)实现主从同步
配置 my.cnf
略 ... ...
reset slave;
change master to master_host='192.168.1.11',\
master_user='repl',master_password='lper',\
master_log_file="mysql-bin.000001", master_log_pos=607;
start slave;
在 mysql master 上执行
use mysql
update user set Host='%' where User="root";
flush privileges;
切换流程
停止原 mysql
吧新的 mysql 升级成 master
stop slave;
reset slave;
reset master;
修改 php 脚本，使用新的 mysql 服务
搭建 mysql 集群
搭建 1 主 2 从
增加 1 半同步复制 slave
半同步复制配置
#------------------semi sync master-----------------#
查看 mysql 插件
show plugins;
安装半同步插件
install plugin rpl_semi_sync_master soname 'semisync_master.so';
开启半同步
set global rpl_semi_sync_master_enabled=1;
等待超时时间
设置此参数值（ms）,为了防止半同步复制在没有收到确认的情况下发生堵塞，如果Master在超时之前没有收到任何确认，将恢复到正常的异步复制，并继续执行没有半同步的复制操作。
set global rpl_semi_sync_master_timeout=1000;
查看状态
show global variables like '%rpl_semi%';
show global status like '%rpl_semi%';
#------------------semi sync slave-----------------#
查看 mysql 插件
show plugins;
安装半同步插件
install plugin rpl_semi_sync_slave soname 'semisync_slave.so';
开启半同步
set global rpl_semi_sync_slave_enabled=1;
查看状态
show global variables like '%rpl_semi%';
重启 IO 线程
stop slave io_thread;
start slave io_thread;
#----------------------my.cnf ---------------------#
plugin-load = "rpl_semi_sync_master=semisync_master.so;rpl_semi_sync_slave=semisync_slave.so"
rpl_semi_sync_slave_enabled = 1
rpl_semi_sync_master_enabled = 1
rpl_semi_sync_master_timeout = 3000
#----------------------mha node--------------------#
安装 mha node 节点包
yum install -y perl-ExtUtils-MakeMaker perl-CPAN perl-DBD-MySQL
安装 mha4mysql-node
perl Makefile.PL
make
make install
#--------------------mha manager-------------------#
# mha 官方网站 https://github.com/yoshinorim/mha4mysql-manager/wiki/Downloads
安装 mha node 节点包
yum install -y perl-ExtUtils-MakeMaker perl-CPAN perl-DBD-MySQL
安装 mha4mysql-node
perl Makefile.PL
make
make install
安装 mha manager 节点
安装依赖软件包
yum install -y perl-Config-Tiny perl-Log-Dispatch perl-Parallel-ForkManager perl-Time-HiRes
安装 mha 管理节点
perl Makefile.PL
[Core Features]
- DBI ...loaded. (1.627)
- DBD::mysql ...loaded. (4.023)
- Time::HiRes ...loaded. (1.9725)
- Config::Tiny ...loaded. (2.14)
- Log::Dispatch ...loaded. (2.41)
- Parallel::ForkManager ...loaded. (1.18)
- MHA::NodeConst ...loaded. (0.56)
*** Module::AutoInstall configuration finished.
Checking if your kit is complete...
Looks good
make
make install
mha 是依靠 ssh 远程配置管理 mysql 服务器的，所以要求管理节点机器到所有 mysql机器能做到 ssh 免密码登录
/etc/ssh/ssh_config 配置不校验 host key，不输人 yes
StrictHostKeyChecking no
cd /root/.ssh
ssh-keygen -t rsa -b 2048 -N '' -f id_rsa
把私钥 id_rsa 拷贝给所有 mysql 主机
mha 切换 vip 是靠脚本实现，vim 编辑脚本 master_ip_failover 设置 vip
（line:35）
my $vip = '192.168.1.10/24'; # Virtual IP
cp master_ip_failover /usr/local/bin/
chmod 755 /usr/local/bin/master_ip_failover
添加 默认配置文件 /etc/masterha_default.cnf 和 /etc/mha.cnf 配置文件
touch /etc/masterha_default.cnf
cat /etc/mha.cnf
[server default]
manager_log=/var/log/mha.log
manager_workdir=/var/lib/mha
user=root
password=toor
repl_user=repl
repl_password=lper
ssh_user=root
ping_interval=1
remote_workdir=/var/lib/mha
master_ip_failover_script=/usr/local/bin/master_ip_failover
[server12]
candidate_master=1
hostname=mysql12
[server15]
candidate_master=1
hostname=mysql15
[server13]
hostname=mysql13
no_master=1
[server14]
hostname=mysql14
no_master=1
在当前的 master 上手工绑定 vip 执行检查测试
检查 ssh 免密码登录
masterha_check_ssh --conf=/etc/mha.cnf
检查 mysql 主从配置
masterha_check_repl --conf=/etc/mha.cnf
添加参数 relay_log_purge=0
启动 mha
masterha_manager --conf=/etc/mha.cnf --ignore_last_failover
验证测试
--remove_dead_master_conf 该参数代表当发生主从切换后，老的主库的ip将会从配置文件中移除。
--manger_log 日志存放位置
--ignore_last_failover 在缺省情况下，如果MHA检测到连续发生宕机>，且两次宕机间隔不足8小时的话，则不会进行Failover，之所以这样限制是为了
避免ping-pong效应。该参数代表忽略上次MHA触发切换产生的文件，默认情况下>，MHA发生切换后会在日志目录，也就是上面我设置的/data产生app1.failover.complete文件，下次再次切换的时候如果发现该目录下存在该文件将不允许触发切
换，除非在第一次切换后收到删除该文件，为了方便，这里设置为--ignore_last_failover。
#--------------------- mycat --------------------#
创建一个用于查询的用户
create user 'read'@'%' IDENTIFIED BY 'daer';
grant select on *.* to 'read'@'%';
在机器上安装 java-1.8.0-openjdk-devel
拷贝 mycat 到 /usr/local/
配置 /usr/local/mycat/conf/server.xml
82: <property name="schemas">mydb</property>
97: <property name="schemas">mydb</property>
配置 /usr/local/mycat/conf/schema.xml
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
<schema name="mydb" checkSQLschema="false" sqlMaxLimit="100" dataNode="dn1">
</schema>
<dataNode dataHost="localhost1" database="mydb" name="dn1"/>
<dataHost name="localhost1" maxCon="1000" minCon="10" balance="3" writeType="0"
dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<!-- can have multi write hosts -->
<writeHost host="hostMaster" url="192.168.1.50:3306"user="root" password="toor">
<!-- can have multi read hosts -->
<readHost host="hostS2" url="mysql12:3306" user="read" password="daer" />
<readHost host="hostS2" url="mysql13:3306" user="read" password="daer" />
<readHost host="hostS2" url="mysql14:3306" user="read" password="daer" />
<readHost host="hostS2" url="mysql15:3306" user="read" password="daer" />
</writeHost>
</dataHost>
</mycat:schema>
启动 mycat ,验证测试
/usr/local/mycat/bin/mycat start
配置文件注意事项:
conf/server.xml 可以不修改，但要注意
<property name="schemas">TESTDB</property>
虚拟库名称，要和后面对应
schemas是这个用户下的逻辑数据库可以有多个逻辑数据库可以用“,”逗号隔开 用户名和密码是连接 mycat 的用户名和密码，与 mysql 实例的用户名密码无关 mycat默认的普通连接端口是8066，管理连接端口是9066 schema：逻辑数据库 dataNode：节点
dataHost：节点对应的读库写库的地址和连接
balance指的负载均衡类型，目前的取值有4种：
balance="0", 不开启读写分离机制，所有读操作都发送到当前可用的writeHost上。
balance="1"，全部的readHost与stand by writeHost参与select语句的负载均衡
balance="2"，所有读操作都随机的在writeHost、readhost上分发。
balance="3"，所有读请求随机的分发到wiriterHost对应的readhost执行，writerHost不负担读压力
switchType指的是切换的模式，目前的取值也有4种：
switchType='-1' 表示不自动切换
switchType='1' 默认值，表示自动切换
switchType='2' 基于MySQL主从同步的状态决定是否切换,心跳语句为 show slavestatus
switchType='3' 基于MySQL galary cluster的切换机制（适合集群）（1.4.1），心跳语句为 show status like 'wsrep%'
WriteType参数设置：
writeType=“0”, 所有写操作都发送到可用的writeHost上。
writeType=“1”，所有写操作都随机的发送到readHost。
writeType=“2”，所有写操作都随机的在writeHost、readhost分上发。
配置完成以后连接 mycat 查询
mysql -uroot -p123456 -h192.168.4.20 -P 8066 -e 'select @@hostname;'
多查询几次，可以看到轮询效果
第二台 mycat
安装 java-1.8.0-openjdk-devel
拷贝 /usr/local/mycat 到本机相同目录，启动服务即可
#--------------- haproxy keepalived--------------#
yum 安装 haproxy
修改 /etc/haproxy/haproxy.cfg
listen mycat_3306 *:3306
mode tcp # mysql 得使用 tcp 协议
option tcpka # 使用长连接
balance leastconn # 最小连接调度算法
server mycat_01 192.168.1.13:8066 check inter 3000 rise 1 maxconn 1000 fall 3
server mycat_02 192.168.1.14:8066 check inter 3000 rise 1 maxconn 1000 fall 3
启动服务
可以在服务器上使用 ss -atn|grep "ESTAB.*8066" 查看后端和哪台服务建立连接了
为防止 haproxy 单点故障，配置两台 haproxy 使用 keepalived 实现高可用
第二台 haproxy 配置同第一台
keepalived 配置
yum 安装 keepalived
修改配置文件 keepalived.conf
! Configuration File for keepalived
global_defs {
router_id mycat
}
vrrp_script chk_haproxy {
script "killall -0 haproxy" # cheaper than pidof
interval 2 # check every 2 seconds
}
vrrp_instance Mycat {
state BACKUP
interface eth0
track_interface {
eth0
}
virtual_router_id 150
priority 200
! nopreempt
advert_int 2
authentication {
auth_type PASS
auth_pass test_mycat
}
virtual_ipaddress {
192.168.1.100/24 brd 192.168.1.255 dev eth0 label eth0:1
}
track_script {
chk_haproxy weight=0 # +2 if process is present
}
}
