MYSQL relay_logs 日志清理

     情景

      MySQL数据库主从复制在缺省情况下从库的relay logs会在SQL线程执行完毕后被自动删除,(默认relay_log_purge=1)但是对于MHA场景下,对于某些滞后从库的恢复依赖于其他从库的relay log,因此采取禁用自动删除功能以及定期清理的办法,从而避免对于清理过多过大的relay log需要注意引起的复制延迟资源开销等。MHA可通过purge_relay_logs脚本及配合cronjob来完成此项任务,具体描述如下:

1、purge_relay_logs的功能
  a、为relay日志创建硬链接(最小化批量删除大文件导致的性能问题)
  b、SET GLOBAL relay_log_purge=1; FLUSH LOGS; SET GLOBAL relay_log_purge=0;
  c、删除relay log(rm –f  /path/to/archive_dir/*)

2、purge_relay_logs的用法及相关参数
###用法
# purge_relay_logs --help
Usage:
purge_relay_logs --user=root --password=rootpass --host=127.0.0.1
###参数描述
--user mysql            用户名,缺省为root
--password mysql          密码
--port                 端口号
--host                 主机名,缺省为127.0.0.1
--workdir               指定创建relay log的硬链接的位置,默认是/var/tmp,成功执行脚本后,硬链接的中继日志文件被删除
由于系统不同分区创建硬链接文件会失败,故需要执行硬链接具体位置,建议指定为relay log相同的分区
--disable_relay_log_purge    默认情况下,参数relay_log_purge=1,脚本不做任何处理,自动退出
设定该参数,脚本会将relay_log_purge设置为0,当清理relay log之后,最后将参数设置为OFF(0)
             

3、定制清理relay log cronjob
pureg_relay_logs脚本在不阻塞SQL线程的情况下自动清理relay log。
对于不断产生的relay log直接将该脚本部署到crontab以实现按天或按小时定期清理。
$ crontab -l  
# purge relay logs at 5am  
0 5 * * * /usr/bin/purge_relay_logs --user=root --password=PASSWORD --disable_relay_log_purge >> /var/log/masterha/purge_relay_logs.log 2>&1            

4、手动清理示例    
# purge_relay_logs --user=mha --password=mha --disable_relay_log_purge

主要有两种方式:

方式一:

通过MHA中自带的工具 purge_relay_logs 工具来删除。

步骤:
    1、创建工作目录
    目的为了提高性能,这个工作目录必须跟mysql在同一个磁盘分区
    mkdir -p /data/mha_tmp

    2、purge relay logs
    /usr/bin/purge_relay_logs --user=USERNAME --password=PASSWORD --host=Mysql_IP --disable_relay_log_purge --workdir=/data/mha_tmp 2>&1  
    加入到crontab中
    0 4 * * * /usr/bin/purge_relay_logs --user=USERNAME --password=PASSWORD --host=Mysql_IP --disable_relay_log_purge --workdir=/data/mha_tmp 2>&1
    说明:
–disable_relay_log_purge:自动设置”relay_log_purge = 1“


方式二:
手动删除 relay log
1. 设置relay_log_purge = 1
SET GLOBAL relay_log_purge = 1
2. flush logs
通过管理员用户登陆从数据库,然后执行下面命令:
flush logs;
可以执行多次!
注意:观察堆积的relay logs日志是否已经删除,如果删除,直接执行下面第6步“恢复relay_log_purge = 0“;如果未删除,继续从下面第3步”停止slave“往下操作!!!

3. 停止slave
通过管理员用户登陆从数据库,然后执行下面命令:
stop slave;
4. 删除relay logs
可以通过rm直接删除relay logs
通使用下面方式安全删除:
(1) 统计所有关于relay的文件(包括 relay_log_name.index)总个数
ls -A1 |grep relay | sort -rn | wc -l
(2) 列出要删除所有有关relay的文件:
ls -A1 |grep relay | sort -rn | tail -n 100
说明: 100 为要删除的relay logs 数量
(3) 确定没有问题,删除relay logs:
ls -A1 |grep relay | sort -rn | tail -n 100 | xargs rm -rf {}
注意:

    要保留最新的两个relay log
    要保留relay log的index文件
    relay log的index一般命名为: relay_log_name.index
    例如: relay-bin.index
5. 启动slave
通过管理员用户登陆从数据库,然后执行下面命令:
start slave;
6 . 恢复relay_log_purge = 0
通过管理员用户登陆从数据库,然后执行下面命令:
SET GLOBAL relay_log_purge=0;
扩展
如果你对从数据库要求不高,可以将relay_log_purge = 1

猜你喜欢

转载自blog.csdn.net/eagle89/article/details/81557400