多进程并发mysqldump数据库导入工具

PS:本代码上传到Github上:https://github.com/edisonwong520/mysqldump_multi
如果觉得有用的,欢迎Star收藏,感谢~
本人菜鸟一名,闲来无事写来玩玩,有问题请多多指教~
Github个人主页 主页上还有别的一些小工具~



1. 原理

自定义进程数
根据进程数把要导入的sql文件分块,并且对sql文件大小进行排序,打乱,借此尽可能实现每个进程要处理相同任务量
执行任务,如有导入异常,重新导入,超过5次失败录入到error文件并退出导入

2. 使用说明

安装基于python 3.6 开发,linux环境。需要安装 MySQLdb 库。
nohup python mysqldump_multi 40 /export/backup/dapbackup_not_del/10_127_160_166/ >>/export/scripts/edison/nohup.out &

3. 优势

能把io或cpu跑100%

猜你喜欢

转载自blog.csdn.net/Doggie060711/article/details/88418893
今日推荐