MongoDB迁移方案

背景

公司计划将服务器从aws迁移至阿里云,其中我们迁移的一个难点就是MongoDB中几TB数据如何安全的迁移至阿里云环境,因此,我开发出一套MongoDB自动化迁移脚本,只需要简单的操作就可以安全迁移,实现语言是Shell。

一、简述

1、执行同步脚本,把数据按天来同步

nohup sh master.sh  2018-1-01 2018-8-16 &

2、距离上线还有两天,使用按小时来同步数据。

nohup sh computer.sh &
脚本会自动获取系统时间来进行同步操作。

#加入计划任务,让脚本持续运行。
#每隔一小时执行一次脚本,同步一小时大约需要6、7分钟!

crontab -l
01 */1 * * * /bin/bash /root/mongo-script/computer.sh

3、迁移开始时停止数据录入,最多也就需要再录入一个小时的数据,大大节省了时间。

同步完数据,等待20分钟后,与线上MongoDB比对数据条数。如果有误差,请开发人员介入!

二、自动化脚本使用方法

脚本中采用MongoDB自带命令的方式进行数据的备份与恢复。

1、按天备份

sh client.sh 2018-1-27 2018-1-27

在这里插入图片描述

查看数据存放目录
在这里插入图片描述

还原

sh mongo-restore.sh

在这里插入图片描述

2、按小时备份

sh client-hour.sh '2018-1-27 11:00:00' '2018-1-27 14:00:00'

在这里插入图片描述

查看数据存放目录
在这里插入图片描述

还原

sh mongo-restore-hour.sh

在这里插入图片描述

结语

自动化脚本资源我放在我的主页上去了,大家有需要可以前往下载,希望可以对大家有所帮助。

猜你喜欢

转载自blog.csdn.net/qq_37837432/article/details/121580759
今日推荐