做数据迁移,数据库是分两片,每片一主两从,没有读写分离
前提:
使用服务器1:2核4G内存40G硬盘
线程池:5个
每个线程分页查询,每页1000条
平均数据是一天一个线程,一天3万数据,所以大概就是30页的分页深度
服务器1的数据:
cpu使用率在74%上下(有点高,2核的毕竟比不过4核的)
内存使用在41%上下
硬盘使用率在26%上下
使用服务器2:4核8G内存50G硬盘
线程池:5个
每个线程分页查询,每页1000条
平均数据是一天一个线程,一天3万数据,所以大概就是30页的分页深度
服务器1的数据:
cpu使用率在31%上下
内存使用在22.5%上下
硬盘使用率在25%上下
迁移结论:
一条数据是五个表中都有,每个表平均20个字段
采用查出来再插入到新库中
取一段时间,共约90万的数据,最后跑了大概3小时就完了
30万/h
5000/min
83/s
考虑到数据库不止是这个查询,线上所有增删改查也都在这个库中,感觉还不错
暂时这个库是可以抗住的