MySQL数据库上云迁移
概览
随着云计算的兴起,考虑到数据库的稳定性和运维成本,越来越多的企业,会将运行在本地服务器或是其他虚拟服务器上的数据库迁移到云上。当前将数据库迁移到RDS-for-Mysql的方法包括停服迁移、不停服迁移,下面将详细介绍这两种上云迁移方法的不同方案,我们推荐您使用DTS来进行迁移。
需求场景
需求场景1:可停服迁移
用户迁移过程中,旧实例可以暂时停止服务或者暂停写入,待数据全部迁移到新实例后,再将业务切换到新实例进行读写。可停服迁移可以通过mysqldump或百度智能云传输服务DTS完成数据迁移。
需求场景2:不可停服迁移
用户迁移过程中,旧实例不能停止写入,业务不能停服,此时进行在线数据迁移,需要保证新旧实例的数据一致性。该场景下推荐使用百度智能云数据传输服务DTS完成数据迁移。
方案概述
迁移方式一:停服迁移
如果应用程序可以接受一定时间的停服,那么停服迁移是最简单的方案。目前有2种方案可以选择:
使用mysqldump工具
具体步骤如下:
- 停止应用程序的写入,或关闭应用程序服务器。
-
使用mysqldump工具,备份出所有的库表:
mysqldump –u dbuser –p dbpass -h dbhost -Pdbport -A > data.sql
-
通过RDS域名来连接,使用mysql客户端工具将备份出来的数据库导入到RDS上:
mysql -u dbuser -p dbpass -h rdsdns -Pdbport < data.sql
- 修改应用程序中数据库的连接地址,重新启动应用程序服务器或开启写入。
使用DTS服务(推荐方式)
具体步骤如下:
- 停止应用程序的写入或关闭应用程序服务器。
- 在DTS上配置源端和目标端的数据库连接方式,选择结构+全量迁移并且启动任务。DTS数据迁移的操作步骤详见数据迁移。
- 等DTS迁移任务运行结束后,修改应用程序中数据库的连接地址,重新启动应用程序服务器或开启写入。
- 结束DTS迁移任务。
迁移方式二:不停服迁移
一般情况下,应用程序希望在不停服的情况下,将数据库迁移到云上,而且如果迁移数据库的数据量很大的时候,停服时间将很长,这也是不可接受的。目前不停服迁移有3种方案可以选择:
使用mysqldump工具
此方法只适用于开启GTID的Mysql,具体步骤如下:
-
使用与Mysql Server同版本的mysqldump工具,导出所有的库表数据:
mysqldump –u dbuser –p dbpass -h dbhost -Pdbport -A > data.sql
-
在RDS上申请Super权限,通过RDS域名连接,并使用Mysql客户端工具将备份出来的数据导入进去:
mysql -u dbuser -p dbpass -h rdsdns -Pdbport < data.sql
-
提供changemaster的点,发工单给百度云DBA,非标建立同步,追增量,此过程中,RDS 可用性无保障。
客户保证网络连接畅通,即 RDS 数据库可以直接访问客户数据库
change master to master_host=xxx, master_port=xxx, master_user=xxx, master_password=xxx, master_auto_position=1;
- 开始停止应用程序写入,等到追上老主库的数据后,修改应用程序的数据库访问地址,并且开始写入,这样就能达到短暂停写来实现上云迁移。
- 联系百度云DBA停止非标建立的同步关系,此时开始,RDS开始保障可用性。
使用xtrabackup工具
此方法需要发工单联系RDS值班人员来恢复数据,具体步骤如下:
- 使用xtrabackup工具进行数据库热备,然后将备份出来的数据上传到百度智能云BOS上:
innobackupex --user=dbuser --password=dbpass --host=dbhost --port=dbport /path/to/BACKUP-DIR/
- 通过工单方式,将备份数据的BOS地址提供给RDS值班人员,进行数据的恢复。
- 等数据恢复完成后,提供changemaster的点,发工单给百度云DBA,非标建立同步、追增量,此过程中 RDS 可用性无保障。
客户保证网络连接畅通,即rds数据库可以直接访问客户数据库
change master to master_host=xxx, master_port=xxx, master_user=xxx, master_password=xxx, master_auto_position=1;
- 开始停止应用程序写入,等到追上老主库的数据后,修改应用程序的数据库访问地址,并且开始写入,这样就能达到短暂停写来实现上云迁移。
- 联系百度云DBA停止非标建立的同步关系,此时开始,RDS开始保障可用性。
使用DTS服务(推荐方式)
具体步骤如下:
- 使用DTS来进行结构+全量+增量数据的迁移,具体操作步骤详见数据迁移。
- 开始停止应用程序写入,等到追上老主库的数据后,修改应用程序的数据库访问地址,并且开始写入。
- 结束DTS迁移任务,从而完成上云迁移。
相关产品
数据传输服务DTS:简单可靠的数据库数据传输服务