解决方案实践 > MySQL数据库上云迁移
MySQL数据库上云迁移
  • 概览
  • 需求场景
  • 需求场景1:可停服迁移
  • 需求场景2:不可停服迁移
  • 方案概述
  • 迁移方式一:停服迁移
  • 使用mysqldump工具
  • 使用DTS服务(推荐方式)
  • 迁移方式二:不停服迁移
  • 使用mysqldump工具
  • 使用xtrabackup工具
  • 使用DTS服务(推荐方式)
  • 相关产品

MySQL数据库上云迁移

更新时间:

概览

随着云计算的兴起,考虑到数据库的稳定性和运维成本,越来越多的企业,会将运行在本地服务器或是其他虚拟服务器上的数据库迁移到云上。当前将数据库迁移到RDS for Mysql的方法包括停服迁移、不停服迁移,下面将详细介绍这两种上云迁移方法的不同方案,我们推荐您使用DTS来进行迁移。

需求场景

需求场景1:可停服迁移

用户迁移过程中,旧实例可以暂时停止服务或者暂停写入,待数据全部迁移到新实例后,再将业务切换到新实例进行读写。可停服迁移可以通过mysqldump或百度智能云传输服务DTS完成数据迁移。

需求场景2:不可停服迁移

用户迁移过程中,旧实例不能停止写入,业务不能停服,此时进行在线数据迁移,需要保证新旧实例的数据一致性。该场景下推荐使用百度智能云数据传输服务DTS完成数据迁移。

方案概述

迁移方式一:停服迁移

如果应用程序可以接受一定时间的停服,那么停服迁移是最简单的方案。目前有2种方案可以选择:

使用mysqldump工具

具体步骤如下:

  1. 停止应用程序的写入,或关闭应用程序服务器;

  2. 使用mysqldump工具,备份出所有的库表:

    mysqldump –u dbuser –p dbpass -h dbhost -Pdbport -A > data.sql

  3. 通过RDS域名来连接,使用mysql客户端工具将备份出来的数据库导入到RDS上:

    mysql -u dbuser -p dbpass -h rdsdns -Pdbport < data.sql

  4. 修改应用程序中数据库的连接地址,重新启动应用程序服务器或开启写入。

使用DTS服务(推荐方式)

具体步骤如下:

  1. 停止应用程序的写入,或关闭应用程序服务器;

  2. 在DTS上配置源端和目标端的数据库连接方式,选择结构+全量迁移,并启动任务。DTS数据迁移的操作步骤详见数据迁移

  3. 等DTS迁移任务运行结束后,修改应用程序中数据库的连接地址,重新启动应用程序服务器或开启写入;

  4. 结束DTS迁移任务。

迁移方式二:不停服迁移

一般情况下,应用程序希望在不停服的情况下,将数据库迁移到云上,而且如果迁移数据库的数据量很大的时候,停服时间将很长,这也是不可接受的。目前,不停服迁移有3种方案可以选择:

使用mysqldump工具

此方法只适用于开启GTID的Mysql,具体步骤如下:

  1. 使用与Mysql Server同版本的mysqldump工具,导出所有的库表数据:
    mysqldump –u dbuser –p dbpass -h dbhost -Pdbport -A > data.sql
  2. 在RDS上申请Super权限,通过RDS域名连接,并使用Mysql客户端工具将备份出来的数据导入进去:

    mysql -u dbuser -p dbpass -h rdsdns -Pdbport < data.sql

  3. 提供changemaster的点,发工单给百度云DBA,非标建立同步,追增量,此过程中,RDS 可用性无保障。

    客户保证网络连接畅通,即 RDS 数据库可以直接访问客户数据库

    change master to master_host=xxx, master_port=xxx, master_user=xxx, master_password=xxx, master_auto_position=1;

  4. 开始停止应用程序写入,等到追上老主库的数据后,修改应用程序的数据库访问地址,并开始写入,这样就能达到短暂停写来实现上云迁移。

  5. 联系百度云DBA停止非标建立的同步关系,此时开始,RDS开始保障可用性。

使用xtrabackup工具

此方法需要发工单联系RDS值班人员来恢复数据,具体步骤如下:

  1. 使用xtrabackup工具进行数据库热备,然后将备份出来的数据上传到百度智能云BOS上:
    innobackupex --user=dbuser --password=dbpass --host=dbhost --port=dbport /path/to/BACKUP-DIR/
  2. 通过工单方式,将备份数据的BOS地址提供给RDS值班人员,进行数据的恢复;
  3. 等数据恢复完成后,提供changemaster的点,发工单给百度云DBA,非标建立同步,追增量,此过程中,RDS 可用性无保障。

    客户保证网络连接畅通,即rds数据库可以直接访问客户数据库

    change master to master_host=xxx, master_port=xxx, master_user=xxx, master_password=xxx, master_auto_position=1;

  4. 开始停止应用程序写入,等到追上老主库的数据后,修改应用程序的数据库访问地址,并开始写入,这样就能达到短暂停写来实现上云迁移。
  5. 联系百度云DBA停止非标建立的同步关系,此时开始,RDS开始保障可用性。

使用DTS服务(推荐方式)

具体步骤如下:

  1. 使用DTS来进行结构+全量+增量数据的迁移,具体操作步骤详见数据迁移
  2. 开始停止应用程序写入,等到追上老主库的数据后,修改应用程序的数据库访问地址,并开始写入。
  3. 结束DTS迁移任务,从而完成上云迁移。

相关产品

数据传输服务DTS:简单可靠的数据库数据传输服务