解决方案实践 > 使用DTS实现MySQL到Kafka数据迁移 使用DTS实现MySQL到Kafka数据迁移 概览 需求场景 方案概述 迁移前置条件 源端MySQL迁移权限要求 目标端Kafka环境准备 操作步骤 1.创建迁移任务 2.配置任务 3.启动迁移 4.检查Kafka集群数据 使用DTS实现MySQL到Kafka数据迁移 更新时间: 2022-01-10 概览 本文主要介绍通过DTS
执行迁移评估 在 dts_analysis 目录下,执行命令启动迁移评估: Shell 复制 1 php dts_analysis.php check_instance.conf 查看评估结果 输出结果每行表示一条记录, 共有 3 种不同的记录。
重新启动应用程序服务器或开启写入。
方案概述 慢日志明细 : 用来记录在MySQL中响应时间超过阈值的语句,具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志明细中。 错误日志明细 :用来记录MySQL Server每次启动和关闭的详细信息以及运行过程中所有较为严重的警告和错误信息。
使用DTS服务(推荐方式) 具体步骤如下: 停止应用程序的写入,或关闭应用程序服务器; 在DTS上配置源端和目标端的数据库连接方式,选择结构+全量迁移,并启动任务。DTS数据迁移的操作步骤详见 数据迁移 。 等DTS迁移任务运行结束后,修改应用程序中数据库的连接地址,重新启动应用程序服务器或开启写入; 结束DTS迁移任务。
REPLICATION CLIENT SELECT,SHOW VIEW,REPLICATION CLIENT,REPLICATION SLAVE 4 使用MySQL数据库作为DTS源 使用MySQL数据库作为源,在任务创建、任务配置、前置检查、任务启动、任务暂停、任务终止的操作流程请参考最佳实践文档。
专线迁移MySQL迁移到云数据库RDS 创建任务 接口说明 创建任务。
传输对象 整个实例:将源端除系统库外的所有数据迁移到目标端,不迁移的系统库为:mysql、sys、information_schema、performance_schema。手动选择:选择此选项时,在页面左侧选择需要迁移的库表,库表信息将会被自动添加到页面右侧。模式匹配:详情参见: 模式匹配 。 上述配置完成后,点击页面下方的 保存并预检查 。 说明 在迁移任务正式启动之前,会先进行预检查。
MySQL功能概览 RDS for MySQL 功能概览 以下将介绍 RDS for MySQL 各产品系列、版本支持的功能,便于您根据需求进行了解和查询。
传输对象 整个实例:将源端除系统库外的所有数据迁移到目标端,不迁移的系统库为:mysql、sys、information_schema、performance_schema。 手动选择:选择此选项时,在页面左侧选择需要迁移的库表,库表信息将会被自动添加到页面右侧。 模式匹配:详情参见: 模式匹配 。 上述配置完成后,点击页面下方的 保存并预检查 。 说明 在迁移任务正式启动之前,会先进行预检查。