适用场景 本文适用于使用百度智能云 数据传输服务DTS (以下简称 DTS),将DTS已经支持的数据源迁移至Elasticsearch目标端中的场景。 2. 将Elasticsearch作为DTS目标端的限制 不支持结构迁移 。 增量同步不支持同步关系型数据库的DDL语句 。
在库表结构同步和全量同步阶段,请勿执行库或表结构变更的 DDL 操作,否则会导致数据同步任务失败。 其他限制 建议源和目标库版本保持一致,或者从低版本同步到高版本以保障兼容性。如为高版本同步至低版本,可能存在数据库兼容性问题。 执行数据同步前需评估源库和目标库的性能,同时建议业务低峰期执行数据同步。否则全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升。
同步方向 默认为单向同步,部分数据源支持选择双向同步,双向同步实例包含正向和反向同步任务。双向同步目前仅同构迁移支持,当前支持的数据源如下:MySQL、GaiaDB 允许一键反向 开启后,在任务增量阶段支持一键反向,启动后将中断当前同步链路,并启动从目标端到源端的数据同步链路,实现数据自动回流到源端。
仅支持增量同步,支持配置同步开始时间(Topic中最早Message、启动任务后新产生的Message、自定义起始时间)。 支持针对同一源端Kafka配置多个消费者消费数据。 4. 使用Kafka作为源 4.1 连接设置 4.1.1 创建任务 首先,在创建任务界面配置数据传输任务的部分上下游连接信息。
排版约定 排版格式 含义 < > 变量 [ ] 可选项 { } 必选项 | 互斥关系 等宽字体 Courier New 屏幕输出
在页面左边选上需要迁移的库表,库表信息将会被自动添加到页面右边;点击对应库表名旁的 编辑 按钮可以设置库表名映射、行过滤、列黑白名单过滤等功能,如下图所示。 上述配置完成后,点击 保存并预检查 可开始预检查操作。 5 DTS支持的Oracle源数据类型 下表列出了使用 DTS 时支持的 Oracle 源数据类型以及与 DTS 数据类型的默认映射。
在该页面,可以根据实际需求选择组合结构迁移、全量迁移和增量同步。 若选择了增量同步,可以指定增量同步过程中同步的SQL语句类型,当前可选的SQL语句类型包含:INSERT、UPDATE、DELETE、DDL;此外若选择了DDL语句的同步,可以额外指定是否过滤特殊的DDL同步,如DROP、和TRUNCATE语句,如下图所示。 传输对象包含两种选择类型: 整个实例 和 手动选择 。
相关产品 云数据库 RDS :专业、高性能、高可靠的关系型数据库 相关产品 云数据库RDS 专业的关系型云数据库服务,提供Web 界面管理、数据备份和恢复功能、安全管理和监控等服务 数据传输服务DTS 提供数据迁移、数据同步、数据订阅于一体的数据库数据传输服务,在不停服的前提下轻松完成数据库迁移
在库表结构同步和全量同步阶段,请勿执行库或表结构变更的 DDL 操作,否则会导致数据同步任务失败。 其他限制 建议源和目标库版本保持一致,或者从低版本同步到高版本以保障兼容性。如为高版本同步至低版本,可能存在数据库兼容性问题。 执行数据同步前需评估源库和目标库的性能,同时建议业务低峰期执行数据同步。否则全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升。
可能是BCM服务删除报警策略没有成功,需要手工删除报警策略,具体步骤如下: 在产品列表中找到云监控BCM,在云产品监控中找到数据传输服务,点击对应任务ID进去策略详情界面。 点击报警策略,勾选所有策略,点击删除。