其他限制 一个 DTS 任务只能对一个数据库进行数据迁移,如果有多个数据库需要迁移,则需要为每个数据库创建数据迁移任务。 不支持包含时区类型列的时间戳。 复制多个同名但名称具有不同大小写的表(例如,table1、TABLE1 和 Table1)会导致无法预测的行为。 全量迁移会并发执行 INSERT 操作,导致目标数据库的表产生碎片,因此全量迁移完成后目标实例的表空间比源实例的表空间大。
功能特性 0代码数据集成 多源异构数据的分布式集成工具 离线数据同步,数据库、MPP数仓、Nosql、对象存储、HDFS分布式文件系统等异构数据源的定时、周期性同步。 实时流采集,支持http ,kafka 实时流数据同步到 DB、MPP数仓、Nosql、对象存储、HDFS分布式文件系统等数据源。 数据库准实时,基于CDC 实时捕获同步发生变化的数据。 Http、Ftp等数据类型的采集同步。
DNS Domain Name System,域名系统,因特网上作为域名和IP地址相互映射的一个分布式数据库,能够使用户更方便的访问互联网,而不用去记住能够被机器直接读取的IP数串。通过主机名得到该主机名对应的IP地址的过程叫做域名解析(或主机名解析)。
存储网关自身不提供存储能力,其数据是持久化保存在其他云存储服务(对象存储BOS)中的,存储网关主要是起到中转和协议转换作用。
在业务场景需要进行主备数据库切换或回滚时,您可以轻松地调整已有单向同步任务的方向,而无需重新配置任务。 前提条件 目前仅 MySQL、GaiaDB、Redis、MongoDB 支持一键反向。 任务须处于 运行中、已暂停、重试中 或 运行异常 状态。 注意事项 若一键反向过程中数据有变化,可能会导致源端与目标端数据不一致。
离线作业组开发支持作业组嵌套调度。 数据源管理、数据集成、数据开发支持数据库多版本选择。
数据库: 表的组织 ,库下可以有0个、1个或者多个表。库命名全局唯一。 数据表: 元数据表,EasyDAP表类型包括物理表、映射表。
自建MongoDB分片集迁移至DocDB MongoDB 本文主要介绍自建 MongoDB(分片集架构) 中的各个 Shard 节点迁移至云数据库 DocDB MongoDB(副本集架构或分片集架构)。 前提条件 已创建目标端云数据库 DocDB MongoDB(副本集架构或分片集架构)。创建方式,请参见 创建 MongoDB 实例 。
在任务配置和对象映射部分与其他数据源有些许不同。 4.1 任务配置 首先进入任务连接配置页,图中以源端为 百度智能云数据库RDS for MySQL 为例,选择源端实例即可。 配置目标端连接信息时,首先要根据目标端Kafka集群的访问方式选择接入类型。 若目标端为百度消息服务主题,则接入类型选择百度消息服务,并选择相应的地域和主题ID。
爱速搭的数据模型采用了更传统的做法,它的原理是动态数据库 ORM 映射,可以理解为动态创建了 Entity 类,然后通过这些类去操作数据库。 这意味着在爱速搭中: 数据模型就是数据库表,其中的字段就是表中的字段,对字段的修改是自动生成数据库的表结构变更操作,这和传统开发是一样的,开发人员都熟悉。