在进行全量数据迁移时,DTS 将会占用源和目标库一定的读写资源,可能会导致数据库的负载上升。因此建议在执行数据迁移前评估源库和目标库的性能,并在业务低峰期执行数据迁移(例如源库和目标库的 CPU 负载在 30% 以下)。 由于全量数据迁移会并发执行INSERT操作,导致目标数据库的表产生碎片,因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。
至此,Sugar成功连接PALO数据库 表一 配置项说明 配置项 配置项说明 数据源名称 创建一个数据源的名称以便于后续管理 描述 可以自定义描述,补充数据源的详细管理信息 数据库地址Host 在PALO集群详情页面-配置信息,给LeaderNode绑定Eip,填写这个IP地址即可(Eip需要用户自行购买并绑定) 端口 9030 数据库名 PALO中的数据库名称 用户名 PALO集群中创建的账号,管理员账号
在不停服的前提下轻松完成数据库迁移
mysql some_db < dump.sql 假设该 some_table 表存在于 some_db MySQL 数据库中。
限制说明 应用限制 类型 说明 源端限制 待同步的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。 如同步对象为表级别,单次同步任务支持的表数量有限,当超出数量限制,任务提交后会显示请求报错,此时建议您拆分待同步的表,分批配置多个任务,或者配置整库的同步任务。
基本信息包括表名称、数据库等。 表一 表详情基础信息说明 字段名称 字段名称 表名称 表英文名 表中文名 采集表描述,作为表中文名 数据库 表所属数据库 创建时间 元数据创建时间 更新时间 元数据采集任务更新时间 类型 元数据的表类型。包括:物理表、映射表、外部表 创建人 采集任务的创建人 湖格式 元数据表所属的湖格式 数据标签 普通用户可以使用标签管理中已创建的标签对数据表打标签。
支持,但需要走公网,所以BCC自建数据库或RDS实例需要有公网IP。 同一个账号下的两个RDS实例下的不同数据库,能否进行数据迁移? 可以,DTS支持库表映射功能,可以实现不同RDS实例下不同库名的数据库间的数据迁移。 DTS迁移过程中,是否会覆盖目标库中同名的表数据? 不会。DTS迁移前会执行检查,如果目标库中存在同名的表则不能执行该任务。
SELECT 条件,示例:n1,n2 fieldWhitelist N 列过滤(白名单),符合条件的列将被保留,支持数据库标准 SQL SELECT 条件,示例:n1,n2 where N 行过滤,符合条件的行将被保留,仅支持数据库标准 SQL WHERE 条件,Oracle 数据库注意区分字段名大小写。
方案概述 用户设备 → IoT Hub → BSC → IoT Hub → Rule Engine → TSDB → 小程序 配置步骤 一个完整的 Flink SQL 作业由 source 表、sink 表和 DML 语句构成。
WHERE 条件过滤支持对单张表进行设置,需要对多张表进行过滤时,对每张表分别进行设置即可。 列过滤与 WHERE 条件过滤的交互说明如下: 如果一个表进行了列过滤,用户同时还对该表设置 WHERE 规则,需要用户自行保证输入 WHERE 规则中的列名,包含在待同步的表中,否则 WHERE 规则可以设置成功,但后续任务启动后会报错。