目前支持json/csv type_example Query 请求体参数 请求体字段数据结构说明 参数名称 参数类型 是否必须 描述 示例值 selectRequest SelectRequest 是 json body根节点 SelectRequest字段数据结构说明 参数名称 参数类型 是否必须 描述 示例值 expression String 是 经过base64编码的sql语句 c2VsZWN0IGNvdW50KCopIGZyb20gbxkl2JqZWN0IHdoZXJlIF80ID4gNDU
迁移示例 老集群 hdfs 地址为:hdfs://master-9331fa9:8020,hive 版本为 hive 1.2.0,mysql 元数据库地址为 master-9331fa9 新集群 hdfs 地址为:hdfs://master-b882990:8020,hive 版本为 hive 3.1.0,mysql 元数据库地址为 master-b882990(IP:172.18.0.148) 在老集群创建相应的库和表
创建一个 CFC 函数来访问 ExampleDB 数据库,创建一个表 (Employee),添加几个记录,然后检索表中的记录。 手动调用 CFC 函数并验证查询结果。这样您可以验证您的 CFC 函数是否可以访问 VPC 中的 RDS MySQL 实例。 创建RDS 在本教程中,您的CFC函数将创建一个表 (Employee),插入一些记录,然后检索这些记录。
进行测试 查询老集群的表,看数据是否正确。
限制说明 应用限制 类型 说明 源端限制 待同步的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。 如同步对象为表级别,单次同步任务支持的表数量有限,当超出数量限制,任务提交后会显示请求报错,此时建议您拆分待同步的表,分批配置多个任务,或者配置整库的同步任务。
PostgreSQL检查项 数据传输服务 DTS 配置 PostgreSQL 的传输任务时,会先对数据库进行各项检查。本文介绍检查项的详细信息。
X_BXEO_NONCE : nonce string X_BXEO_SIGN : sign string X_BXEO_TIMESTAMP : new time string X_BXEO_CONTENTMD 5 : body md 5 string X_BXEO_SIGNTYPE : HMAC-SHA 256 { bxeoContent : { address : jZoqj2A2gvsXhmQuargnhKkqzMRcnzS4E
使用RDS数据库中的另一张表test_export,指定hive中已经存在的表sqoop_hive。
setStatistics 请求参数 名称 类型 位置 是否必填 描述 databaseName String URL 是 数据库名 tableName String URL 是 表名 numFiles Long Body 否 文件个数 numRows Long Body 否 行数 rawDataSize Long Body 否 原始数据大小 totalSize Long Body 否 存储数据大小
设置报警策略 支持自定义库表列名映射 可以实现对源跟目标实例的库名、表名或列名不同的两个对象之间进行数据同步。 库表列名映射 迁移数据过滤 可以对同步的表设置某种 SQL 条件过滤所需同步的数据。 设置过滤条件 任务状态说明 迁移任务在创建及运行过程中,不同阶段会处于不同状态,具体如下表所示。 任务状态 说明 可进行操作 未配置 迁移任务创建完成,尚未配置任务。