Tips :删除列名或修改表名/表描述/列名/列描述,应用更新发布后会导致对应列的用户数据被删除或清空,需谨慎操作。 调试记忆表:在调试界面,点击右上角【记忆】按钮,选择【记忆表】,可以查看当前记忆表的储存情况。
查看数据库信息 点击左侧数据目录树中的数据库节点,右侧显示对应数据库信息,包括数据库名称、数据库描述信息和创建时间。 查看数据表信息 数据表基本信息 支持查看的基本信息包括:表名称/表描述信息/创建时间/最近修改时间。 数据预览 预览表中已有数据。 数据表Schema 查看当前表的类型(数据模型类型)以及具体表结构。
CDC 要求采用独占方式使用 cdc 架构和 cdc 用户,如果某数据库中当前存在名为 cdc 的架构或数据库用户,那么在删除或重命名此架构或用户之前,不能对此数据库启用变更数据捕获。 如需对启动了 CDC 功能的源表执行 DDL,只能由角色 sysadmin、database role db_owner 成员或 database role db_ddladmin 成员操作。
创建数据模型 数据模型指的是数据库中的「表」,因此在创建数据模型前需要先连接数据源 进入应用后,点击左侧 【实体管理】 ,进入 【列表模式】 ,点击页面右侧 【新建实体模型】 。 ( https://bce.bdstatic.com/doc/bce-doc/ISUDA/image_8f12e94.png%29 ) 创建之后在页面列表中就能看到新建的数据模型。
database :外部数据源中数据库的名称。 table :外部数据源中表的名称。 直接定义外部数据源。
源端 全量迁移/增量同步 检查用户指定字符集在源数据库是否可用 源端 全量迁移 检查用户指定字符集在目的数据库是否可用 目标端 全量迁移 检查迁移表的表结构在目的库是否存在 目标端 全量迁移/增量同步 检查目的库中表是否为空 目标端 全量迁移 检查源库的 binlog 是否是 RowBase 格式,且为全量映射 源端 增量同步 检查源数据库的 binlog 是否被删除 源端 增量同步 检查增量的拓扑是否和其他任务冲突
源端 全量迁移/增量同步 检查用户指定字符集在源数据库是否可用 源端 全量迁移 检查用户指定字符集在目的数据库是否可用 目标端 全量迁移 检查迁移表的表结构在目的库是否存在 目标端 全量迁移/增量同步 检查目的库中表是否为空 目标端 全量迁移 检查源库的 binlog 是否是 RowBase 格式,且为全量映射 源端 增量同步 检查源数据库的 binlog 是否被删除 源端 增量同步 检查增量的拓扑是否和其他任务冲突
RowBase 格式,且为全量映射 源端 增量同步 检查源数据库的 binlog 是否被删除 源端 增量同步 检查增量的拓扑是否和其他任务冲突 源端 增量同步 检查源数据库的版本号 源端 增量同步 检查上游数据源是否设置 server_id 且值大于 1 源端 增量同步 检查源数据库的 gtid 是否开启 源端 全部迁移 检查 MySQL 至 MySQL 结构迁移缺陷 源端/目标端 结构迁移 检查源库
从左侧各数据源类型中选择一个,并且选中一个数据库。单击 新建质量作业 进入创建质量作业页面。 选择一个表,输入作业名称,规则配置添加对应质量规则配置,单击 确认 按钮完成创建。 表一 配置项说明 名称 含义 使用限制 表名称 选择一个需要进行质量校验的表。 作业名称 数据质量作业名称。 不大于30个字符。 扫描范围 选择全表扫描或条件扫描。
Hive的数据单元: Databases:数据库。 Tables:表。 Partitions:分区。只支持固定分区,将同一组数据存放至一个固定的分区中。 Buckets(or Clusters):分桶。同一个分区内的数据还可以细分,将相同的KEY再划分至一个桶中。 Hive的数据类型: 原始数据类型 - TINYINT(微整型),只占用1个字节,只能存储0-255的整数。