网络准备 源/目标端部署类型 接入类型 适用场景 网络准备指引 IDC 自建数据库 其他云厂商数据库 公网 数据源可以通过公网 IP 访问。 公网无法保证传输带宽,且存在安全隐患,适用于对传输要求不高的场景。 添加 DTS IP 地址至对接数据源白名单 专线接入 数据源通过专线与百度智能云私有网络打通。 专线接入方式网络链路用户独占,无数据泄露风险,安全性高,满足金融、政企等高等级网络连接要求。
连接Trino进行查询 元数据管理为Default时 // 1.登录到coordinator节点 // 2.切换到某个用户 su hdfs // 3.进入交互命令行 /opt/bmr/trino/bin/trino \ --server https://{coordinator_host}:8089 // 4.use到数据库 use hive.default; // 5.show tables show
在任务配置和对象映射部分与其他数据源有些许不同。 4.1 任务配置 首先进入任务连接配置页,图中以源端为 百度智能云数据库RDS for MySQL 为例,选择源端实例即可。 配置目标端连接信息时,首先要根据目标端Kafka集群的访问方式选择接入类型。 若目标端为百度消息服务主题,则接入类型选择百度消息服务,并选择相应的地域和主题ID。
在任务配置参数部分与其他数据源有些许不同。 连接设置 如上图所示,目前DTS的源端支持自建MySQL实例和云数据库RDS for MySQL实例。
全量迁移会并发执行 INSERT 操作,导致目标数据库的表产生碎片,因此全量迁移完成后目标实例的表空间比源实例的表空间大。 若您将列名仅大小写不同的字段写入到目标 MySQL 数据库的同一个表中,可能会因为 MySQL 数据库列名大小写不敏感,导致同步结果不符合预期。 操作限制 迁移过程中请勿进行如下操作,否则会导致迁移任务失败。 任务在结构迁移和全量迁移的过程中,不支持 DDL 操作。
数据库名 :需要连接 RDS 中的具体数据库,您可以在 RDS 控制台 中进入具体实例,在「数据库管理」中获取到数据库名 Schema :PostgreSQL、SQL Server 数据源中,需要填写对应的 Schema 用户名、密码 :登录 RDS 数据源的用户名和密码 3、后续数据预览等步骤 创建完 RDS 数据源之后,后续的数据预览等操作和公网方式的数据库完全一样,详见 数据库 ;以及后续的创建数据模型
同时将区块链落地行业中积累的创新实践,通过产品和技术输出赋能至合作伙伴,助力合作伙伴加速落地区块链,包括多链架构、跨链数据同步、可信计算、链上链下安全、多层级激励体系等。
口令、密码等丢失或泄漏所引起的; 由于客户的疏忽或因客户授权的操作所引起的; 任何由非EDAP所引起的,比如:由EDAP所依赖的上下游软件、硬件产品故障或配置调整引起的;由于资源组被用户手动扩容规格等变更操作,以及用户账号欠费导致的资源组不可用等场景中;数据开发模块中作业调度配置不合理导致的调度失败/未调度/作业执行超时/作业失败后不重试等情形;数据集成模块中由于源端数据库或目的端数据库自身原因导致的
其他限制 建议源和目标库版本保持一致,或者从低版本同步到高版本以保障兼容性。如为高版本同步至低版本,可能存在数据库兼容性问题。 执行数据同步前需评估源库和目标库的性能,同时建议业务低峰期执行数据同步。否则全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升。 操作限制 迁移过程中请勿进行如下操作,否则会导致迁移任务失败。
代理实例 代理实例可将数据库请求按读写类型,自动分摊到其对应的主实例或只读实例,实现读写自动分离。每个RDS主实例仅能创建一个代理实例,创建代理实例前须先创建好主实例,主实例释放时,其对应的代理实例会自动释放。 代理实例专用账户 主实例的已创建账户无法在代理实例中同步,因此如果需要建立连接,还需要创建一个代理实例专用账户。代理实例专用账户的创建、修改等操作,将自动同步到主实例,创建同名账户。