在风控、实时监控大屏、ML/DL模型变更等场景中,数据采集是打通流式数据流的前提。DTS 支持将 OLTP 数据库(如:MySQL、PostgreSQL、SQL Server 等)的实时增量数据同步到消息队列(如:Kafka)中,用户可以从消息队列中订阅增量数据并推送到下游流式计算框架中。
添加 DTS IP 地址至对接数据源白名单 物理服务器 BBC 专属服务器 DCC
migration),目前仅支持数据传输任务 migration Request Body 参数 productType String 是 付费类型(后付费:postpay),目前仅支持后付费 postpay Request Body 参数 standard String 是 实例规格(small;medium;large;xlarge) large Request Body 参数 sourceInstanceType
目的数据库是否只读检查 问题描述 数据传输任务开始时,需要保证目的数据库可写入数据,因此在预检查阶段需要检查检查目的数据库是否只读。 问题原因 如果目标库为只读情况下,无法写入数据。 问题的处理方法 设置目的数据库可写后,重新预检查。 set global read_only=0;
说明 账号的组成格式为“账号@IP”,其中 IP 为允许访问源端数据库的目标库 IP 地址,您可以根据具体的业务场景对目标库 IP 进行重规划。
否则,实例可能会因为延迟过大而失败。 在进行全量数据迁移时,DTS 将会占用源和目标库一定的读写资源,可能会导致数据库的负载上升。因此建议在执行数据迁移前评估源库和目标库的性能,并在业务低峰期执行数据迁移(例如源库和目标库的 CPU 负载在 30% 以下)。 由于全量数据迁移会并发执行INSERT操作,导致目标数据库的表产生碎片,因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。
示例值 instanceType String 否 实例类型 bcerds region String 否 地域 bj dbType String 否 数据库类型 mysql dbUser String 否 数据库访问账号 dts_trans dbPass String 否 数据库访问密码 dbPort dbPort Integer 否 数据库访问端口 3306 dbHost String 否 数据库ip
共享带宽的带宽扩容 指定共享带宽的带宽扩容 请求结构 PUT /v{version}/eipgroup/{id}?{action}&clientToken={clientToken} HTTP/1.1 Host: eip.bj.baidubce.com Authorization: authorization string { "bandwidthInMbps": ba
示例值 instanceType String 是 实例类型 bcerds region String 是 地域 bj dbType String 是 数据库类型 mysql dbUser String 是 数据库访问账号 dts_trans dbPass String 是 数据库访问密码 dbPass dbPort Integer 是 数据库访问端口 3306 dbHost String 是 数据库ip
若您的 MySQL 数据库部署在本地,您需要将 DTS 服务器的 IP 地址添加到该数据库远程连接的白名单中,以允许其访问您的数据库。更多信息,请参见 添加 DTS 服务 IP 白名单 。 已创建存储空间大于自建 MySQL 数据库占用存储空间的目标 GaiaDB 实例。创建方式,请参见 购买集群 。