数据源接入之 TSDB 物可视提供了原生接入 TSDB 数据源的能力。本文以一个存储着虚构天气数据的 TSDB 为例,演示了如何在物可视中接入 TSDB 数据源,并使用“时序折线图”进行展示。 您需要有一个可用的 TSDB 数据库,可在 TSDB 控制台 确认。
输入vi nimo-shake.conf命令打开NimoShake的配置文件。 配置NimoShake,各配置项说明如下: 参数 说明 示例值 id 迁移任务的ID,可自定义,用于输出pid文件等信息,如本次任务的日志名称、断点续传(checkpoint)位点信息存储的数据库名称、同步到目的端的数据库名称。
填写配置项后单击确认分区创建成功。 分区字段类型,当前支持的分区字段类型有: TINYINT,SMALLINT,INT,BIGINT,BOOLEAN,FLOAT,DOUBLE,VARCHAR,CHAR,STRING,BYTES,DATE,TIMESTAMP,DECIMAL; 3.分区路径:默认路径生成规则:路径类型+数据库路径+表路径+分区路径。
1.选择需要的插件单击或者将其拖入可视化开发面板中,然后单击插件系统回跳出关于组件的配置界面。填写相关配置项单击确定即配置成功。 2.插件间支持相互连接。
Host、端口号 :填写数据源对应的 VPC 内网 IP 地址,以及端口号 数据库名 :需要连接数据源中具体数据库名 Schema :PostgreSQL、SQL Server 等数据源中,需要填写对应的 Schema 用户名、密码 :登录数据源的用户名和密码 3、后续数据预览等步骤 创建完 VPC 内数据源之后,后续的数据预览等操作和公网方式的数据库完全一样,详见 数据库 ;以及后续的创建数据模型
方案概述 使用限制 不支持结构迁移 增量同步不支持同步关系型数据库的DDL语句 源端数据源为MySQL时,源端表中的enum/set/timestamp类型字段只能将二进制信息传给下游,用户需要自行按照上游MySQL表结构解析其释义 不支持同步源端数据源的二进制(binary)类型数据 迁移前置条件 环境要求 已创建作为迁移源端的数据源实例,如:RDS for MySQL、自建MySQL、自建Oracle
计费项 计费项 计费模式 说明 链路配置费用 后付费 只有任务的正常运行时间计入计费时长,对于任务的未配置、未启动、暂停或失败时间,不计入计费时长。 公网流量费用 后付费 公网流量目前暂不收费。 计费详情 以下价格仅供参考,具体请以 DTS 控制台购买页 展示为准。
如果选择的是一个数据库,则显示当前数据库的所有表的得分详情。配置规则数是当天该库或表已有的所有规则总数。告警规则数和告警状态数量是仅当天的告警数据统计,不包含历史告警数量。 查看业务报告 登录并进入百度智能云数据湖管理与分析EasyDAP。在左侧导航栏,单击 数据治理>数据质量>质量报告 。 在左侧目录中选中业务报告,从左侧各数据源类型中选择一个,可查看对应主题/源连接或库的评分。
从左侧各数据源类型中选择一个,并且选中一个数据库。单击 新建质量作业 进入创建质量作业页面。 选择一个表,输入作业名称,规则配置添加对应质量规则配置,单击 确认 按钮完成创建。 表一 配置项说明 名称 含义 使用限制 表名称 选择一个需要进行质量校验的表。 作业名称 数据质量作业名称。 不大于30个字符。 扫描范围 选择全表扫描或条件扫描。
配置实例基本信息后支付购买DTS实例。 配置任务 回到DTS列表页后,可以看到刚刚购买的DTS实例,状态为【未配置】。 点击【配置任务】。 连接配置 首先配置数据传输任务的上下游连接信息,您可以按需选择云数据库实例或自建实例。 如上图所示。源端连接信息中,您可以按需选择不同的数据源作为任务的源端,包括:RDS for MySQL、自建MySQL、自建Oracle等。