还可以将文件放在PalopgMpp支持的数据源上(例如 scfs,使用 copy from fdw://server/a.txt`的方式进行加载,这种方式一般会带来更好的导入性能。 并行加载和外部数据源的特性相关,数据源如果支持单个加载任务的并行划分,就会达到非常好的并行加载效果(例如scfs, Kafka,hdfs等)。
图一 模型和指标间的关系 数据指标管理 新建原子指标 在EDAP平台首页概览的左侧导航栏中 选择数据架构>指标 ,进入后在标签页中选择「原子指标」,在左侧主题域的树形控件中选择主题后,单击 新建 按钮,配置原子指标的相关参数。 在填写完计算逻辑后,可单击 校验 按钮对填写内容进行校验,如果校验通过,可以提交保存。如果校验不通过,则需要根据校验失败的提示信息调整计算逻辑。
新建数据集时,无需指定ID。
数据迁移操作指导 数据传输服务 DTS 可以帮助您实现数据源之间的数据实时同步,适用于数据上云迁移、数据异地多活、多云数据灾备、缓存更新、实时分析及实时数据仓库等多种业务场景。本文介绍 DTS 功能的具体使用流程,帮助您快速掌握创建、管理数据传输任务的操作。 背景知识 支持的数据流 介绍 DTS 支持的数据库、数据库版本和迁移类型。
百度智能云BOS准备 创建目标存储空间(Bucket) 创建目标存储空间,用于存放迁移的数据。详情请参见 创建存储空间 。 迁移实施 登录数据流转平台 1.登录数据流转平台CloudFlow 登录 数据流转平台 CloudFlow 管理控制台 。 2.登录数据流转平台CloudFlow 进入控制台后,单击【新建迁移任务】,进入任务配置页面,进行迁移参数的设置。
数据血缘 数据血缘,即对Sugar BI中各资源涉及的数据流经路径进⾏跟踪,类似于追踪数据的「⾎缘关系」。 其可针对数据向下做影响分析或向上做溯源分析,有助于⽤户管理资源和排查问题。具体为s: 影响分析:了解资源(如数据源 / 数据表 / API / 数据模型 / SQL 模型等)被下游的使⽤情况,便于在更改资源时评估影响。
数据源选择 Sugar官网示例数据源 ,输入一个数据模型名称,点击「确定」 进入数据模型编辑页面,拖入一张数据表,比如 sale_order ,Sugar BI自动将表中的字段区分为 维度 和 度量 分别展示 下面先创建 1 个计算字段用来计算 利润率 ,点击「新建计算度量」,输入计算字段的名称和表达式,点击「确定」 下面再创建 1 个计算字段用来区分 高利润率 与 低利润率 回到地图编辑页面,
String 是 RequestBody参数 RapidFS 实例 ID dataSrcId String 是 RequestBody参数 数据源 ID metaSyncRuleId String 是 RequestBody参数 元数据同步规则 ID maxKeys
数据库 支持的数据源类型 Sugar BI中的数据源是指数据库连接,每个空间可以建立多个数据源。目前支持的数据源类型如下,其中 红色字体 的表示Sugar BI支持使用 数据模型 方式来对接该数据源,其它的黑色字体的表示只能使用 SQL 建模 方式来对接。
2.登录数据流转平台CloudFlow 进入控制台后,单击【新建迁移任务】,进入任务配置页面,进行迁移参数的设置。 任务设置 您需要对迁移任务的名称和迁移启动时间进行设置。