数据质量增加业务报告,支持从主题域、主题视角查看数据质量评估结果。 数据建模增加关系建模,支持创建逻辑实体,并配置实体间主外键关联关系。 支持根据数据标准自动解析、手动关联落标规则,自动生成质量任务进行落标检查。 支持查看数据标准对应的落标报告。 支持创建Serverless资源,进行数据湖分析。 数据集成支持离线数据入湖,数据湖格式支持hudi。
下图是百度智能云大数据的一个处理流程,分为四个部分,数据采集、数据存储、计算分析和数据应用。 在数据采集的这部分,通过 Kafka、日志传输服务、实时同步或者增量同步的方案,把数据从关系型的数据库如 Oracle、MySQL、SQL Server,或者半结构或者非结化的存储平台以及第三方的业务、互联网数据等等,传输到存储系统。
需具有以下任一权限: 完全控制千帆大模型平台的权限:QianfanFullControlAccessPolicy 完全控制千帆大模型平台数据管理(除数据标注外)的权限:QianfanDataFullControlAccessPolicy HTTP调用 鉴权说明 调用本文API,使用“基于安全认证AK/SK”进行签名计算鉴权,即使用安全认证中的Access Key ID 和 Secret Access
自定义 SQL 视图中嵌入各类参数 在查询中,用户通常设置过滤条件来进行数据查询的过滤,过程如下: 创建一个自定义 SQL 视图 设置图表的过滤组件,例如:设置日期过滤组件,并关联相应的数据模型和字段: 选择日期,点击查询,点击图表「调试」,可以看到生成的 SQL 语句如下: 但是,如果您的数据量非常大,上图中,SQL 的 where 子句是加在外层,而外层加 where 无法阻止数据库扫描全表,因此需要将
更新文件 成功上传后就能在数据源管理中看到这个数据源,如下图所示: 点击「更新数据」后将出现和上传文件类似的弹层 和上传不同,这里多了一个模式选择的按钮,您可以选择「追加」和「覆盖」两种方式来上传新文件。
在此之前,你开启MFA时,只能选择短信或是虚拟MFA的方式 证书管理提供查询、更新、删除证书OpenAPI。证书管理新发布的OpenAPI,支持你在不变更证书ID的情况下,更新不再使用的证书内容,以确保证书使用的更新和使用的连续性。通过删除证书API,你可以批量删除过期且不在使用状态的证书 自定义策略 特定资源选项优化。
部署后,您需要修改对主 Agent 的配置文件,配置文件名称为 agent.conf # 请求账号信息,需要有任务读取权限,只需要主agent设置即可 [account] accessKeyId = "xxx" # 用户ak secretAccessKey = "xxx" # 用户sk # log相关配置项 [log] logPath = "..
需具有以下任一权限: 完全控制千帆大模型平台的权限:QianfanFullControlAccessPolicy 只读访问千帆大模型平台的权限:QianfanReadAccessPolicy 完全控制千帆大模型平台数据管理(除数据标注外)的权限:QianfanDataFullControlAccessPolicy 运维操作千帆大模型平台数据管理(除数据标注外)的权限:QianfanDataOperateAccessPolicy
配置项 配置描述 目的端 AccessKey 填写目的端 Accesskey。您可以点击控制台右上角账号名称的安全中心查看 目的端 SecretKey 填写目的端 SecretKey。
请填写您百度智能云的 AccessKey:建议您创建单独的子用户,并授予该自用户full-control权限,并为该自用户创建新的 AccessKEy 请填写相应的 SecretKey:填写 AccessKey 对应的 SecretKey。