计费模式:后付费方式 产品规格及定价 关于数据湖存储加速工具RapidFS的定价,请参考 数据湖存储加速工具价格列表 。更多关于数据湖存储加速工具规格的介绍,请查看 数据湖存储加速工具规格介绍 。
目标端设置 在目标端设置目标类型、数据源和数据库,目前类型支持Doris、EDAP 数据湖。 迁移类型 迁移类型针对所有目标端类型,目前可支持的迁移类型:全量及增量迁移 其中,目标端如果为EDAP类型,需增加资源配置选项,可以选择计算资源。 资源配置 资源配置需要在 EDAP 界面上配置资源,选择【资源管理】,找到合适的计算资源,点击计算资源右侧的【绑定项目】来绑定到该 EDAP 项目中。
在云端使用大数据服务时,单独基于对象存储 BOS 可以解决高成本、低扩展性的问题,但简单地基于对象存储模拟文件系统操作仍存在以下问题: 使用平坦目录模拟层级目录时冗余操作很多,导致元数据性能差; 数据面访问延时比 HDFS 高一个数量级,对象存储限速机制的存在进一步限制性能的发挥; 和 Hadoop 的兼容性一般,部分场景需要特殊处理,例如 rename 不支持原子性; 在此时,可以选择基于对象存储 BOS 和 数据湖存储加速工具
DCC GPU云服务器 弹性裸金属服务器 云手机 应用引擎 BAE 轻量应用服务器LS 弹性公网IP 私有网络 VPC 负载均衡 BLB 智能云解析 DNS 专线ET 云智能网 CSN 云防火墙 CFW 对象存储 BOS 文件存储 CFS 云磁盘 CDS 存储网关BSG 边缘计算节点 BEC 数据流转平台CloudFlow 内容分发网络 CDN 海外CDN 动态加速 DRCDN 并行文件存储PFS 数据湖缓存加速工具
开通RapidFS服务 在您完成上述步骤后,您即可进入数据湖存储加速工具 RapidFS 控制台,开通产品服务。开通前,请您注意: 请在开通数据湖存储加速工具 RapidFS 服务时同时开通对象存储 BOS。开通后,RapidFS 将获取您在 BOS 中的存储桶列表。 您需要同意 百度云协议 。
概述 数据共享场景概述 数据共享是将企业中的数据通过服务化的方式发布出去,提供给数据使用方调用查询。EDAP 数据共享通过 SQL 方式将数据发布为 HTTP API 接口,可以一键发布 API 数据共享服务到 API 网关,API 网关提供了 HTTP 访问、维护、监控等能力。EDAP 数据共享和 API 网关共同提供了一个易用、安全、可控、可维护的数据共享场景。目前 EDAP 数据共享支持创建
概述 概述 EDAP支持离线作业开发模式,主要面向离线数据处理场景,同时提供了可视化作业开发、脚本作业开发、作业组开发三种开发方式,满足不同客户开发需求。 进入项目 在【我的项目】中的项目列表点击具体某个项目,进入项目内部。 离线开发 项目内,选择【离线开发】,进入离线作业的开发和编排界面。离线开发分为三类: 可视化作业开发、脚本作业开发、作业组开发。 可视化作业开发:使用拖拽的形式,降低用户开发
进入 数据湖存储加速工 RapidFS 控制台 的实例列表页面。 找到需要释放的 RapidFS 缓存实例,点击操作列的“释放”按钮。 按照弹框提示,点击“确认”完成对应 RapidFS 缓存实例的释放。 注意 : 释放 RapidFS 缓存实例后,存储在 RapidFS 缓存实例中的数据将被删除且不可恢复。释放缓存实例不会影响存储在对象存储 BOS中的数据。
数据服务 本示例将客户信用评分数据以API的方式进行共享,以便支持数据大屏分析等外部应用,本示例API的请求参数为客户姓名,返回参数为客户编号、姓名、信用评分。 API创建 1、进入“数据服务-API创建”菜单,并创建一个业务流程,在弹出的窗口选择一个网关分组,后续API发布则会发布到对应的分组中。 注意:需要开通API网关并创建一个网关分组。 2、新建一个API“客户评分数据共享”,通过SQL的
常见问题 一、准备工作 1、使用EDAP产品组合推荐 少任务量时:推荐使用 EDAP版本+EDAP资源组+BOS存储 大任务量时:推荐使用 EDAP版本+BMR计算+BOS存储 二、数据集成 1、实时同步支持哪些源端、目标端? 源端:PostgreSQL、MySql、SQL Server、Oracle 目标端:EDAPDataLake、Doris 2、离线同步支持哪些源端、目标端? 源端:MySQ