在弹出的数据加载页面填写如下信息: 参数 说明 名称 请输入数据加载任务的名称 pfs目录 请输入对象存储bucket将要链接到的pfs路径。该路径不支持根目录,需要填根目录下已创建好的目录。例如: (a) 挂载命令为:“.
数据流动(极速型L2) 适用范围 仅适用于极速型L2。 应用场景 随着人工智能、自动驾驶和基因测序等新兴业务的兴起,非结构化数据量呈指数级增长。为了存储这些数据,越来越多的业务选择对象存储,但由于接口类型、性能等多种因素,应用程序往往更倾向于使用并行文件存储来进行数据计算与训练。
PFS 与对象存储 BOS 深度联动,提供冷热数据分级存储能力,在保持海量数据在 BOS 中低成本存储的同时,获得高性能文件访问能力,适用于 AI 训练与推理、自动驾驶、高性能计算和视频渲染等场景。
路径规划导航 除了循迹导航,我们还提供路径规划导航,与循迹导航不同的是,用户可以通过在录制好的地图上预先设置多个中继点(目前只支持预设轨迹),程序会根据地图来计算任意两个中继点的最短路径,从而生成规划好的路径,然后再由app_tracking读取此路径文件来进行导航。
taskList :该参数需要填写 任务列表文件的绝对路径 。 任务列表文件 中包含了一个或多个任务,这些任务是预先处理好的,每个任务对应一个 object_list文件的绝对路径 ,每个object_list文件中的每一行对应一个最小粒度的数据迁移。
上传超过5GB大小的文件。 网络条件较差,和BOS的服务器之间的连接经常断开。 需要流式地上传文件。 上传文件之前,无法确定上传文件的大小。 下面将一步步介绍Multipart Upload的实现。假设有一个文件,本地路径为 /path/to/file.zip ,由于文件比较大,将其分块传输到BOS中。
删除文件系统 注意:需先删除文件系统已有的挂载点,才可对文件系统进行删除。 删除挂载点:点击文件系统列表操作栏的“管理”按钮进入详情页,对文件系统现有挂载点进行删除操作。 在文件系统列表页,点击操作栏的“删除”按钮,即可对对应文件系统进行删除。
备份 为了保护重要业务资产,文件存储CFS支持备份与恢复功能。CFS在备份文件系统数据时不进行文件系统快照,而是基于高效的文件系统扫描机制。在 CFS控制台 通过设置备份策略生成多份备份副本数据(首次全量备份,后续增量备份),并在数据丢失或受损时及时恢复文件。 费用说明 CFS 的备份功能当前处于免费试用期,待免费试用期结束进入收费阶段前会统一发布具体计费说明。
使用SFTP上传下载CFS文件系统数据 本文档介绍如何使用SFTP上传和下载CFS文件系统上的数据。 前提条件 在CFS文件系统所在地域,已购买 云服务器BCC 实例(以下介绍将以CentOS操作系统为例),详细请参见 创建BCC实例 。 背景信息 SFTP的传输速度依赖于BCC的外网带宽,请根据业务需求配置适当的网络带宽。