数据类型 Model对象定义 FileSystemModel 参数名称 类型 描述 fsId String 文件系统的id fsName String 文件系统的名称 type String 文件系统的存储类型 protocol String 文件系统的协议类型 zone String 文件系统所在可用区 capacityQuota uint64 文件系统容量quota,单位 bytes status
CCE使用CFS 在CCE中使用CFS文件系统的详细操作,请参见 使用文件存储CFS 文档。
为了保证该架构的安全性,需要为3个服务器配置不同的安全策略,为每个业务设置最小的访问权限。
环境配置 试用模组对应的软件包含两个压缩包,其中命名为3rdparty_lib_lean_MM-DD-YY.tar.gz是环境安装包,打开命令行 运行以下命令行以解压,创建目录和安装第三方库: mkdir ~/XP_release tar -xvf [ 3rdparty_lib_lean_mmddyyy.tar.gz ] -C ~/XP_release source 3rdparty_lib_lean
配置项 配置描述 数据源端 选择源端的云服务商,此处迁移源服务提供商应选择 URL 列表 选择 URL 列表文件 本地上传:如果您的 URL 列表文件在本地,您可以先将其上传到您的某一个 Bucket 中。本地上传适用于 URL 列表文件小于 5GB 的场景。
URL参数中所使用的fsId为文件系统唯一资源标识。 实名认证 使用CFS API的用户需要实名认证,没有通过实名认证的可以前往 百度智能云官网控制台 中的安全认证下的实名认证中进行认证。 百度智能云提供 个人认证 、 企业认证 两种认证方式,您可以根据实际情况选择一种进行认证。 API认证机制 所有API的安全认证一律采用Access Key与请求签名机制。
未命名文件 概述 您可根据业务需求和使用场景,基于不同官方应用快速完成个人应用的创建,完成创建的个人应用将全部展示于【我的应用】,您可对已发布的个人应用进行 在线网页分享体验 和 API调用 。 管理我的应用 您可通过应用列表,快速查看和管理所有您个人创建的应用。 应用配置 点击「编辑」按钮,即可进入应用配置页。
UsagePercentage 文件系统使用率 % InstanceId FileNum 文件系统文件数 个 InstanceId ReadThroughput 文件系统读吞吐 bytes/s InstanceId WriteThroughput 文件系统写吞吐 bytes/s InstanceId ReadQps 文件系统读IOPS 次每秒 InstanceId WriteQps 文件系统写IOPS
使用限制与建议 使用限制 CFS产品有如下配额限制: 限制项 限额 单用户可创建文件系统数 北京地域:最多500个 保定地域:最多30个 成都/武汉/香港地域:最多20个 广州/苏州地域:最多50个 单个文件系统容量 100PB 单个文件系统文件数 1000亿个 单个文件大小 1PB 目录深度 1000级 软链接路径长度 4080字节 文件名长度 255字节 同时连接的客户端数量 数千个 使用建议
Tar文件解压 简介 解压tar文件算子 功能描述 tar文件解压, 支持批量处理 输入 输入 含义 默认值 base_path 支持传入base_path目录, 该目录下有多个子目录, 每个子目录有若干tar文件, 配合discover_datasets和create_tasks_from_datasets方法可便捷的将多个子目录数据集创建为多个task, 并发执行 无 输出 输入 含义 output_path