建议压测时准备 32C 以上的BCC云服务器作为客户端,可满足大部分场景的压测需求。其他压测需求,可根据实际情况配置对应的BCC云服务器。 进行性能压测时,尤其是时延测试,需要保证BCC云服务器(客户端)和 PFS 处于同可用区。跨可用区测试的性能结果会和标准值有较大差异,不具备参考价值,应尽量避免。
关于不同云厂商和 BOS 间存储类型的对应关系,请查看 三方云和 BOS 存储类型对应关系 同名保留策略 保留源文件:若目的端中有源端同名文件,则仅保留源端文件,目的端同名文件全部被替换 保留目的文件:若目的端中有源端同名文件,则仅保留目的端文件,源端同名文件跳过 ACL权限设置 遵循目的Bucket权限:迁移文件的权限与目的Bucket权限保持一致 迁移源端文件权限:将源端文件的私有、公共读迁移到目的端
API概述 欢迎使用百度智能云文件存储CFS,您可以使用API对CFS做灵活的操作。如果您对CFS还不太了解,请参考 入门概述 。 如果您是初次调用百度智能云产品的API,可以观看 API入门视频指南 ,快速掌握调用API的方法。
下载文件 BOS Java SDK提供了丰富的文件下载接口,用户可以通过以下方式从BOS中下载文件: 简单流式下载 下载到本地文件 断点续传下载 范围下载 下载进度条 完整示例代码请参考 下载文件Demo 简单流式下载 用户可以通过如下代码将Object读取到一个流中: Java 复制 1 public void getObject ( BosClient client , String bucketName
备注 选填,填写配置文件的描述信息,不超过 200 个字符。 单击【确定】新建配置文件。 说明: 此时配置文件仅保存在 MSE 配置中心实例中,仍处于待发布状态,若您需要全量发布请参见 配置全量发布 。 编辑配置文件 在配置文件列表页面,单击目标配置文件操作列的【编辑】按钮。 对配置文件内容进行编辑之后,单击【确定】保存。 删除配置文件 在配置文件列表页面,单击目标配置文件操作列的【删除】按钮。
文件数配额 文件数配额默认设置为【不限制】,表示不限制Fileset最大可写入文件与目录数量;如需设置,需将文件数配额设置为【限制】,输入需要设置的参数。 说明 文件数配额为Fileset最多可写入的文件与目录数量,达到配额上限后无法再写入新数据。
应用场景 并行文件存储PFS推出生命周期功能,支持基于文件最后一次访问时间创建生命周期规则,定期对指定目录下的文件执行自动化数据治理操作,包括数据删除、数据转存、数据沉降。该能力适用于需要定期清理或分层管理长期未访问数据的场景,包括但不限于: AI 训练/大模型训练:训练过程中会生成大量中间训练产物、临时文件、检查点缓存等,这些文件在训练结束后通常无需长期保存。
一个文件系统实际存储空间是所有普通文件的实际存储空间之和。 CFS 不对除文件外的其它类型目录项,如文件夹、软链接、特殊文件等,进行收费。 一个普通文件的存储空间是如何计算的 CFS 将一个文件按照 1MB 作为一个基本的粒度进行分片。分片是 CFS 进行空间统计的一个基本单位,一个文件的存储空间就是所有分片存储空间的总和。
极速型L2 文件数配额 文件数配额为Fileset最多可写入的文件与目录数量,达到配额上限后无法再写入新数据,文件数配额必须大于文件数预分配配额。 极速型L2 文件数预分配配额 为优化性能体验,PFS文件系统会为Fileset预分配一定的inode,预分配配额会随着文件的写入自动扩容但不会超过文件数配额,预分配配额不支持缩容。通常情况下,无需关注或调整此配额。
容量配额不能超过PFS文件系统实例总容量。 文件数配额 文件数配额为Fileset最多可写入的文件与目录数量,达到配额上限后无法再写入新数据。 单个Fileset文件数配额最高可设置为30亿(超过请提 工单 ),所有Fileset的文件数配额总额 < 实例总可用文件数,其中每1TB理论可提供8000万可用的文件数。