如何选择CFS和PFS 百度智能云文件存储 CFS 和并行文件存储 PFS 提供了多种规格的文件系统,本文从规格、计费、性能、功能、协议/接口、使用限制、应用场景等方面介绍了 CFS 和 PFS 的对比情况,您可以根据实际业务需求选择合适的文件系统。 类别 文件存储 CFS 并行文件存储 PFS 概述 类 NAS 存储产品,支持标准文件访问协议(NFS 和 SMB),主要用于数据共享访问场景。
数据流动(标准型、增强型和极速型) 适用范围 仅适用于标准型,增强型和极速型。 应用场景 随着人工智能、自动驾驶和基因测序等新兴业务的兴起,非结构化数据量呈指数级增长。为了存储这些数据,越来越多的业务选择对象存储,但由于接口类型、性能等多种因素,应用程序往往更倾向于使用并行文件存储来进行数据计算与训练。为解决这一问题,数据流动功能实现了对象存储和并行文件存储PFS之间的对接和打通。
内容审核平台 MapReduce 流式计算 BSC 数据可视化 Sugar BI Elasticsearch 数据仓库 Palo Doris版 日志服务 BLS 消息服务 数据湖管理与分析平台EasyDAP 短信服务 SMS 号码隐私保护服务 PNS 号码认证服务 音视频处理 短视频SDK 媒体内容分析 音视频直播 实时音视频RTC 智能视联网平台 多模态媒资检索 智能点播平台 智能直播平台 云虚拟主机
跨区域使用文件系统操作步骤 以下示例假设需要在“华北-北京”和“华南-广州”之间跨地域访问文件系统,创建的文件系统在“华南-广州”,两边需要打通的 VPC 名字分别为“test_vpc_bj”和 test_vpc_gz 。
挂载访问问题(标准型、增强型和极速型) 适用范围 本文仅适用于标准型、增强型和极速型。 挂载PFS文件系统时,返回“Failed to domnload..”错误该如何处理? 挂载PFS文件系统时,如果返回类似报错信息,表示PFS存储集群中没有待挂载客户端内核对应版本的ko文件,导致客户端挂载时失败。
指标含义(标准型、增强型和极速型) 适用范围 仅适用于标准型、增强型和极速型。
通过Terraform这种基础设施架构自动化编排工具,能够很好的解决上述问题,Terraform能够创建配置文件的模板,以可重复、可预测的方式定义和预配百度智能云上的资源,减少人为因素导致的部署和管理错误。能够多次部署同一模板,创建相同的开发、测试和生产环境。 需求场景 面向企业IT人员(提升云上资源的管理维护效率) 可以用代码来管理维护您的CFS资源。
其他压测需求,可根据实际情况配置对应的BCC云服务器。 进行性能压测时,尤其是时延测试,需要保证BCC云服务器(客户端)和 CFS 处于同可用区。跨可用区测试的性能结果会和标准值有较大差异,不具备参考价值,应尽量避免。 背景信息 推荐使用 FIO 工具测试CFS,不同工具测试的CFS性能会有差异,难以反映真实性能。
在文件信息弹框中配置以下参数,然后单击【复制链接】。 参数 说明 链接有效时间 当目标文件为私有文件时,需设置文件URL的有效时间。取值范围:1-43200分钟,-1 为永久有效 选择域名 默认为官网域名,仅当Bucket绑定自定义域名后可配置此项。更多信息,请参见 创建自定义域名 。 批量获取文件 URL 在文件列表页中勾选多个目标文件,选择上方【批量操作】中【导出url】。
其他压测需求,可根据实际情况配置对应的BCC云服务器。 进行性能压测时,尤其是时延测试,需要保证BCC云服务器(客户端)和 CFS 处于同可用区。跨可用区测试的性能结果会和标准值有较大差异,不具备参考价值,应尽量避免。 背景信息 推荐使用 FIO 工具测试CFS,不同工具测试的CFS性能会有差异,难以反映真实性能。