如何选用CFS、BOS和CDS 本文介绍文件存储CFS与对象存储BOS、云磁盘CDS的区别,帮助您更好地选用合适的百度智能云存储服务,主要区别如下表所示。 对比项 文件存储CFS 对象存储BOS 云磁盘CDS 特点 文件存储是一种基于层级目录结构的存储方式,数据以文件的形式保存,并且通过目录和文件路径进行访问,类似传统本地文件系统。它支持POSIX标准的操作,如读写权限管理等。
根据需求配置存储容量,存储类型选择 对象存储 BOS ,输入 BOS Bucket 的存储路径,若输入的路径不存在系统会自动创建。 d. 输入保存 AK/SK 的 Secret 名称,并选择 Secret 所在命名空间。 e. 在确认配置弹窗中确认配置无误后,点击 确定 创建 PV。 创建存储声明 PVC。 a. 左侧导航栏选择 存储 > 存储声明 ,点击存储声明列表上方 新建存储声明 。 b.
按需计费+包年包月 是 生效中且未用尽 对于已绑定存储包且存储包未用尽的文件系统,您已经预先支付了存储包的费用。在账号欠费情况下,该文件系统状态仍为运行中,可正常使用,但您无法进行新建CFS、备份和购买存储包等操作。
使用 启动Druid相关服务,就可以用BOS作为deep storage存储数据了。
格式转换 概述 图片格式转换。 格式转换参数 action名称: format 参数 取值 说明 f jpg、png、bmp、webp、heic、gif、auto 指定目标图片的图片格式 如果值为 auto 则根据请求Header的 Accept 字段自动选择最优格式,当前支持自适应为 webp ,如果无法匹配则保持原
常见问题 SignatureDoesNotMatch 错误原因: AccessKey ID和AccessKey Secret不一致 版本不匹配。在v0.9.05版本之后,SDK会默认自动开启bucket virtual hosting。用户如果报错签名不对,可能是sdk版本过旧导致请求没有正确拼接成四级域名 客户侧网络
删除文件 可参考如下代码删除单个Object: Plain Text 复制 1 client.delete_object(bucket_name, object_name)
性能测试 测试数据: 107GB 数据集,1,000,000 张图片,平均每张 110KB 测试环境: 百度云 bcc.c5.c8m16,CPU 数 8 个,内存 16GB,内网带宽 3Gbps 数据集类型: 以 from_prefix 构建 BosIterableDataset 为例 测试结果: batch_size
格式转换 概述 本文介绍如何进行格式转换。 格式转换参数 参数名称 缩写命令 类型 取值范围 命令描述 缺省值 是否必选 format f string jpg、 png、 webp、 bmp 指定目标图片格式。 响应时对应的Content-Type 分别为image/jpeg、image /png、image/web
常见问题 常见问题 1. 上传报错:Caused by: java.io.IOException: Exception happens during upload:{10001=com.baidubce.BceServiceException: failed to upload part... 问题原因:上传文件体积过