数据处理介绍 概述 BOS 图片处理是一项基于 BOS 核心存储业务的图片应用类服务,可提供灵活、多样、实时的图片处理服务。您只需要将原始图片上传到 BOS,通过在原始图片的请求中添加处理参数,即可实时地得到处理结果图。BOS 图片处理服务包括图片缩略、裁剪、格式转换、旋转、加文字/图片水印等,处理结果图会实时返回。 您可以通过 BOS 控制台和 API 方式对存储在 BOS 中的图片进行处理。
借助BOS进行数据迁移 适用场景 无法在百度云与IDC或三方云之间打通网络(如专线等),且需要将本地IDC或三方云的数据上传至PFS中。 操作步骤 第一步:先将本地数据/三方云数据迁移至BOS中,详见: 对象存储BOS数据迁移 第二步:利用BOS工具将数据从BOS迁移至PFS,详见: BOS与PFS之间的数据迁移
业内领先的分级存储 BOS 提供了业内领先的 多级分层存储 。用户可以选择标准存储作为主要存储方式,也可以根据不同访问频率选择成本更低、存储时间更长的的低频存储、冷存储和归档存储。 BOS 支持 生命周期管理 。用户可以通过配置生命周期规则,将到期的数据自动转换为相应类型,无需手动操作。 完善的API和开发工具 BOS 提供标准的 REST 接口,可与任何 Internet 开发工具包搭配使用。
对象存储BOS中,可以通过以下方法进行不同Bucket间数据复制。 1. 使用BOS提供 数据迁移与备份 功能,其可以把不同账号的数据进行迁移; 2. 使用bos周边工具,其提供了部分云平台数据迁移方式,如: bos import ,其可以实现跨账号迁移bos资源。 如何进行外部迁移? 外部资源迁移到对象存储BOS服务,可以通过以下方案操作: 1.
DeleteBucketLogging ( bucketName ) 服务端加密 设置服务端加密功能 用户可针对一个Bucket设置开启服务端加密的功能,所有存储到该Bucket的数据将会进行加密存储,保证数据安全性。 err := bosClient .
获取数据元信息 概述 数据元信息(Object Meta)是对上传到 BOS 的文件的属性描述,分为两种:系统定义的 Meta 和 User Meta(用户自定义元信息)。数据元信息可以在各种方式上传时或者拷贝文件时进行设置。
移除数据源 您可以在导入数据源后,对数据源进行移除。移除数据源会导致已导⼊的数据失效,但不会对对象存储BOS中的数据产生影响。 操作步骤 您可直接在左侧导航列中的【数据源】进行数据源导入操作,也可在实例详情页中将数据源导入当前缓存实例。 在数据源页面进行移除 在数据源列表中选择移除。 点击确认移除数据源。 在缓存实例页面进行移除 选择缓存实例进入实例详情页,在数据源管理列表中选择移除。
数据保留合规 BOS支持WORM(Write once read many)特性,允许用户以“不可删除、不可篡改”方式保存和使用数据,数据更加安全,可满足数据合规存储的需求。 BOS提供强合规策略,您可以针对Bucket设置基于时间的合规保留策略。当策略锁定后,用户可以在Bucket中上传和读取Object,但是在Object的保留时间到期之前,任何用户都无法删除或修改Object和策略。
同时,RapidFS 还提供计算节点 VPC 内的分层命名空间功能。通过 RapidFS 的缓存和分层能力,将大数据计算中的大规模批量操作如 Rename、List、Head 等操作的时延降低一个数量级,达到微秒级别,彻底突破传统对象存储支持大数据计算方案的延迟瓶颈。
数据流动(标准型、增强型和极速型) 适用范围 仅适用于标准型,增强型和极速型。 应用场景 随着人工智能、自动驾驶和基因测序等新兴业务的兴起,非结构化数据量呈指数级增长。为了存储这些数据,越来越多的业务选择对象存储,但由于接口类型、性能等多种因素,应用程序往往更倾向于使用并行文件存储来进行数据计算与训练。为解决这一问题,数据流动功能实现了对象存储和并行文件存储PFS之间的对接和打通。