上传lambda代码 :上传代码必须为zip格式,处理程序填写Go文件的文件名 配置触发器 :我们选择S3触发器,进一步选择需要监听的S3存储桶,还能通过object前后缀缩小监听事件范围;添加之后会看到触发器内容为:存储桶: s3/bucket-name 事件类型: ObjectCreated 保存配置,用户每次上传object到S3 bucket,就会执行上传的Go lambda代码,同步该object
userQuota 请求体参数 请求体字段数据结构说明 响应体参数 响应体字段数据结构说明 参数名称 参数类型 描述 示例值 maxBucketCount Long 额度设置中的最大可创建Bucket数,若为-1,表示无限制 50 maxCapacityMegaBytes Long 额度设置中的最大存储容量限制,若为-1或0,表示无限制 12334424 请求示例 { }`, `56449867192949465000
系统策略,主用户对子用户授予后,子用户可对主用户名下所有CFS资源进行相应的操作能力,共有如下三种系统策略: CFSFullControlAccessPolicy:管理百度智能云文件存储服务(CFS)的权限。 CFSOperateAccessPolicy:运维百度智能云文件存储服务(CFS)的权限。 CFSReadOnlyAccessPolicy:只读百度智能云文件象存储服务(CFS)的权限。
在BML平台使用并行文件系统PFS和对象存储BOS 在BML平台使用并行文件系统PFS 平台支持用户在用户资源池上关联 并行文件存储PFS 作为建模任务时的数据存储,当前支持使用并行文件系统PFS提交的任务: 自定义作业-训练作业任务、自动搜索作业任务 前提条件 用户在平台上已经挂载了容器引擎CCE资源作为用户资源池,点击了解 容器引擎CCE ; 用户已经创建了并行文件系统PFS,点击了解 并行文件系统
CLASS_PATH = ( %s/lib/*:%s/plugin/reader/hdfsreader/libs/*:%s/plugin/writer/hdfswriter/libs/*:. ) % ( DATAX_HOME, DATAX_HOME, DATAX_HOME ) 开始 示例 将 {your bucket} 下的 testfile 文件读出并写入到 {your other bucket} 存储桶
对象存储管理 对象存储管理 想要实现应用之间上传文件存储位置的隔离?可以尝试在应用下添加对象存储资源,并在应用下相应的上传配置中选择想要的对象存储资源即可。 编辑对象存储 可以在应用开发的【对象存储】页面进行对象存储资源的新增、修改、删除、设置默认对象存储、启用/禁用操作。
与对象存储BOS的关系 您通过数据流转平台 CloudFlow,最终以对象形式将数据存储到百度智能云对象存储 BOS。CloudFlow 支持三方云对象存储数据迁移到 BOS,也支持通过月光宝盒设备寄送的方式将本地数据上传到 BOS。 通过CloudFlow在线服务进行三方云数据迁移 通过Cloudflow月光宝盒进行本地数据上云
获取Bucket的访问权限 接口说明 本接口用来获取某个Bucket的访问权限。 在线调试 请求URI GET /v1/{bucketName}/?acl 参数名称 参数类型 是否必须 描述 示例值 参数位置 bucketName String 是 bucket名称 bucketName_example Path 请求体参数 请求体字段数据结构说明 响应体参数 响应体字段数据结构说明 参数名称
设置Bucket的访问权限 接口说明 本接口用于设置Bucket的访问权限。目前BOS支持两种方式设置ACL。第一种是使用CannedAcl,在PutBucketAcl的时候,通过头域的“x-bce-acl 来设置,当前可设置的权限包括:private, public-read, public-read-write(大小写敏感)。第二种方式是上传一个ACL文件,文件格式参见 ACL文件格式 。 注
获取Object的访问权限 接口说明 此命令用来获取某个Object的访问权限。 请求URI GET /v1/{bucketName}/{objectKey}?acl 参数名称 参数类型 是否必须 描述 示例值 参数位置 bucketName String 是 bucket的名称 bucketName_example Path objectKey String 是 object的名称 obj