Flink 使用指南 Flink flink-bos-hadoop 是百度云对象存储系统 BOS 针对 Flink 的文件系统实现,并且支持了 recoverwriter 接口,Flink 可以基于该文件系统实现读写 BOS 上的数据以及作为流应用的状态后端。 安装 1.Flink 环境准备 以 1.15.0 版本为例。
资源包类型 地域 说明 标准存储包 中国大陆 中国香港 不同地域售卖的资源包,价格会有所不同 低频存储包 中国大陆 中国香港 不同地域售卖的资源包,价格会有所不同 冷存储包 中国大陆 不同地域售卖的资源包,价格会有所不同 归档存储包 中国大陆 目前提供 1 月包、3 月包、半年包、一年包、两年包、三年包共6种规格 外网下行流量包 中国大陆 中国香港 目前提供 1 月包、3 月包、半年包、一年包、两年包
否 fetch模式下回源存储类型,例如STANDARD 字符串 passHeaders 透传的header 否 请求源站时将透传的header,若设置为[ * ]则表示透传全部header 列表 ignoreHeaders 忽略的header 否 请求源站时将忽略的header 列表 customHeaders 自定义header 否 请求源站时自定义携带的header 列表 响应(Response
BOS支持系统Meta和自定义Meta。系统Meta是由BOS维护的Meta信息如Content-Length、Last-Modified。自定义Meta是以”x-bce-meta-“开头的<key,value>对。您可以通过自定义meta来保存您希望存储的额外文件属性如x-bce-meta-owner: xiaoming。 如何更新Meta信息,例如Content-type?
注意事项 自定义域名中不得包括协议、端口和路径,而应只包含域名本身。 每个 Bucket 最多可添加并绑定 200 个不同的自定义域名。 一个域名只能绑定在单个bucket上。 创建自定义域名 登录 BOS 管理控制台 ,进入全局概览页面。 在 BOS 控制台左侧的导航栏的Bucket列表中选择目标 Bucket名称 ,点击打开该 Bucket 的文件列表页。
Alluxio 统一了存储在这些不同存储系统中的数据,为其上层数据驱动型应用提供统一的客户端 API 和全局命名空间。 通过Alluxio使用BOS的优势 Alluxio内存至上的层次化架构使得对BOS数据的访问能够更便捷,对于频繁访问的数据,大幅减少对BOS接口的请求次数。
鉴权配置:为保护监控设备及推流地址不被盗链播放和非法占用,EVS提供推流鉴权功能,国标空间支持实时观看鉴权、实时观看鉴权密钥、URL有效时间。 录像回放配置:配置录像回放功能可以存储监控设备的历史流,支持用户对历史录像进行回看,支持周期录制、循环定时录制或指定时间录制。选择录像存储位置,存储bucket所在区域必须跟空间接入区域保持一致,否则录像存储功将无法正常工作。
而在实际应用中,会经常遇到跨域访问的请求,例如,用户的网站A( http://domainA.example )后端使用了BOS存储,用户想在该网站的Web应用程序中引用存储在BOS上的资源,但该页面只能向网站域名 http://domainA.example 发起请求,向其他网站发送的请求均会被浏览器限制。
使用文件存储CFS 容器引擎 CCE 支持通过创建 PV/PVC,并为工作负载挂载数据卷方式使用百度智能云 文件存储CFS 。本文将介绍如何在集群中动态和静态挂载文件存储。 使用限制 创建的 CFS 实例和挂载点须和集群节点在同一 VPC 内。 前提条件 创建 CFS 实例,具体操作请参见 创建文件系统 。 添加 CFS 挂载点,具体操作请参见 添加挂载点 。
K 获取 Bucket 的 region 信息,具体如下: 通过控制台查看 Bucket 所属的区域: 登录 对象存储 BOS 管理控制台 。 您可以在控制台页面左侧“存储管理”中点击您想查看的 Bucket,在右侧 Bucket 详细信息的标题栏,即可查看 Bucket 区域信息。