获取Bucket指定id数据同步的进程状态 接口说明 本接口用来获取指定id的数据同步复制的进程状态。 请求URI GET /v1/{bucketName}/?
存储配置 选择存储配置,用于存储本租户下Catalog、Schema、Table、Volume所托管的数据。路径长度限制:1~500字节。 描述 输入元存储描述。字数在200字以内。 编辑元存储 :创建完成后元存储信息会展示在当前页面,可以对当前元存储管理员进行修改。 删除元存储 :在元存储页面单击删除按钮,系统弹出确认页面,确认无误后单击删除,元存储删除完成。
下面介绍一下大规模数据存储的范畴,也就是说,当我们做大规模数据存储的时候我们要考虑哪些东西。 我认为可以分为两个圈层,第一个圈层是存储比较偏核心的一些东西,下面介绍一下。首先是模型和组织,我们要对数据建立合理的存储模型和访问模型,并进行合理的组织和结构化。 同时我们要提供访问的接口与协议,还有各种访问方式等等。然后我们还需要管理数据的分布、数据的分区以及数据的复制。
配置项 配置描述 数据源端 选择迁移的源端,此处数据源端应选择文件存储 待迁移路径 待迁移路径需填写文件系统挂载的本地路径,且需要以/开头且以/结尾的觉得路径,例如:/mnt/test1/ 需确认待迁移路径并不包含agent所在路径 目的端设置 您需要迁移目的端信息进行设置。
存储路径申请 存储路径是指,数据湖指定的存储路径,用于数据表数据存储。 通过“存储路径申请”功能,普通用户可以申请访问和操作特定存储路径的权限,确保数据安全并防止未经授权的访问。授权时长可根据需要灵活设置,以满足不同场景的需求。 存储路径申请 单击权限申请按钮,弹出批量申请弹窗,用户可选择特定的存储路径并为其申请读取、写入、创建和管理权限。
说明:RapidFS不支持限制存储容量,容器实际可访问的为数据源绑定的BOS存储桶目录。)
用户自定义元信息 BOS支持用户自定义元数据来对Object进行描述。
Hive访问HBase数据。 从Hive提示符中运行时,以下示例创建了一个外部表,此表引用了存储在名为 hive_hbase 的HBase表上的数据。然后,您可直接引用Hive语句中的 pagecounts_hbase ,查询和修改存储在HBase集群上的数据。
借助BOS进行数据迁移 适用场景 无法在百度云与IDC或三方云之间打通网络(如专线等),且需要将本地IDC或三方云的数据上传至PFS中。 操作步骤 第一步:先将本地数据/三方云数据迁移至BOS中,详见: 对象存储BOS数据迁移 第二步:利用BOS工具将数据从BOS迁移至PFS,详见: BOS与PFS之间的数据迁移
PFS数据备份到BOS 适用场景 适用于将并行文件存储PFS(标准型、增强型、极速型、极速型L2)中的重要数据定期备份到对象存储BOS中。 前提条件 已创建对象存储BOS Bucket,请参见 创建Bucket 。