Hive访问HBase数据。 从Hive提示符中运行时,以下示例创建了一个外部表,此表引用了存储在名为 hive_hbase 的HBase表上的数据。然后,您可直接引用Hive语句中的 pagecounts_hbase ,查询和修改存储在HBase集群上的数据。
海量存储 单个 CDS 实例目前最大支持 32 TB 容量,用户可根据存储需求为云服务器挂载多个 CDS 实例,实现数据的海量存储需求。同时 CDS 作为块级设备服务,无数据结构要求,用户可用于存放任意形态的海量静态或动态数据。 多种磁盘类型 CDS 提供了多种磁盘类型,可以支持不同场景的 I/O 存储服务。您可以根据业务需要直接创建合适的云磁盘进数据存储。
获取Bucket指定id数据同步的进程状态 接口说明 本接口用来获取指定id的数据同步复制的进程状态。 请求URI GET /v1/{bucketName}/?
使用SFTP上传下载CFS文件系统数据 本文档介绍如何使用SFTP上传和下载CFS文件系统上的数据。 前提条件 在CFS文件系统所在地域,已购买 云服务器BCC 实例(以下介绍将以CentOS操作系统为例),详细请参见 创建BCC实例 。 背景信息 SFTP的传输速度依赖于BCC的外网带宽,请根据业务需求配置适当的网络带宽。
PFS数据备份到BOS 适用场景 适用于将并行文件存储PFS(标准型、增强型、极速型、极速型L2)中的重要数据定期备份到对象存储BOS中。 前提条件 已创建对象存储BOS Bucket,请参见 创建Bucket 。
实践步骤 以用户上传视频、图片等二进制文件为例,使用 CDN 动态加速上传数据到 BOS 的存储方案可以对上传过程优化,在有限增加成本的情况下提升上传速度和上传体验。
使用PFS作为数据来源提交作业建模任务 在提交作业建模任务时,选择用户资源池后,支持选择该资源池中引入的BOS存储或者PFS存储作为数据来源。 挂载数据和编辑代码时需要注意:平台仅能使用挂载路径下的文件,请确保您的相关文件在此挂载路径之下。 操作及代码示例 前提条件 平台上的用户资源池已经成功挂载PFS。
数据流动(极速型L2) 适用范围 仅适用于极速型L2。 应用场景 随着人工智能、自动驾驶和基因测序等新兴业务的兴起,非结构化数据量呈指数级增长。为了存储这些数据,越来越多的业务选择对象存储,但由于接口类型、性能等多种因素,应用程序往往更倾向于使用并行文件存储来进行数据计算与训练。
说明 : 开通 BOS 需要实名认证,每个账户只需认证一次; 首次使用 BOS 时,需开通 BOS 服务; BOS 支持按需计费的后付费和存储包形式的预付费两种付费形式。 控制台概述 BOS 控制台基于 Bucket 进行管理,将数据传输、数据存储、数据处理和数据分发 4 个环节有机融为一体。
同账户下不同PFS实例间的数据迁移 适用场景 适用于同VPC下并行文件存储PFS( 标准型、增强型、极速型、极速型L2)之间的数据传输。 基本原理 将PFS挂载至BCC中当做本地目录,利用cp、rsync等进行数据传输。 操作步骤 第一步:在同一VPC及可用区内创建BCC及PFS,并将PFS挂载至BCC中。 BCC创建方式请见: BCC创建实例 。