数据导出概述 数据导出功能,用于将查询结果集或者 PALO 的表数据,使用指定的文件格式,写入指定的存储系统中的。
等需要单机处理的算子) 支持且并发高(支持 Tablet 粒度的并发导出) 不支持,只能单线程导出 支持导出的数据格式 Parquet、ORC、CSV Parquet、ORC、CSV MySQL Dump 专有格式 是否支持导出外表 支持 部分支持 不支持 是否支持导出 View 支持 支持 支持 支持的导出位置 S3、HDFS S3、HDFS LOCAL SELECT INTO OUTFILE
全量数据导出 全量数据导出(Export)是 PALO 提供的一种将数据导出的功能。 该功能可以将用户指定的表或分区的数据,以文本的格式,通过 Broker 进程导出到远端存储上,如 HDFS/BOS 等。 本文档主要介绍 Export 功能的基本使用方式。 功能介绍 Export 功能是一个异步执行的作业。
当数据库实例负载高时,可能会丢失少量记录,因此通过 SQL 洞察来统计增量数据可能出现不准确的情况。 操作步骤 登录 DBSC 控制台 。 在左侧导航栏,点击 诊断优化—>SQL 洞察 。 进入 SQL 洞察页面后,在左上方选择要查看的实例。
当数据库实例负载高时,可能会丢失少量记录,因此通过 SQL 洞察来统计增量数据可能出现不准确的情况。 操作步骤 登录 DBSC 控制台 。 在左侧导航栏,点击 诊断优化—>SQL 洞察 。 进入 SQL 洞察页面后,在左上方选择要查看的实例。
创建数据库和账号 用户在控制台创建RDS实例之后,继续在其中创建需要的数据库和账号并分配对应的读写权限。具体内容请参考 创建数据库 和 创建账号 。 用户数据导出 3.1 使用pg_dump导出用户数据 使用pg_dump工具从用户的PostgreSQL数据源中导出需要导入RDS实例中的数据文件(本步骤仅导出数据,不包括存储过程、触发器及函数)。
在导出数据之前,用户应先 开通对象存储服务 并 创建Bucket 。 导出数据的具体操作如下: 选择“产品服务>时序数据库TSDB”,进入“数据库列表”页面。 点击数据库名称,进入数据库详情页面;点击“导入导出>导出>手动导出数据”页签,进入导出操作页面。 点击“创建导出”,在弹出窗口配置以下信息,包括: 导出地址:存放导出文件的BOS Bucket地址。
创建数据库和账号 用户在控制台创建RDS实例之后,继续在其中创建需要的数据库和账号并分配对应的读写权限。具体内容请参考 创建数据库 和 创建账号 。 用户数据导出 3.1 使用pg_dump导出用户数据 使用pg_dump工具从用户的PostgreSQL数据源中导出需要导入RDS实例中的数据文件(本步骤仅导出数据,不包括存储过程、触发器及函数)。
3.3 可编程对象 可编程对象支持云数据库RDS、云原生数据库GaiaDB两种产品类型,支持View、Procedure、Event、Trigger、Function等五种可编程对象。 4.数据导出 支持数据库导出、SQL结果集导出等多种类型,支持发起的任务、预检查、审批、导出等全流程管理。
导出: 对应授权对象在 数据导出 (包括数据库导出、SQL结果集导出)的权限。 操作指南 申请权限 登录 DMS 。 点击[权限中心]下的[ 权限申请 ]。 点击 +权限申请 按钮。 先后填写产品类型、地域、实例名称/ID、任务名称、权限类别。 在 选择要申请权限的库/表 中输入要申请的数据库对象前缀,点击 搜索 。 选中要申请的数据库对象,点击 >添加 按钮。 填写权限类型、有效期、申请原因。