properties 如果ENGINE类型为olap,则可以在properties中指定行存或列存 如果ENGINE类型为olap,且没有指定partition信息,可以在properties设置存储介质、存储到期时间和副本数等属性。
读取行数 任务从源端读取的数据行数。 写入行数 任务向目标端写入的数据行数。 读取大小 任务从源端读取的数据量大小。 写入大小 任务向目标端写入的数据量大小。 操作 单击详情按钮,展开表详情信息。在表详情可详细可视化的查看表读写速率和数据增量,通过时间段或行数据量(行/MB)进行筛选查看。
查找缓存最大行数 选填 none Long 查找缓存的最大行数,超过此值,最旧的行将会过期。 查找部分缓存缺少键 选填 true Boolean 标记缓存丢失的密钥,默认为 true 查找最大重试数 选填 3 Integer 查找数据库失败时的最大重试次数。
使用须知 要连接到 PostgreSQL 数据库,您需要 PostgreSQL 11.x 或更高版本 PostgreSQL 数据库的 JDBC 驱动程序,您可以从 Maven 仓库下载最新或指定版本的 PostgreSQL JDBC 驱动程序。推荐使用 PostgreSQL JDBC Driver 42.5.x 及以上版本。
分区表不能统计存储大小、文件总数、行数 湖格式的表(Iceberg、Hudi、Delta Lake)不能统计存储大小、文件总数、行数 字段信息 展示表的字段信息和分区信息,包括字段类型、关联标准、是否允许为空、密级配置、描述等信息。 版本管理 每次保存元数据信息新增一个版本。
分区表不能统计存储大小、文件总数、行数 湖格式的表(Iceberg、Hudi、Delta Lake)不能统计存储大小、文件总数、行数 字段信息 展示表的字段信息和分区信息,包括字段类型、关联标准、是否允许为空、密级配置、描述等信息。 版本管理 每次保存元数据信息新增一个版本。
SQL Server 数据库的 JDBC 驱动程序,您可以从 Maven 仓库下载最新或指定版本的 SQL Server JDBC 驱动程序。推荐使用 SQL Server JDBC Driver 11.2.x 及以上版本。 PALO 每个 FE 和 BE 节点和 SQL Server 服务器之间的网络连接,默认端口为 1433。
SQL 语句从开始执行到结束所花费的时间,以秒为单位 状态 支持按照全部、EOF、EOF和OK进行筛选 扫描量(MB) SQL 语句在执行过程中从磁盘或缓存中读取的数据量,以兆字节(MB)为单位 扫描行 SQL 语句在执行过程中扫描的数据行数 返回行数 SQL 语句执行后返回的结果行 源地址 发起查询请求的源头的网络地址 FE IP 前端节点的 IP 地址 内存使用量(MB) 内存占用空间大小 异常流程处理
而另一个线程只处理了 几千行数据。
DELETE:删除所有与导入数据 key 列值相同的行。 MERGE:根据 DELETE ON 的条件决定 APPEND 还是 DELETE。