BROKER-LOAD - Baidu Palo/Doris 使用文档
从 BOS 导入数据，使用通配符匹配两批两批文件。分别导入到两个表中。
专业词库管理 - 百度千帆·大模型服务及Agent开发平台
协同数据库 用户使用黑话词语进行数据库查询问答时，由于数据库的表头和内容均不存在黑话，而是用正规词语进行表述，并且大模型不知道黑话——专业词之间的对应关系，从而无法正确查询数据库，进而无法回答正确。 配置专业词库后，模型可通过专业词库中的词条改写用户问题，将用户原始问题中的行业黑话转换成标准含义，或添加释义，干预知识问答，提高数据库查询准确率，提升回答效果。
CREATE ROUTINE LOAD - Baidu Palo/Doris 使用文档
10 最后会在其他 ETL 处理流程中被过滤。但不会被 strict mode 过滤。 <timezone> 指定导入作业所使用的时区。默认为使用 Session 的 timezone 参数。该参数会影响所有导入涉及的和时区有关的函数结果。 timezone = Asia/Shanghai <format> 指定导入数据格式，默认是 csv，支持 json 格式。
CREATE JOB - Baidu Palo/Doris 使用文档
权限控制 执行此 SQL 命令的用户必须至少具有以下权限： 权限（Privilege） 对象（Object） 说明（Notes） ADMIN_PRIV 数据库（DB） 目前仅支持 ADMIN 权限执行此操作 注意事项 TASK 只保留最新的 100 条记录。 目前仅支持 INSERT 内表 操作，后续会支持更多的操作。
功能发布记录（2024年及以前） - 百度千帆·数据智能平台DataBuilder | 百度智能云文档
离线作业组开发支持作业组嵌套调度。 数据源管理、数据集成、数据开发支持数据库多版本选择。 2022-12 数据湖计算支持Hudi，可使用计算引擎Spark、Flink、Trino对Hudi进行读写计算。 数据湖选型支持Hive，增加开启数据湖元数据功能，支持对Hive元数据的管理、授权。 新增规范设计模块，支持通过主题设计、数仓规划进行数据中台架构设计。
严格模式 - Baidu Palo/Doris 使用文档
而如果是关闭状态，则会导入 null 。 10 虽然是一个超过范围的值，但是因为其类型符合 decimal 的要求，所以严格模式对其不产生影响。 10 最后会在其他导入处理流程中被过滤。但不会被严格模式过滤。
同步物化视图 - Baidu Palo/Doris 使用文档
单表上过多的物化视图会影响导入的效率：导入数据时，物化视图和 Base 表的数据是同步更新的。如果一张表的物化视图表过多，可能会导致导入速度变慢，这就像单次导入需要同时导入多张表的数据一样。 物化视图针对 Unique Key 数据模型时，只能改变列的顺序，不能起到聚合的作用。因此，在 Unique Key 模型上不能通过创建物化视图的方式对数据进行粗粒度的聚合操作。
VectorDB+ RAG 构建 AI Search 服务 - 千帆AI应用开发者中心-开始使用qianfan-docs | 百度智能云文档
用于存储文档的元数据以及文档块内容 30 db_name = DocumentInsight # 向量数据库的库名 31 meta_table_name = KnowledgeBase_Meta # 存储文档元数据的表 32 chunk_table_name = KnowledgeBase_Chunk # 存储文档块的表 33 # 向量数据库中创建对应表 34 meta_table =
备份与恢复 - Baidu Palo/Doris 使用文档
当用户提交 Backup 请求后，系统内部会做如下操作： 快照及快照上传 快照阶段会对指定的表或分区数据文件进行快照。之后，备份都是对快照进行操作。在快照之后，对表进行的更改、导入等操作都不再影响备份的结果。快照只是对当前数据文件产生一个硬链，耗时很少。快照完成后，会开始对这些快照文件进行逐一上传。快照上传由各个 Compute Node 节点并发完成。
Variant - Baidu Palo/Doris 使用文档
Variant VARIANT 类型可以存储半结构化的 JSON 数据，允许存储包含不同数据类型（如整数、字符串、布尔值等）的复杂数据结构，而无需在表结构中预先定义具体的列。该类型特别适合处理复杂的嵌套结构，这些结构可能会随时发生变化。在写入过程中，VARIANT 类型能够自动推断列的结构和类型，动态合并写入的 schema，并通过将 JSON 键及其对应的值存储为列和动态子列。
