使用NimoShake将Amazon DynamoDB迁移至百度云DocDB - 数据传输服务DTS | 百度智能云文档
前提条件 源端DynamoDB准备工作： 授权以编程方式访问DynamoDB：您可以参考 此文档 目标端百度云MongoDB准备工作： 已经创建百度云MongoDB实例，详情请参见创建副本集实例或创建分片集群实例。 背景信息 本文档主要介绍NimoShake工具及其使用方法。NimoShake主要用于从DynamoDB进行迁移，目的端支持MongoDB。更多详情请参见NimoShake介绍。
十分钟明白GaiaDB架构 | 百度智能云
数据是由数据存储节点 （PageServer） 从LogService拉取日志并回放。 从节点：处理只读负载。从 PageServer 拉取最新的数据。 这样的设计具有以下 优势 ： 计算节点无状态，弹性快速扩容。计算层节点无持久化数据：本地文件不复存在，包括日志文件，所以支持快速扩容，大概在30秒内就能快速创建从节点并提供服务。 只有单机事务，没有分布式事务问题。
SQL转储 - MapReduce BMR_全托管Hadoop/Spark集群
SQL转储 SQL转储 ClickHouse 可以通过多种方式轻松集成到OLTP数据库基础架构中。一种方法是使用SQL转储在其他数据库和ClickHouse之间传输数据。 创建SQL转储 可以使用SQLInsert以 SQL格式转储数据。ClickHouse将在 INSERT INTO C;table name> VALUES(...
JSON - Baidu Palo/Doris 使用文档
CSV 格式导入 第 1 步：准备数据 创建如下的 csv 文件： test_json.csv 其中分隔符使用 | 而不是逗号，以便和 json 中的逗号区分。
数据目的地 - 物联网核心套件IoTCore | 百度智能云文档
时序数据库是最适合存储设备属性、状态类时序数据的数据库，设备数据持久化存储到 TSDB，业务应用从数据库中查询数据完成业务操作。 操作流程 写入时序数据的数据格式必须符合时序数据库写入接口的要求，即设备上报的原始消息 经过查询语句的转换 之后必须符合如下示例格式，才能正常写入，否则不能被成功写入 TSDB。具体的转换语句可参考《常用查询语句示例》章节。
JSON - Baidu Palo/Doris 使用文档
CSV 格式导入 第 1 步：准备数据 创建如下的 csv 文件： test_json.csv 其中分隔符使用 | 而不是逗号，以便和 json 中的逗号区分。
湖仓一体概述 - Baidu Palo/Doris 使用文档
那么之前可能是有 8 次的小的 IO 请求，我们可以把 8 次合并成 5 次 IO 请求去去读取数据。这样减少了网络 IO 请求的速度，提高了网络访问数据的效率。 Merge IO 的确定是它可能会读取一些不必要的数据，因为它把中间可能不必要读取的数据合并起来一块读过来了。但是从整体的吞吐上来讲其性能有很大的提高，在碎文件（比如：1KB - 1MB）较多的场景优化效果很明显。
连续归档和时间点恢复（PITR） - Baidu Palo/Doris 使用文档
要做切换的原因是让在备份期间写入的最后一个WAL段文件能准备好被归档。 pg_stop_backup 将返回一个具有三个值的行。这些域的 第二个应该被写入到该备份根目录中名为 backup_label 的文件。第三个域应该被写入到一个名为 tablespace_map 的文件，除非该域为空。这些文件对该备份正常工作来说是至关重要的，不能被随意修改。
元数据缓存 - Baidu Palo/Doris 使用文档
淘汰时间 缓存对象写入缓存一段时间后，该对象会被自动从缓存中移除，下次访问时，会重新从数据源拉取最新的信息并更新缓存。 比如用户在 08:00 第一访问表 A，并写入缓存。若淘汰时间为 4 小时。则在没有因容量问题被汰换的情况下，用户在之后的 08:00-14:00 之间，都会直接访问缓存中的表 A。14:00 后，缓存被淘汰。若用户再次访问表 A，会从数据源拉取最新的信息并更新缓存。
sd_dumpall - Baidu Palo/Doris 使用文档
14 15 由于 ` sd_dumpall ` 从所有数据库读取表，因此您很可能必须以数据库管理员身份连接才能产生完整的转储。另外，您将需要数据库管理员特权才能执行保存的脚本，以便被允许添加用户和组以及创建数据库。 16 17 SQL脚本将被写入标准输出。 使用 ` [ -f | --file ] ` 选项或shell运算符将其重定向到文件中。
