百度云原生数据库GaiaDB的HTAP与多地多活技术实践 | 百度智能云
在2023云数据库技术沙龙 “MySQL x ClickHouse” 专场上，百度数据库资深技术专家邱学达，为大家分享一下《百度云原生数据库GaiaDB的HTAP与多地多活技术实践》的一些技术内容。 邱学达，百度数据库资深技术专家，主要负责分布式架构设计与数据库内核特性设计和开发。多年数据库与分布式存储开发经验，专注于分布式高可用+高可靠架构设计与云原生化改造。
基本概念 对象存储（BOS）
一个用户最多可创建 100 个 Bucket，但每个 Bucket 中存放的 Object 的数量和大小总和没有限制，用户不需要考虑数据的可扩展性。 文件/对象（Object） 在 BOS 中，用户操作的基本数据单元是 Object。每个 Object 包含 Key、Meta 和 Data。
计费案例 对象存储（BOS）
案例二：归档存储+数据访问 王先生 1 月 1 日在 BOS 内存储了 1200 GB （1 TB + 176 GB）的归档存储类型文件。存储空间所在地域为华北-北京，每小时的请求数均值为 1000 次。6 月 20 号的时候，王先生下载了一个大小为 10 GB 的文件到本地，并将文件内容更新之后重新上传至 BOS，更新后的文件大小仍为 10 GB。
Bucket概览 对象存储（BOS）
概览模块 数据指标 指标含义 用量数据饼状图 存储用量 该 Bucket 总容量，以及标准存储、低频存储、冷存储和归档存储各自的空间占用大小 本月流量 该 Bucket 本月已使用的总流量，包括外网数据流出流量、CDN 回源流出流量和跨区域数据流出流量 本月请求 该 Bucket 在本月的总请求数、读请求数和写请求数，其中： 读取次数为读取该 Bucket 的次数，包括所有发给该 Bucket 的
设置存储空间清单 对象存储（BOS）
包含 key（清单文件的名称）、size（清单文件的大小）、md5Checksum（该文件的 md5 值） Manifest 报告示例如下： { "sourceBucket": "src-bucket-name", "destinationBucket":"destination-bucket-name", "
MySQL实例配置典型实践 - 云数据库RDS | 百度智能云文档
磁盘容量的选择 百度RDS MySQL为用户提供了从5GB到3000GB容量的本地高性能SSD磁盘存储，用户可以根据实际的业务需要选择合适的磁盘大小。 建议：选择套餐时用户需要考虑随着业务的增长，对数据库的数据处理和存储要求会随之增长。当然，百度RDS for MySQL也提供了套餐升级功能，用户可以随时对RDS-for-MySQL套餐配置进行调整和更改。
初始化 对象存储（BOS）
BosClient ( config ) 配置BosClient 设置网络参数 用户可以设置一些网络参数： #设置请求超时时间 bos_sample_conf . config . connection_timeout_in_mills = TIMEOUT #设置接收缓冲区大小 bos_sample_conf . config . recv_buf_size ( BUF_SIZE ) #设置发送缓冲区大小
数据湖系列之二 | 打造无限扩展的云存储系统，元数据存储底座的设计和实践
基于分布式事务数据库：上层维护了一层元数据语义层，该层将目录树操作转化为数据库事务请求。下层是 分布式数据库 ，负责元数据的存储管理，目录树中的每个 inode 节点对应数据库中的一行记录。此方案可以做到单集群文件数规模无上限，这也是目前的技术趋势，典型的实现如 Facebook Tectonic。 3.
ListParts 对象存储（BOS）
低频存储返回 STANDARD_IA ，冷存储返回 COLD ，标准存储返回 STANDARD ，归档存储返回 ARCHIVE ；如果是多AZ类型bucket，多AZ低频存储返回 MAZ_STANDARD_IA ，多AZ标准存储返回 MAZ_STANDARD 。
核心概念 对象存储（BOS）
一个用户最多可创建100个Bucket，但每个Bucket中存放的Object的数量和大小总和没有限制，用户不需要考虑数据的可扩展性。 Referer白名单 Referer白名单即准入列表，是一种基于HTTP header referer字段的防盗链方法，目的是防止用户存储在BOS上的数据被其他人盗链。用户可以通过BOS控制台设置Referer字段的白名单。
