【千帆大模型训练营】 大模型之高质量训练数据筹备全攻略 直播回放 千帆社区
本期课程从源头开始探索如何挖掘有价值的数据资源，介绍多种数据收集的有效途径、先进的数据清洗和预处理技术，以及数据标注方法，包括人工标注的最佳实践和自动化标注工具的使用。我们还将深入探讨数据增强技术，在不增加过多成本的前提下，极大扩充数据规模，丰富数据特征，从而提升其泛化能力与鲁棒性。 全部课程排期查看请详戳 ！
数据湖系列之二 | 打造无限扩展的云存储系统，元数据存储底座的设计和实践
Scale up 方面，提升系统处理单点数据 GC 和 compaction 的能力；Scale out 方面，尽可能将删除压力分散分解；防御反馈方面，力求在系统受到高压时，最大程度地保证系统稳定、缩小影响面并及时反馈，针对性地进行恢复。 Scale up： 重构系统 GC 模块，将单层全局 GC 扩展为多层次、特征化的 GC。我们根据业务场景和自身设计，采集了系统数据的多维度特征。
查看数据增强任务详情 - ModelBuilder
查看数据增强任务详情 功能介绍 用于查看数据增强任务详情。
支持的数据流 - 数据传输服务DTS | 百度智能云文档
全量迁移 增量同步 - 自建 PostgreSQL 版本：9.4、10.10 及以上 RDS PostgreSQL 全量迁移 增量同步 - 自建 Kafka 版本：0.9.0.1 以上 消息服务 Kafka 全量迁移 增量同步 MySQL 迁移至 Kafka 自建 Elasticsearch 版本：5.x、6.x、7.x、8.x 百度 Elasticsearch 全量迁移 增量同步 - 自建 Palo 数据仓库
查看数据清洗任务详情 - ModelBuilder
查看数据清洗任务详情 功能介绍 本接口用于查看数据清洗任务详情。
使用第三方镜像仓库 - 容器实例BCI | 百度智能云文档
使用第三方镜像仓库 使用第三方镜像仓库 BCI支持使用第三方镜像仓库，例如：自建镜像仓库，dockerhub及其他云厂商等第三方镜像仓库。 注意： 访问第三方镜像仓库会产生额外的公网流量费用，请确定BCI实例的EIP功能已打开 使用 BCI支持HTTP、HTTPS协议，并已经默认跳过TLS CA认证。
使用第三方镜像仓库 - 容器实例BCI | 百度智能云文档
使用第三方镜像仓库 使用第三方镜像仓库 BCI支持使用第三方镜像仓库，例如：自建镜像仓库，dockerhub及其他云厂商等第三方镜像仓库。 注意： 访问第三方镜像仓库会产生额外的公网流量费用，请确定BCI实例的EIP功能已打开 操作步骤 1.BCI支持HTTP、HTTPS协议，并已经默认跳过TLS CA认证。 2.
使用第三方镜像仓库 - 容器实例BCI | 百度智能云文档
使用第三方镜像仓库 使用第三方镜像仓库 BCI支持使用第三方镜像仓库，例如：自建镜像仓库，dockerhub及其他云厂商等第三方镜像仓库。 注意： 访问第三方镜像仓库会产生额外的公网流量费用，请确定BCI实例的EIP功能已打开 操作步骤 1.BCI支持HTTP、HTTPS协议，并已经默认跳过TLS CA认证。 2.
2021云智技术论坛——智能大数据专场
了解详情 百度数据仓库 Palo Doris版 数据仓库Palo Doris版是基于Apache Doris（百度自研的分析型数据库引擎）构建的企业级MPP云数据仓库，Palo Doris版全面兼容MySQL协议，提供快捷查询UI，易于使用；支持高并发低延时查询，支持PB级以上的超大数据集，可有效地支持在线实时数据分析。 了解详情 对象存储BOS 提供稳定、安全、高效、高可扩展的云存储服务。
模型训练 - 百度数据可视化Sugar BI | 百度智能云文档
选择训练算法类型 第二步是选择算法类型，Sugar BI 会根据目标字段的类型给出可选的类型列表，例如字符串类型的字段不能选择回归类型的算法： 可选的算法类型说明如下： AutoML：AutoML 会根据目标字段和训练数据自动执行算法选择、特征生成和超参数调整，使训练和评估机器学习模型变得容易，让您更加专注于数据和业务问题。 二分类：二分类算法适合目标字段只有两种类别的情况。
