清华大学
本次项目共完成7200余帧亿级像素图片，共计超过106万张切图的数据标注工作，包括物体间关系近2万组、交互行为近20万个、移动物体轨迹点近30万组，以及数十亿 3D 点云数据的语义分割及实例标注，极大地丰富了 PANDA 现有数据集，并为清华大学后续举办的 GigaVision（十亿像素级机器视觉）主题挑战赛提供数据支持。
文本创作数据集去重策略说明 - EasyDL零门槛AI开发平台 | 百度智能云文档
此时分为几种情况，如下： 数据集中有未标注样本，上传重复的已标注样本，此时未标注样本将被覆盖 数据集中有已标注样本，上传重复的未标注样本，此时已标注样本将被覆盖 数据集中有已标注样本，上传不同标注的已标注样本，此时已有的标注样本将被覆盖
数据流动（标准型、增强型和极速型） - 并行文件存储PFS | 百度智能云文档
数据预加载 是：bucket中的数据会预先导入到PFS中 否：数据不会预先加载到PFS中，在被读取时再加载到PFS中 点击“确定”后开始数据加载，数据加载时长与数据量大小有关，完成后会提示“数据加载完成”。
aPaas空间分享至BOS - 数据流转平台CLOUDFLOW | 百度智能云文档
百度智能云数据流转平台是百度智能云提供的存储产品数据迁移服务。使用该服务，您可以将第三方数据轻松迁移至百度智能云对象存储 BOS。 使用数据流转平台 CloudFlow，您只需在控制台填写源数据地址和目标 BOS 地址信息，并创建迁移任务即可。启动迁移后，您可以通过控制台管理迁移任务，查看迁移进度等信息；也可以查看迁移失败文件列表，并中断、删除、恢复迁移任务等。
数据更新 - Baidu Palo/Doris 使用文档
数据更新 PALO 中存储的数据都是以追加（Append）的方式进入系统，这意味着所有已写入的数据是不可变更的。 所以 PALO 采用 标记 的方式来实现数据更新的目的。即在一批更新数据中，将之前的数据标记为 删除 ，并写入新的数据。 在读取过程中，PALO 会自动处理这些标记数据（Merge-on-Read），保证用户读取到的是最新的数据。
数据加密 对象存储（BOS）
上传数据时，BOS对收到的用户数据进行加密，然后再将得到的加密数据持久化保存下来；下载数据时，BOS自动对保存的加密数据进行解密并把原始数据返回给用户，并在返回的HTTP请求Header中，声明该数据进行了服务器端加密。 BOS通过服务器端加密机制，提供静态数据保护。适合于对于文件存储有高安全性或者合规性要求的应用场景。例如，深度学习样本文件的存储、在线协作类文档数据的存储。
数据从baetyl-broker上传至IoTCore - 智能边缘BIE | 百度智能云文档
数据从baetyl-broker上传至IoTCore 场景说明 数据已经采集到的边缘broker，还需要将采集到的数据上报至云端，本文讲解如何将边缘业务数据上传至远端MQTT Broker。 上传至百度IoT Core 一、前提准备 一个能获取设备数据的连网边缘节点（本demo采用应用案例中的modbus采集温湿度传感器demo节点为测试节点。）
创建数据集并导入 - EasyDL零门槛AI开发平台 | 百度智能云文档
分享链接导入的要求如下： 仅支持来自百度BOS、阿里OSS、腾讯COS、华为OBS的共享链接 平台已有数据集 导入无标注数据时，选择需要导入的数据集名称，可导入其不带标注的全部数据，或未标注的数据 导入已标注数据时，选择需要导入的数据集名称，可导入其某个或全部标签下的数据 准备数据集的技巧 情感倾向分析任务中，可参考以下准备数据集的技巧： 设计分类 情感倾向分析的数据集，默认只使用正向和负向两种标签的数据
数据删除 - Baidu Palo/Doris 使用文档
数据删除 PALO 中的数据删除有以下几种方式： TRUNCATE，该命令用于直接清空表或分区，但不会删除对应的元数据。操作代价较低，再有清空数据需求时，建议使用。 DROP，删除表或分区，会同时删除数据和元数据。 DELETE，Delete 语句用于按条件删除数据，具体说明见本文档 按条件删除 一节。
数据迁移 - ElasticsearchBES | 百度智能云文档
BOS快照迁移 在线reindex Logstash 通过Spark迁移数据 HDFS快照迁移 BOS快照迁移 snapshot api 是Elasticsearch用于对数据进行备份和恢复的一组 api 接口，可以通过 snapshot api 进行跨集群的数据迁移，原理就是从源 Elasticsearch 集群创建数据快照，然后在目标 Elasticsearch 集群中进行恢复。
