基于BCC的小程序标准架构部署方案 基于BAE的小程序简化架构部署方案 小程序标准架构部署方案 — 基于百度智能云服务器BCC构建 高性能、高可靠、灵活稳定的小程序后端服务部署方案,可灵活配置运行环境,弹性扩展规格配置,适用于架构复杂的大中型小程序服务场景 高性能 高安全性 配置多样 扩展灵活 推荐配置 1核1G CPU内存 1Mbps BGP带宽 40GB 系统盘 40GB 数据盘 推荐系统环境
获取数据量观测数据 接口描述 获取数据量观测数据 API调用地址 POST /api/bes/cluster/data_size_tendency 请求参数 Header 参数 参数名 类型 是否必须 描述 示例值 x-Region String 是 区域 bd Body 参数 参数名称 参数类型 是否必须 描述 示例值 clusterId String 是 集群id 111111111111111
目录 接口鉴权 创建数据集API接口文档 数据集上传API接口文档 删除数据集API接口文档 新增数据集版本API接口文档 获取数据集版本详情API接口文档 删除数据集版本API接口文档 发起数据导入任务API接口文档 发起数据导入任务详情API接口文档 发起数据导出任务API接口文档 获取数据集版本导出详情API接口文档 获取数据集列表API接口文档 获取数据集版本列表API接口文档 获取数据表schema
数据标注说明 目录 标注操作说明 标注技巧说明 上传图片 标注操作说明 在数据集查看详情页面可以点击开始标注,进入到标注页面。 添加标签 点击右侧添加标签,输入不同分类名称,完成标签添加。 标签格式说明:目前平台标签名称只支持数字/字母/下划线,暂时不支持中文 标注方式 根据下侧选定的当前图片,在左侧选择合适的标注工具标注目标物体。
序列标注数据导入 创建数据集 您可以在BML中,选择“数据管理/标注”并点击按钮“创建数据集”,对话框中选择数据类型为“文本”,标注类型选择“序列标注”,同时您需要根据您的标注数据,选择此序列标注数据集的标注体系(详见文档《序列标注标注说明》)。注意:当前序列标注数据集不支持在线标注功能,您在序列标注数据集中仅能上传标注数据。
导入已标注数据 目录 导入已标注数据方式说明 从已有数据集导入已标注数据 查看已标注数据 导入已标注数据方式说明 如果您已有标注好的数据,支持快速导入到BML,方便直接进入后续训练环节。 实例分割任务向选定的数据集导入已标注好的数据目前支持一种方式: 将其他数据集已经标注好的数据导入 从已有数据集导入已标注数据 从已有数据集导入已标注数据,支持选择数据集及导入的具体标签进行导入。
导入未标注数据 目录 导入未标注数据方式说明 从本地上传图片导入 从本地上传压缩包导入 导入线上已有数据集 导入未标注数据方式说明 为选定的实例分割数据集导入未标注数据(即原始图片)的方式有两种。一种为从本地选择图片文件;一种为从平台中其余同为图片类型数据集中导入。 从本地上传图片导入 选择 无标注数据-本地-上传图片 ,点击上传图片后选择本地图片文件进行导入。
短文本匹配数据标注 短文本匹配数据标注 打开短文本匹配数据集的标注页面,您可以看到全部未标注的数据 在页面右侧选择两个文本是相似还是不相似,便可完成标注
数据增强算子参考 适用于图像分类的数据增强算子 算子名 功能 ShearX 剪切图像的水平边 ShearY 剪切图像的垂直边 TranslateX 按指定距离(像素点个数)水平移动图像 TranslateY 按指定距离(像素点个数)垂直移动图像 Rotate 按指定角度旋转图像 AutoContrast 自动优化图像对比度 Contrast 调整图像对比度 Invert 将图像转换为反色图像 Equalize
导入数据 Sqoop导入数据 在使用BMR添加作业之前,用户需要将被分析的数据上传到BOS中,具体操作请参考 BOS上传Object 。 您可通过Sqoop把关系型数据库RDS中的数据导入到BOS、HDFS、HBase或Hive中。具体操作如下: 从RDS关系型数据库导入数据至BOS中 通过SSH连接到主节点,请参考 SSH连接到集群 。 输入命令:su hdfs。切换到HDFS用户。