数据从baetyl-broker上传至IoTCore 场景说明 数据已经采集到的边缘broker,还需要将采集到的数据上报至云端,本文讲解如何将边缘业务数据上传至远端MQTT Broker。 上传至百度IoT Core 一、前提准备 一个能获取设备数据的连网边缘节点(本demo采用应用案例中的modbus采集温湿度传感器demo节点为测试节点。)
选择侧边导航或者快速访问中 数据加工>开发(顶部导航)>实时作业(侧边)>Flink作业 后进入Flink作业。 新建文件夹。单击新建按钮选择新建文件夹,填写相关配置项即可新建成功。 新建作业。单击新建按钮选择新建作业,文件夹支持自行选择存放作业,填写完毕点击确定新建成功。 FlinkSQL:用户通过写SQL的方式就能够进行实时Flink作业的开发。
输入数据路径 输入BOS路径。
在工作空间内可以进行工作区的创建、元数据的创建等。 详情:单击详情按钮,可查看工作空间的详细信息,包括空间名称、存储路径等。 删除:单击删除按钮,删除工作空间。注意:工作空间删除后无法恢复,请您谨慎操作。 工作空间详情 在工作空间列表页面单击工作空间名称或列表操作列,进入工作空间详情,查看工作空间详细信息。通过单击tab页可以切换查看空间详情或权限信息。
选择侧边导航或者快速访问中 数据加工>开发(顶部导航)>实时开发(侧边导航)>Spark作业 后进入作业组。 新建文件夹。单击新建按钮选择 新建文件夹 ,填写相关配置项即可新建成功。 新建作业。单击新建按钮选择 新建作业 ,文件夹支持自行选择存放,填写完毕点击确定新建成功。新建Scala作业,呈现Scala代码编写面板,支持进行Scala代码的编写。新建Spark自定义作业需要对作业进行配置。
短文本匹配数据标注 短文本匹配数据标注 打开短文本匹配数据集的标注页面,您可以看到全部未标注的数据 在页面右侧选择两个文本是相似还是不相似,便可完成标注
数据增强算子参考 适用于图像分类的数据增强算子 算子名 功能 ShearX 剪切图像的水平边 ShearY 剪切图像的垂直边 TranslateX 按指定距离(像素点个数)水平移动图像 TranslateY 按指定距离(像素点个数)垂直移动图像 Rotate 按指定角度旋转图像 AutoContrast 自动优化图像对比度 Contrast 调整图像对比度 Invert 将图像转换为反色图像 Equalize
操作指南 扩容已有分区 场景一为:假设原来的磁盘分区25G有数据,保留原来分区的数据,将该分区扩容到50G 1. 登录Windows主机 登录后,点击开始,选择“管理”弹出“服务器管理器”。 2. 选择左侧导航栏的“存储>磁盘管理” 3. 扩展卷 右击 D 盘,然后选择扩展卷。 说明: 原有数据不会丢失 4. 下一步 在后续操作步骤中,您只需连续点击 下一步 便可完成分区扩容。
首先,我们需要准备一个符合千帆平台泛文本格式的数据集,因为千帆平台的数据处理任务只支持这种数据格式。
limit int 否 Query参数 每页展示多少条数据,默认为50条 jobIds Array 否 Query参数 表示工作流实际对应的工作流ID,支持填入多个工作流ID,多个工作流ID之间用逗号隔开, 例如 jobIds=jid_1,jid_2 无默认值,即在不提供该参数时不根据工作流ID进行过滤。