EasyDL文本介绍
所有文档

          EasyDL零门槛AI开发平台

          EasyDL文本介绍

          概述

          EasyDL平台的自然语言处理模型定制能力,是基于百度大脑文心领先的语义理解技术,为企业和开发者提供一整套NLP定制与应用能力。

          当前EasyDL平台提供了5种模型定制能力:

          • 文本分类-单标签

          定制分类标签实现文本内容的自动分类,每个文本仅属于一种标签类型

          • 文本分类-多标签

          定制分类标签实现文本内容的自动分类,每个文本可同时属于多个分类标签。

          • 短文本相似度

          可以将两个短文本进行语义对比计算,获得两个文本的相似度值

          • 文本实体抽取

          定制文本实体抽取模型,实现从文本中抽取内容,并将抽取内容识别为自定义的类别标签

          • 情感倾向分析的模型定制能力

          对包含主观信息的文本进行情感倾向性判断,情感极性分为积极、消极、中性

          可视化操作

          无需机器学习专业知识,通过模型创建-数据上传-模型训练-模型发布全流程可视化便捷操作,最快15分钟即可获得一个高精度模型

          操作步骤

          Step 1 创建模型

          确定模型名称,记录希望模型实现的功能

          Step 2 上传并标注数据

          不同类型的任务对应的数据格式不一致,您可以上传未标注数据并使用平台提供的标注工具进行标注。或直接上传各任务的标注数据

          Step 3 训练模型并校验效果

          选择部署方式与算法,用上传的数据一键训练模型

          模型训练完成后,可在线校验模型效果

          Step 4 发布模型

          根据训练时选择的部署方式,将模型部署到百度云或申请私有API本地部署使用

          更详细的操作指导,请参考各类模型的技术文档

          高精度效果

          EasyDL文本任务通过文心提供先进的预训练模型和百度自研的NLP算法集。

          文心ERNIE核心技术采用了百度NLP自研的基于知识增强的语义理解技术,其创新性地将大数据预训练与多源丰富知识相结合,通过持续学习技术,不断吸收海量文本数据中词汇、结构、语义等方面的新知识,实现模型效果不断进化,显著提升了文本定制模型任务的智能化水平。

          丰富的部署方案

          训练完成后,可将模型部署在公有云服务器、私有服务器

          部署方式 支持的硬件 支持的系统 技术文档
          公有云API 无需关注硬件,发布到公有云 不限制 文本分类、短文本相似度、情感倾向分析、实体抽取
          EasyEdge本地-私有服务器部署[私有API] x86-64 CPU Linux 文本分类、短文本相似度、情感倾向分析、实体抽取
          Nvidia GPU Linux 文本分类、短文本相似度、情感倾向分析、实体抽取

          公有云API

          已全面支持文本分类(单标签、多标签)、短文本相似度、情感倾向分析、实体抽取

          训练完成的模型存储在云端,可通过独立Rest API调用模型,实现AI能力与业务系统整合

          具有完善的鉴权、流控等安全机制,GPU集群稳定承载高并发请求

          私有服务器部署

          已全面支持文本分类(单标签、多标签)、短文本相似度、情感倾向分析,实体抽取(即将支持自动私有部署)

          EasyDL文本任务是使用EasyEdge本地部署服务,仅支持私有服务器部署API的本地化部署。

          将训练完成的模型部署在私有CPU/GPU服务器上,支持私有部署包通过API方式调用(简称私有API),可在内网/无网环境下使用模型,确保数据隐私

          私有API:将模型以Docker形式在本地服务器(仅支持Linux)上部署为http服务,可调用与公有云API功能相同的接口。可纯离线完成部署,服务调用便捷,支持Linux发行版本如下:

          • Ubuntu: 14、16、18
          • Centos:7.0及以上
          • redhat:7.2以上
          • suse 12
          上一篇
          EasyDL 图像使用说明
          下一篇
          文本分类-单标签