效果评估
更新时间:2022-05-06
模型评估报告
训练完成后,可以在【我的模型】列表中看到模型效果,以及详细的模型评估报告。
「完整评估结果」页面中将记录整体评估与详细评估的报告,包括该模型整体的准确率、F1-score、精确率、召回率,以及评估样本具体数据情况,各分类的精确值、F1-Score、召回值等指标。
整体评估中,各指标的释义如下:
- F1-score:给每个类别相同的权重,计算每个类别的F1-score,然后求平均值
- 精确率:给每个类别相同的权重,计算每个类别的精确率,然后求平均值
- 召回率:给每个类别相同的权重,计算每个类别的召回率,然后求平均值
实际效果可以在左侧目录中找到【模型校验】功能进行校验,或者发布为接口后测试。
模型校验操作步骤:
上传文本/自行输入文本--输入评价对象和勾选抽取内容--校验按钮--右侧返回json结果。
- 在上传文本时,只支持上传格式为txt,文本文件内数据格式要求为"文本内容\n"(即每行一个样本,使用回车换行),每一行表示一组数据,每组数据的数建议不超过512个字符,超出将被截断。
- 您可以手动输入您想要抽取的评价对象,也支持不输入评价对象进行抽取。
- 选择您想要抽取的评价字段(希望抽取评价片段、评价维度、评价观点,还是判断评论情感倾向,此处只支持单选)
- 校验过程需要等待数秒,返回结果会在右侧以json形式显示出来,支持下载查看json文档
模型校验示意图: