评估效果
更新时间:2022-05-06
模型评估
模型训练完成后,可以在「我的模型」列表中查看该模型的效果,以及完整评估结果。
「完整评估结果」页面中将记录整体评估与详细评估的报告,包括该模型整体的准确率、F1-score、精确率、召回率,以及评估样本具体数据情况,各分类的精确值、F1-Score等指标。
整体评估中,各指标的释义如下:
- 准确率:正确分类的样本数与总样本数之比
- F1-score:给每个类别相同的权重,计算每个类别的F1-score,然后求平均值
- 精确率:给每个类别相同的权重,计算每个类别的精确率,然后求平均值
- 召回率:给每个类别相同的权重,计算每个类别的召回率,然后求平均值
如果在训练阶段,使用的数据集中,相似或不相似的文本量在100条以内,训练出来的模型的效果评估报告的参考价值较小,建议您训练时数据量准备充足
模型校验
在完成训练后,发布模型前,可以先进行模型校验,以确保模型在实际环境中能获得预期的性能。操作方法如下:
- 在左侧「模型中心」目录中点击「校验模型」,进入校验模型页面
- 选择需要校验能力的模型、部署方式、版本,点击「启动模型校验服务」
-
校验服务启动后,在左侧输入两对文本,点击「校验」后,右侧识别结果栏将输出预测结果
如果在训练阶段,使用的数据集中,相似或不相似的文本量在100条以内,训练出来的模型的效果评估报告的参考价值较小,建议您训练时数据量准备充足