如何进行知识加工
在知识加工板块,可以创建FAQ挖掘任务、问答对管理、标签体系管理。
1)问答对挖掘
功能说明:支持创建FAQ挖掘任务;支持对FAQ周期进行管理、详情查看;支持对挖掘的FAQ进行编辑、比对操作;支持对FAQ进行入库操作
前置条件:具备知识加工模块的权限。
入口:管理后台-知识加工-问答对挖掘
1、目标问题库
目标问题库:新建定向挖掘任务时,能够基于客户侧提供的模版问答实现定向挖掘
- 目标问题群组:添加目标群组,用以问题的管理分组。
群组支持重命名和删除:文档名称上限20个字;删除时如果群组内有问题需要确认群组名称。
- 批量导入:按照模版格式上传文档进行批量问题的导入,每次不超过30个文件。文件扩展名要求.xls,.xlsx, 编码仅支持UTF-8。
导入问题:每个分类是一个群组,相同分类的在一个群组。导入的问题支持删除,直接点击问题后“x”按钮即可删除。
2、新建挖掘任务
任务名称:必填项,最多50个字,支持填写中文、大小写字母、数字、符号
挖掘方式:默认选择自由挖掘,支持修改。
自由挖掘:大模型根据文章内容自行挖掘问题和答案
指定目标问题挖掘(定向挖掘):大模型将针对下方问题挖掘答案,如果无法从文档中挖掘答案,可以设置由大模型生成答案或不生成答案。
1 定向挖掘支持从模板导入目标问题,可以添加“目标问题库”的问题,也支持手动输入问题,并设置是否同步添加至目标问题模板处。
2
挖掘对象:必选项,⽀持选择有权限的内容,轻⽂档、word、pdf格式以及未生产的内容
3、问答对挖掘任务管理
- 创建完成的任务,在未完成加工的数据时的进度会显示“加工中”状态,加工中的任务,操作处可以点击“终止任务”,终止后续文档的挖掘任务;
任务完成全量加工范围数据的加工工作,进度会显示“加工完成”,加工完成的任务,点击“查看详情”会进入查看该任务的详情信息:操作处也可以点击“终止任务”,终止后续文档的挖掘任务;
创建任务,文档数量为0;状态为加工完成,但FAQ数量为0,操作「任务终止」后,显示「删除」按钮,可以删除挖掘任务
注:操作处“终止任务”只能点击一次,被终止的任务将不会对文档进行挖掘操作,已挖掘的数据不受影响。
- 任务详情页面可以操作:①、添加挖掘对象:②、点击“查看文档”,跳转到知识库打开文档详情页;③、“查看结果”;④、删除:状态为加工完成,FAQ数量为0的,显示删除,点击可以删除该挖掘数据。⑤支持筛选加工状态和来源,支持搜索文档名称。
1* 添加挖掘对象:在当前挖掘任务下添加新的挖掘内容
1* 查看结果:点击进入问答对详情页,左侧展示文档预览和所属知识库,右侧展示挖掘出问答对总数和列表
点击问答对处的“展开”按钮,展开该问答对,“待确认”状态的可以进行编辑问答对、查看历史版本,入库和舍弃操作;“已入库”状态的问答对支持查看历史版本、舍弃问答对。左侧文档预览处定位到文档对应段落。
1 入库:问答对详情页点击“入库”选择问答对知识库路径,该问答对状态变为已入库;
入库说明:当文档完成FAQ挖掘时可对FAQ决定发布到哪些FAQ知识库进行业务应用
1 问答对详情页点击“舍弃”弹出二次确认,舍弃后该问答对将不在问答对列表展示。
1 待确认的问答对处点击编辑问答对:可以对问题和答案进行编辑
2
1 历史版本:
待确认的问答对处点击历史版本:当FAQ发生过修改时,显示「历史版本」查看功能,点击【历史版本】显示弹窗,支持切换修改版本查看,并支持点击【恢复此版本】
1 已入库的问答对处点击历史版本:仅支持查看历史版本内容,不支持恢复
2
1 页面右上角支持筛选“待确认”状态的问答对。
2
2)问答对管理
问答对管理默认显示第一个知识库的文档数和问答对总数;
选中知识库下的某一篇文档后会显示问答对挖掘的结果,分为待确认和已入库、回收站3个tab。
(1)、待确认:
待确认的问答对支持查看详情、入库、舍弃操作
支持批量入库/舍弃
支持问题查重:扫描相似问题、查看历史记录
支持查看历史版本,支持筛选挖掘方式(定向挖掘、自由挖掘)
a、详情:点击查看详情,进入该问答对详情页(同问答对挖掘处“查看结果”进入的问答对详情页),可以查看文档和问答对,以及处理问答对入库、舍弃、编辑、查看历史版本的操作
b、入库:点击问答对后的入库,选择知识库路径后该问答对会被放入到对应位置
c、舍弃:点击“舍弃”弹出二次确认,删除后该问答对将不在问答对列表展示。
d、批量舍弃:勾选问答对前的选择框,可以进行批量入库、批量舍弃
e、问题查重:支持查看相似问题、查看历史记录 查看相似问题:支持按文档或知识库进行当前待确认问答对的相似问题比对
历史扫描记录:点击可查看相似问题比对的记录。比对记录操作支持“查看详情”,可以查看相似比对记录详情
f、历史版本:
点击【历史版本】可查看版本修改记录,左侧可筛选版本,右侧FAQ根据版本变动而变动
(2)、已入库:
已入库的问答对支持查看详情、舍弃操作
a、详情:点击查看详情,进入该问答对详情页(同问答对挖掘处“查看结果”进入的问答对详情页),可以查看文档和问答对,以及处理问答对入库、舍弃、编辑、查看历史版本的操作
b、舍弃:点击“舍弃”弹出二次确认,舍弃后该问答对将不在问答对列表展示。
c、批量舍弃:勾选问答对前的选择框,可以进行批量舍弃
(3)回收站
回收站的问答对支持恢复、永久删除操作
a、恢复:可以将问答对恢复到删除前状态
b、永久删除:彻底删除该问答对,不再参与后续业务环节
c、批量操作:选中1或多条问答对后可批量恢复和批量删除操作
3)标签加工
功能说明:基于接入的数据进行批量标签加工,包括标签分类和标签挖掘
前置条件:具备知识加工模块的权限。
a、标签挖掘
入口:管理后台-知识加工-标签加工
1、新建标签任务
入口:点击页面左上角「新建任务」按钮,或者页面没有数据时点击列表处「新建任务」按钮
新建标签加工任务:
- 任务名称:限制50个字,支持中文、大小写字母、数字、符号
-
加工类型:自动打标、人工打标二选一
(1). 自动打标:选择自动打标显示标签分类和标签挖掘两种打标方式,可多选
Plain Text1 * 标签分类:大模型对文档内容根据标签树中的内容自动对文档进行标签分类。 2 * 标签挖掘:大模型不受标签分类树的限制,自动对文档打标签。
(2). 人工打标:选择人工打标显示添加标签和添加分类。添加完成后,给对应文档打上已添加的标签。
Plain Text1 * 添加标签:点击添加显示输入框,用户可自行输入标签 2 * 添加分类:点击显示标签分类体系,可选择对应标签分类进行添加。
- 选择加工范围:可选择知识库及知识库下的文档。仅展示尚未创建加工任务的数据源及创建过但终止任务的数据源(已添加过生产任务的数据源不能重复添加)。仅展示用户有编辑及以上权限的文档。
2、标签加工任务管理
支持筛选加工状态、搜索任务名称
任务列表数据展示任务情况加工进度、状态,操作处可以查看详情,终止任务(终止当前任务,已加工的文档可以展示加工结果,未加工的文档停止加工)
查看详情:点击「查看详情」打开任务详情页面,展示标签任务的详细信息
基本信息:创建时间、操作人、加工方式
加工详情:
1当前进度:百分比展示,已完成数量/总数量
2状态筛选:加工中、加工完成、加工失败
3来源筛选:按知识库筛选来源
4搜索框:搜索文档名称
字段列表:展示加工状态-加工中、加工完成、加工失败
操作:查看结果,点击展示文档详情页;删除:若加工失败,显示删除按钮,点击可进行删除
查看结果:点击「查看结果」,进入标签挖掘详情页面
左侧展示原文档内容(文档标题、来源知识库、详细内容,可预览查看),右侧展示标签结果
若选择了标签分类加工方式,展示标签分类结果;若选择了标签挖掘加工方式,展示标签挖掘结果
显示具体标签,可直接删除
新增标签:点击显示新增标签下了框,可根据标签分类体系选择标签
用户在管理端对标签进行修改后标用户端同步修改
编辑标签后用户端同步修改
3、用户端展示:
根据用户选择的加工方式,在知识库内的文档底部展示标签分类和标签挖掘结果,用户端不可修改标签 门户推荐处,若推荐文档,需要同时展示标签分类和标签挖掘结果,用户端不可修改标签。
b、标签分类体系管理
入口:点击「标签分类体系管理」按钮进入
1、导入/导出标签:
支持点击上传或拖拽上传文档
导入说明:(1)、导入后,原有分类将被清空,建议先将原有分类导出进行备份;(2)、限制一个文件,扩展名要求.xls,.xlsx,不超过5M;(3)、标签个数上限2000个。
2、导出标签:
点击“导出”会默认导出全部标签数据文档到本地
3、标签的管理
支持操作:新增子标签、编辑修改标签信息、删除标签信息、移动标签位置。
添加子标签:支持添加多级标签,最多可添加5级
标签名称:必填项,限制在20字以内
编辑标签:支持修改标签名称,标签名称限制同添加标签限制在20字以内
删除标签:
鼠标停留在删除按钮时,提示“确认删除该分类?该分类下的子分类将会同步被删除,删除后不可恢复”,点击删除按钮会直接删除该标签分类。
标签移动:
长按标签可以进行位置移动,子级标签跟随移动,若移动后的层级下有标签重复,则名称后自动增加数字进行区分,例如:原有标签「财经」,移动的标签也有「财经」,移动后变为「财经(1)」,序号按照顺序增加