Prompt评估打分
更新时间:2024-11-04
注意: 为提升开发者使用体验,本文内容已合并至对应API文档,请查看API鉴权及调用-Prompt工程-Prompt工程V1-Prompt评估打分文档;本文档已于2024年6月28日在平台文档中心下线,内容不再更新。
功能介绍
用于Promp评估打分。
注意事项
调用本文API,需使用安全认证AK/SK鉴权,调用流程及鉴权介绍详见SDK安装及使用流程。
调用示例
import os
from qianfan.resources import Prompt
# 使用安全认证AK/SK鉴权,通过环境变量方式初始化;替换下列示例中参数,安全认证Access Key替换your_iam_ak,Secret Key替换your_iam_sk
os.environ["QIANFAN_ACCESS_KEY"] = "your_iam_ak"
os.environ["QIANFAN_SECRET_KEY"] = "your_iam_sk"
from qianfan.resources import Prompt
resp = Prompt.evaluation_score(
type=1,
data=[
{
"response_list": {"job": "程序员"},
"scene": "代码"
},
{
"response_list": {"job": "产品经理"},
"scene": "用户量"
}
]
)
返回示例
QfResponse(
code = 200,
headers = {...},
body = {
'log_id': 'ymyifv8qxwk01n4b',
'result': {
'logID': 6329509409475443944,
'scores': [
[0.7990033679792103],
[0.9218397513286832]
],
'errorCode': 0,
'errorMsg': ''
},
'status': 200,
'success': True
},
statistic = {...},
request = QfRequest(...)
)
参数说明
请求参数
名称 | 类型 | 必填 | 描述 |
---|---|---|---|
type | int | 是 | 推理评分标准,可选值如下: · 3:exact,精准匹配 · 2:regex,正则匹配 · 1:semantic,语义相似 |
data | list[data] | 是 | 推理相关场景目标生成结果和Prompt的推理结果 |
data说明
名称 | 类型 | 必填 | 描述 |
---|---|---|---|
scene | string | 是 | 场景目标生成结果 |
response_list | list[string] | 是 | 该场景下不同推理结果返回 |
返回参数
名称 | 类型 | 描述 |
---|---|---|
log_id | string | 操作记录id |
result | dict | 返回结果 |
status | int | 状态码 |
success | bool | 是否操作成功,说明: · true:成功 · false:失败 |
result说明
名称 | 类型 | 描述 |
---|---|---|
logID | int | logID |
scores | list[list[float]] | 返回的推理结果的评分 |
errorCode | int | 错误码 |
errorMsg | string | 错误消息 |