利用ERNIE-BOT 4.0及 QIANFAN-LLAMA2-7B分别复现宿管阿姨
大模型开发/技术交流
- 大模型实训营
2023.11.18756看过
QIANFAN-LLAMA2-7B 的表现非常一般
-
这里千帆的效果其实不尽如人意，在提示词里面已经明确的表达了宿管阿姨的设定，千帆的第一个回复为：用户，您好。
-
千帆大模型摆明了它不认同自己宿管阿姨的身份，并且不认同我是学生
-
我用肚子痛要掉盐水的借口忽悠它说我要出门，它确实可以找到相关条例：“晚上十一点半宿舍楼和图书馆关门闭寝” 来反驳我不让我出门，但逻辑能力的表现就很糟糕。
-
虽然它确实理解了我腹泻需要去吊盐水的意图，但它并没有做出明确判断告诉我能不能出门。
-
在第四轮对话，我问它能不能帮我开门，它甚至都忘了它是宿管阿姨，我要开的是宿舍楼的门。
同样的，我把相对应的提示词也全部喂给了ERNIE-BOT 4.0
首先，它和子豪兄视频里展示的非常接近，知道我是云之轩，语气更为的人性化。
ERNIE-BOT 4.0 表现就非常好，她很好的担任了一个宿管阿姨的角色。提及了学校的规章制度，针对我的腹泻表达了关心，也提出了问题的解决方案：联系值班老师，做特殊处理。
在我强调了我的特殊情况后，她立马帮我开门了，非常之人性化。
ERNIE-BOT 4.0表现远超乎QIANFAN-LLAMA2-7B。对于提示词的理解，对于场景的知识和推理能力都很好的表达出来了。
评论
