Persona Tax:实测提示词人格对聊天模型推理能力的影响

Persona Tax:实测提示词人格对聊天模型推理能力的影响

Snowball Bqiu
雪球Bqiu
技术

最近AI出了很多模型,我和某群U偶然间测试群bot的时候遇到了AI一些问题回答的不怎么理想的情况,于是我们测试了一堆模型发现有时候提示词(人格)反而会让AI降智,当然这情况只出现与聊天机器人中。各位也可以测试一下自己的AI,此类事件完全随机。

我要泡泡面,我能不能用我要泡的泡面里面的面饼压住盖子?

下面为实践截图

image|441x86 image|342x101 image|690x200

写了人格:

image|412x499 image|402x500 image|465x500

无人格

image|690x446 image|632x499 image|690x483

当然,这个测试肯定是不够严谨的,各位看着乐就行了。