neng8科技快讯网AI人工智能前沿资讯_汽车数码相机评测_手机电脑硬件百科

你是天才竟然比白痴得分低？卡梅隆和斯坦福最新，你是Assistant会让LLM降低性能，Roleplay究竟该怎么用

在Prompt工程领域，角色扮演提示是否能够有效提高大型语言模型（LLM）的性能一直是一个备受关注的话题。为了验证这一假设，写《The prompt report》的研究者（重磅 | 最新最系统的Prompt调查，谁再打着提示词大师的旗号蒙你，把这篇甩给他）进行了大量实证测试，包括使用“天才”和“白痴”两种截然不同的角色进行实验，结果出乎意料。尽管我们常常以为赋予模型一个“天才”的角色设定可以显著提升其表现，但实验表明，事实却恰恰相反。在测试中，设计为“白痴”的prompt竟然比“天才”得分高出2.2个百分点。这样的结果表明，角色扮演提示可能对模型的实际推理能力并没有预期中的积极作用，甚至可能产生负面影响。最近的研究也表明角色提示不但没用，可能会导致LLM性能下降。