← 返回动态

研究2025.12.07Savir Basil, Ina Shapiro, Dan Shapiro, Ethan Mollick, Lilach Mollick, Lennart Meincke · Wharton GAIL

“扮演专家”能让答案更准确吗?

摘要

这项测试挑战常见提示技巧:给模型一个专家身份,并不稳定提升困难事实题的准确率。

团队比较多个模型与不同身份提示,发现专家设定的收益不稳定;部分不匹配或低知识身份还会降低表现。

教学上可区分两件事:角色设定有助于语气、视角或模拟,却不因此保证事实正确。这样的区分比让学生背诵万能提示模板更值得讨论。

客观题准确率测试,不能据此否定角色模拟、写作语气或教学对话的所有用途。

来源与阅读记录

Savir Basil, Ina Shapiro, Dan Shapiro, Ethan Mollick, Lilach Mollick, Lennart Meincke · Wharton GAIL ↗
阅读公开技术报告全文,包括模型、题库、例外结果与用途边界;未核读 SSRN 附件。