Prompt里加了“角色扮演”反而让模型输出变差了，是我姿势不对吗？

我也有过类似的翻车经历，当时给一个合同审查的agent加了“你是顶级商事律师”的角色，结果它开始疯狂脑补条款背景，甚至给我编出一些不存在的司法解释。后来我琢磨了一下，感觉问题可能出在角色设定本身就在暗示模型“你要表现得像个专家”，而模型对“专家”的理解往往就是堆砌术语、多引法条、显得很全面，反而把原本的任务约束给冲淡了。尤其是法律这种本身就有大量检索需求的场景，角色扮演很容易让模型从“回答问题”滑向“表演专业”。你删掉角色后效果好，恰恰说明任务描述和格式要求才是真正在约束输出的东西。我现在判断要不要加角色，就看这个任务是不是需要特定的语气或视角，比如客服安抚、创意写作这种，加角色确实有用；但如果是信息抽取、分类、法律问答这种偏准确性的任务，我基本只写清楚任务和输出格式，顶多补一句“不确定时明确说不知道”。你提到的“若不确定则明确说明”其实挺关键的，但这句话放在角色扮演里往往会被角色的“自信感”压过去，不如直接放在任务约束里来得有效。

我也有类似经历，做合同审查agent时加“资深律师”角色后模型老爱脑补条款，删掉反而更准。感觉角色prompt会激活模型训练里那些“法律剧”式的表演欲，专业任务里确实容易跑偏。我现在只在需要特定语气或视角时才加角色，纯提取、分类、问答基本只给任务和格式。你那个虚构案号的问题，加“不确定就直说”可能有点用，但不如直接砍掉角色来得干净。

我调过类似的合同审查agent，也踩过这个坑。后来发现角色设定确实会把模型往“表演专业”的方向带，它会更在意“像不像律师”，而不是“答得对不对”。你那个“资深民法律师”的标签，在模型眼里可能等于“多引法条、多用术语、显得权威”，至于案号，纯粹是它为了演得像而编的。我现在的做法是只在需要它切换语气或视角时才加角色，比如“用非专业人士能懂的话解释”，而不是加职业头衔。专业任务里，任务约束和输出格式其实比角色更有用，像“只引用与问题直接相关的法条”“没把握就答不确定”这类硬规则，比“你是一位严谨的律师”管用得多。判断标准我自己的土办法是：如果角色描述里全是身份标签，删掉；如果角色描述里带具体行为指令，留着。你这次删掉角色就正常，说明问题不在few-shot，而在那个system prompt把模型带偏了。可以试试把角色换成一句“回答时优先保证准确性，宁可少说也不编造”，效果可能比身份标签好。

角色确实容易让模型加戏，我一般只写“按格式回答，不确定就说不知道”，专业任务反而更稳。

我踩过类似的坑，感觉角色扮演在专业任务里有点像双刃剑。你给“资深律师”这个头衔，模型会不自觉地去演一个“律师该有的样子”，而它学到的律师形象就是堆法条、摆专业架子，反而把“回答问题”这个核心目标给挤掉了。我后来试过一个折中办法，把角色改成“你是一个法律检索助手，只根据用户提供的材料回答”，身份感弱了但任务边界清楚了，啰嗦和幻觉都少很多。另外你提到的“若不确定则明确说明”确实有用，不过最好把它写进格式约束里，比如“无法从给定信息推出结论时，只输出‘依据不足’四个字”，这样比单纯叮嘱它别瞎编更管用。经验法则的话，我觉得创意类任务角色能提供风格锚点，但专业任务里角色更多是在提供一种“表演压力”，除非你明确需要那种语气，否则不如直接写清输入、输出和边界条件。你那个虚构案号的情况，很可能就是“资深律师”这个角色激活了它训练数据里法律文书的模板记忆，跟你的实际任务脱节了。

我也有过类似经历，加角色后模型反而容易“演过头”，尤其法律这种严谨领域，它一入戏就开始堆法条和案号来撑场面。后来我一般只在需要特定语气或视角时才加角色，纯任务型问答就只写清楚输入输出格式，效果稳定多了。你可以试试把角色改成更轻量的约束，比如“回答需引用具体法条，不确定时直接说不知道”，别让它自己发挥。

我也有类似体会，角色扮演在专业任务里有时会“加戏”。模型一旦进入“资深律师”模式，就容易表演严谨，堆法条凑格式，反而偏离你真正要的答案。我后来只在需要语气或视角时加角色，比如客服回复或科普，专业问答就写清任务、边界和输出格式。你加个“不确定就说明”确实有用，但更关键的是把角色换成可验证的约束，比如引用范围、禁止编造。

我也遇到过类似情况，感觉角色设定越具体，模型越容易“演过头”，尤其法律这种需要严格依据的场景。后来我基本只在需要固定语气或风格时才加角色，专业任务就老老实实写清输入输出格式，顶多补一句“不确定就别编”。你那个虚构案号大概率是角色把它往“权威感”上推了，反而压过了事实约束。

你这个观察挺准的，角色扮演确实不是万能药。我之前做合同审查的agent也踩过类似的坑，system里写了“你是顶级法务专家”，结果模型开始疯狂加戏，动不动就“根据《民法典》第X条之规定”，关键有些条文它记混了，反而比不加角色更容易胡编。后来我琢磨，角色描述其实是在激活模型训练数据里跟“专家”相关的语言风格分布，而法律专家在网上写的东西本来就偏啰嗦、爱引法条，模型就把这套腔调学来了，跟你真正要的“精准简洁”是两码事。所以专业任务里角色更像是在调语气，而不是在加能力，甚至可能把任务指令挤到次要位置。我现在只在需要模型稳定某种语气或视角时才加角色，比如客服回复或者模拟特定立场，其余时候宁可把格式约束和边界条件写死，比如“只输出结论和依据，不确定就写‘无法确认’”。你删掉角色反而正常，说明任务描述和few-shot本身已经够锚定行为了，角色纯属画蛇添足。判断标准我觉得很简单：如果角色带来的风格收益小于它引入的噪声，就别加，尤其别用带职业头衔的角色。

我也有类似感觉，角色扮演有时候像给模型加了个“戏精开关”，一开就忍不住多演两下。法律这种本来就需要收敛的任务，角色描述里“资深”“严谨”这些词反而可能触发它堆砌术语和引法条。我后来只在需要特定语气或视角时才加角色，纯事实型任务就直接写清楚输出格式和边界。你那个虚构案号的问题，加一句“不确定就说不确定，别编”确实能压下去不少。