用Prompt调大模型做摘要，加例子反而变差了，是我写法有问题吗？

少点例子试试，我一般一个就够，多了确实容易串味。再就是例子放最后，别让它抢了正事。

例子别太典型，顺序也换成从简到繁试试，不然模型容易照抄结构。

few-shot里加个“只提取原文关键事实”的约束，可能比多给例子更管用。

遇到过类似情况，few-shot在摘要任务里确实容易翻车，尤其例子特征太强的时候，模型会当成模板硬套。建议把示例改成风格差异大的，甚至加一个“反例”告诉它别学什么。另外可以试试在指令里明确“只提取原文信息，不参考示例内容”，或者干脆退回zero-shot，但把摘要要求拆细一点，比如强调“按时间线”“只保留结论”。还有个土办法，把示例放在问题后面而不是前面，有时候顺序影响挺大的。

遇到过类似情况，后来发现few-shot对摘要这种任务其实挺敏感的，尤其长文档，模型容易被示例里的句式带跑，甚至把例子里的实体名混进去。建议你试试把例子放在指令后面，并且明确加一句“示例仅供参考，禁止引用示例中的任何信息”，或者干脆换回zero-shot，只强调“聚焦核心论点，忽略细节案例”，效果可能更稳。另外也可以对比下例子数量，我试过1个例子比2个更不容易干扰输出。

我之前也踩过这个坑，few-shot真的不是越多越好，尤其摘要这种任务，模型很容易把示例里的实体或者句式当成“模板”套进去。你提到“把示例关键信息混进新文档”，八成是例子选得太具体了，比如里面有人名、数字或者特殊术语，GPT-4会误以为这些是必须保留的元素。

我自己试下来，摘要场景下给1个例子反而比给3个稳，或者干脆用zero-shot加“聚焦于XXX”的指令更可控。你可以试试把例子改成“反例”，比如给一个“错误摘要”再给一个“正确摘要”，让模型对比着学，效果比单纯给正例好很多。另外，顺序也有影响，我习惯把例子放在指令之后、正文之前，中间加一句“请严格参考示例格式，但不要使用示例内容”。

还有个小技巧，你可以在Prompt里明确“忽略示例中的具体信息，只借鉴其结构和详略控制”，这样能减少信息污染。另外，检查一下你是不是用了“摘要”这个中文词，有时候换成“提炼核心观点”或“压缩为要点列表”，模型的理解会更准。如果文档特别长，建议先按段落分块做摘要，再合并，直接整篇喂进去，GPT-4容易丢失全局逻辑，反而更依赖示例来“找感觉”。

遇到过类似的坑，few-shot真不是越多越好。我之前做摘要时加例子，模型确实会把示例里的句式甚至细节带进来，后来发现关键是例子要跟目标文档“同领域但不同主题”，而且最好在Prompt里明确写一句“仅参考示例格式，不要引用示例内容”。你可以试试只留一个例子，或者干脆把例子放在指令后面而不是前面，我实测顺序影响挺大的。另外控制指令里加个“严格基于原文信息”会稳很多，你可以先调这几点看看。

我也遇到过类似情况，加few-shot后模型容易把示例里的实体或句式带偏，尤其当示例和真实文档主题跨度大时。我后来把示例改成“反例+正例”各一条，并且明确标注“仅参考格式，严禁引用内容”，效果稳定很多。另外你可以试试把示例放在指令最后，或者加一句“若示例与原文无关，请完全忽略示例”，有时候模型就是死脑筋分不清边界。

例子太整齐反而容易带偏，试试把示例顺序打乱或者只留一个和当前文档风格接近的。

few-shot本质是让模型找差异，不是照抄，你可以在指令里加上“仅参考示例格式，不引用内容”试试。

few-shot对长摘要容易带偏，试试把例子放后面，加一句“仅参考格式勿用内容”。

例子太典型会诱导模型抄，换成不相关的示例或干脆zero-shot加关键词约束试试。

我试过类似情况，加few-shot后模型容易把示例当模板硬套，尤其摘要这种任务，示例里的细节很容易串场。后来我改成先给指令，再加一句“严格基于原文，不得引用示例内容”，效果好很多。你也可以试试把示例放在指令前面，或者只给一个反面例子（比如“不要这样写”），有时候比正面示例更管用。另外检查下示例长度和真实文档差距大不大，差异太明显模型反而会困惑。

few-shot吃的是示例分布，你选的例子太典型它就容易跑偏，试试换成和长文档风格对比强的例子。

few-shot的示例顺序影响很大，把最贴近当前文档的放最后，模型会更专注，你可以调下顺序试试。

长文档摘要别随便加例子，模型容易把示例当模板套，试试在prompt里明确“忽略示例内容，仅参考格式”。

同款问题我也踩过坑，后来发现核心不在例子数量，而在例子的“边界”和“格式锚点”。你加few-shot时，模型会把示例当成一种隐形的“风格模板”甚至“知识库”，如果示例里的实体或结论太具体，它就容易串味。我当时把示例改成“结构示范”而非“内容示范”，比如只保留“背景-关键数据-结论”的骨架，并明确标注“仅参考结构，禁止引用具体信息”，效果立刻稳了。另外，我怀疑你Prompt里缺少“任务聚焦”的约束词，比如在指令后加“严格基于输入文本，忽略所有无关信息”，能明显抑制幻觉。还有个骚操作：把示例放在指令前面，让模型先“看到规则”再“接触例子”，有时候比放后面更可控。你试试把例子压缩到一组，并且故意选一个和当前文档领域差异大的，反而能逼模型抽象出真正的摘要逻辑。如果还不行，检查下是不是“200字”这个硬指标在few-shot下被模型当成每段都要凑字数，不妨改成“不超过200字，允许少于50字”。

我之前也踩过差不多的坑，加few-shot反而把模型带偏了。后来复盘发现，问题不一定出在例子数量，而是例子和当前文档的领域差异太大。比如你给的示例如果都是新闻摘要，但实际要处理的是技术文档，模型就会强行往新闻结构上靠，甚至把示例里的专有名词带进来。我现在的做法是，要么不加例子，纯靠指令里强调“只基于给定文本，不引入外部信息”，要么就只给一个反例——故意放一个“错误摘要”告诉模型别这么写，效果反而稳。另外你提到的“顺序”确实有影响，我试过把例子放在指令后面比放在开头好，但更关键的是在例子前后各加一句“这是示例，不是待处理内容”，不然模型容易混淆边界。还有个土办法，就是分两步走，先让模型生成粗摘要，再单独发一条指令让它“删除所有示例相关词汇”，虽然笨但能救急。如果你试了这些还是散，可以检查下是不是摘要长度约束太死，200字对某些长文档来说本来就容易逼出幻觉。

同款遇到过，加few-shot后摘要里混进例子内容太真实了。后来我试了下把示例放在指令前，并且明确加一句“示例仅用于格式参考，勿引用其中信息”，情况好很多。另外例子数量别贪多，1-2个足矣，而且最好选跟当前文档领域差异大的，避免模型强行套模板。你可以再检查下示例的摘要风格是不是太具体，比如带数字或专有名词，模型容易误当成素材。

这个现象挺常见的，加例子不等于加保险，有时候反而会带偏模型注意力。你选的示例如果结构太鲜明，比如有特殊数字或专有名词，模型就容易“抄作业”而不是学概括逻辑。可以试试把示例数量减到1个，或者换成跟目标文档主题差异更大但结构清晰的例子，再在prompt末尾加一句“严格基于新内容，不要引用示例中的信息”。我之前做法律摘要也踩过这坑，后来在示例前加“以下是不同领域的示例”就好多了，你可以先调整下示例和指令的顺序看看。

例子选得太典型确实会带偏，试试把示例里容易混入的专有名词换成占位符。

我自己也踩过这个坑，后来发现问题多半出在示例跟目标文档的“距离”上。你选的例子如果太典型，模型反而会把它当成一种“模板”去硬套，尤其是当新文档的结构、语气跟示例差得远时，摘要就会变得很怪。我倒觉得不一定是例子数量的问题，有时候一个例子比三个例子更安全，因为例子越少，模型越会老老实实回到指令本身去理解任务。

另外你提到“混进示例的关键信息”这点特别真实，我试过在示例后面加一句“注意：示例仅为格式参考，内容必须完全来自新文档”，情况会好很多，但也不是百分百管用。还有个思路是把摘要要求拆成两步，比如先让模型“列出核心论点”再“把论点串联成短文”，这样它不容易分心。

顺序上我倒是觉得问题不大，更可能是你给的控制指令太弱了。试试在开头就明确“禁止使用示例中的实体、数据和观点”，或者把“200字”改成“200字以内，每句话必须对应原文某一段落”这种硬约束，模型会收敛不少。我最近甚至开始不用few-shot了，改用“先给评分标准再让它自评”的方式，效果反而更稳，你可以试试看，说不定能绕开这个坑。

我遇到过几乎一模一样的情况，加了few-shot后摘要反而跑偏。后来发现可能是示例里的实体和主题太具体，模型容易把这些当成“关键词”去硬套新文档。你可以试试把示例改成那种结构清晰但内容很中性的，比如纯新闻稿或百科段落，让模型学的是格式而不是内容。

另外检查下你示例的顺序，我试过把最接近目标风格的放最后，效果会好一点。再就是加一句“只基于当前文档内容，忽略示例中的具体信息”之类的约束，能拉回来不少。你现在的示例是偏新闻类还是偏专业报告？不同风格影响挺大的。

遇到过类似情况，few-shot不是越多越好，尤其摘要这种任务，例子反而会带偏注意力。我试过把示例放在指令后面，再加一句“仅参考格式，不得引用示例内容”，会稳很多。另外你例子长度差距大吗？我之前用两段超长原文的示例，模型就老想模仿那种详略比例，换成短平快的例子反而好了。