我用 7 版 Prompt 把合同抽取准确率从 71% 提到 94%,Token 反而降了 38%
同一个信息抽取任务,我拿 GPT-4o-mini 跑了 7 版 Prompt,从“直接问”到 few-shot、CoT、JSON Schema 约束、分步抽取,逐版对比准确率、输出稳定性和 token 消耗。最终第 7 版在 200 条测试集上字段准确率 94.2%,平均 token 从 1180 降到 731,单条成本降了约 38%。这篇记录了完整的实验过程、踩过的坑和可复用的模板代码。

关注产品设计与数字化实践,长期记录业务流程拆解、商业价值验证和从需求到交付的完整过程。喜欢从问题、方案到复盘形成完整闭环,希望用清晰的方法帮助产品与业务更高效地落地。