最近在做一个自动生成技术文档摘要的项目,用的GPT-4。看论文说加入“Let‘s think step by step”这种思维链提示能提升推理准确率,但我试了几次效果时好时坏。比如让模型总结一段代码逻辑,有时候它能一步步拆解出函数调用关系,有时候直接输出个笼统的结论,完全没按思维链走。我试过把指令改成“请先列出关键步骤再总结”,但模型偶尔还是会跳过中间推理直接给答案。想问下各位,思维链提示是不是需要配合few-shot示例才能稳定?还是我任务太简单,模型觉得没必要走推理?求指教,感谢!