Chain-of-Thought 通过让模型把推理步骤写出来,显著提升复杂推理准确率。从 Few-shot CoT、Zero-shot CoT 到自洽性(Self-Consistency)、思维树(ToT),本文理清演进与应用边界。
CoT(Chain-of-Thought)就是让模型在给最终答案前,先把中间推理步骤写出来。这一步"显式思考"能把多步推理准确率拉高一大截,是推理型大模型(数学/逻辑/代码)的标配技巧。
Wei 2022 原始做法:在 few-shot 示例里,不只给"问→答",而是给"问→推理步骤→答"。模型照猫画虎,对新问题也生成推理链。
Kojima 2022 发现:连示例都不用,只要在问题后加一句 "Let's think step by step."(中文"让我们一步步思考"),模型就会自发写出推理链。