零基础学 AI:人工智能入门指南
本章小结:推理模型与推理计算
1. 从System 1到System 2 2. 推理模型的工作原理 3. 推理计算(Inference-Time Compute) 4. 四大推理模型对比 5. 推理模型的局限与成本 | 术语 | 定义 |
本章小结
本章核心概念回顾
主要观点
- 从System 1到System 2
- 传统LLM类似人的System 1(快速直觉)
- 推理模型融入System 2(深入思考)
- 大脑的两套思维系统启示了AI的发展方向
- 推理模型的工作原理
- 通过更强的回答前推理改进了传统LLM
- 在部分产品里,用户还能看到思路摘要、步骤说明或中间验证
- 四条代表性路线采用不同的技术方案(强化学习、内部状态管理、RL + 蒸馏、搜索整合)
- 推理计算(Inference-Time Compute)
- 新的AI范式:从“训练时投入+推理时快速查表”转变
- 到“训练时学基础+推理时深入思考”
- 不同问题可以根据复杂度动态分配推理资源
- 四大推理模型对比
- OpenAI 推理路线(学习快照:2026-05 官方模型页列出 gpt-5.5):逻辑和代码能力强,支持推理和基础模型两条路线
- Claude Extended Thinking(3.7 Sonnet, 2025-02-24;Sonnet 4.6, 2026-02-17;Opus 4.6;Haiku 4.5)/ Adaptive Thinking(Fable 5 / Mythos 5, 2026-06-09 起常开,2026-06-12 起访问暂停;Opus 4.8, 2026-05;Opus 4.7, 2026-04-16;Sonnet 4.6):有同理心的思想家,自然的写作能力。注意:Opus 4.8/4.7 仅支持 Adaptive Thinking(不支持 Extended Thinking),而 Sonnet 4.6 两种都支持。Haiku 4.5 是首个支持 Extended Thinking 的最小模型
- DeepSeek-R1(2025-01-20):经济的工程师,成本最低,可本地部署
- Gemini(Deep Research 模式):知识的聚合家,擅长研究型信息整合
- 推理模型的局限与成本
- 时间成本通常更高(从几秒到更久)
- 知识局限仍然存在(只能组织已知,不能凭空创造事实)
- 成本是否显著升高,取决于模型、缓存命中率与具体任务
- 不适合所有创意和实时任务
- 可能过度思考而浪费资源
核心概念术语表
| 术语 | 定义 |
|---|---|
| System 1 | 快速、自动化、不需费力的思维方式 |
| System 2 | 缓慢、需集中力、深入思考的思维方式 |
| 思维链(CoT) | 让模型显式地写出推理步骤 |
| 推理计算 | 在用户提问时分配计算资源进行推理 |
| 推理token(思考token) | 用于思考而非最终输出的token,按输出 token 计费 |
| 思考预算(Thinking Budget) | 控制模型在回答前最多可用多少推理token |
| Adaptive Thinking | Fable 5 / Mythos 5(常开;2026-06-12 起访问暂停)、Opus 4.8、Opus 4.7、Opus 4.6 和 Sonnet 4.6 支持的推理模式,模型会根据问题难度自动调节思考深度 |
| 知识蒸馏 | 将大模型的能力压缩到小模型中 |
| 多路径探索 | 推理过程中尝试多个方法并选择最优 |
重要数字和对比
更稳妥的理解方式:
- **速度**:推理模型通常更慢,但不是所有问题都会慢到同一数量级
- **成本**:是否更贵取决于厂商定价、是否启用推理模式、缓存命中率和输出长度
- **准确度**:在复杂数学、代码、规划任务上往往更强,但在简单查询上未必值得
- **适用场景**:传统模型覆盖更多日常交互,推理模型更适合高价值复杂问题
学习要点
新手必须理解的
- 推理模型不是“更好的LLM”,而是“不同的LLM”
- 它不是所有任务都优越的升级版
- 而是在特定问题上专业化的变体
- 时间和成本是关键的权衡点
- 快速性 vs 准确性的永恒权衡
- 选择取决于你的具体需求
- 混合使用是智慧
- 简单问题快速解决
- 复杂问题深入思考
- 不是“要么全用推理,要么都不用”
- 开源选项改变了游戏规则
- DeepSeek-R1的出现打破了成本垄断
- 小企业和个人开发者现在有机会使用推理能力
进阶思考
- 为什么推理计算会赢过参数扩展
- 参数扩展:固定的模型大小,大量训练数据
- 推理计算:固定的模型大小,问题时分配计算
- 推理计算更灵活,能适应不同问题
- 知识的局限是根本的
- 再聪明的推理也无法超越基础知识
- 这就是为什么推理模型需要与搜索、RAG等结合
- 人类推理 vs AI推理
- 人类推理:受情感、直觉、经验影响
- AI推理:严格的逻辑,但缺乏创意和跨越式思维
与其他章节的联系
- 第6章(大语言模型):推理模型是LLM的下一个进化
- 第11-12章(提示词工程):推理模型需要不同的提示策略
- 第14章(智能体):多智能体系统中推理能力很关键
- 第15章(AI 伦理、安全与未来):推理计算是AI发展的重要方向
思考题与讨论
- 深层理解
- 如果你要为不同类型的用户选择推理模型策略,怎么选?
- 推理模型与人类的“思考”有什么相似和不同之处?
- 实际应用
- 在你的工作或学习中,有哪些任务会从推理模型中受益?
- 如何在成本和质量之间找到平衡?
- 未来展望
- 五年后,推理模型的成本会下降到什么程度?
- 会出现什么新的应用场景是现在还没想到的?
- 伦理思考
- 如果AI能深入“思考”一个问题,我们是否应该给予它们更多的权力和责任?
- 一个系统化思考的AI模型的错误,是否比快速反应的模型更严重?
推荐阅读与后续学习
- 深入学习:OpenAI GPT-5 及其迭代版本与 o 系列文档,了解基础模型与推理模型的发展
- 实践体验:亲自使用Claude Extended Thinking和DeepSeek-R1,感受不同的思考方式
- 理论基础:丹尼尔·卡尼曼的《快思慢想》,理解System 1和System 2的心理学基础
- 未来方向:关注Google的新研究,推理计算与搜索的融合
实践活动
初级
- 对比体验:用传统LLM和推理模型分别解决一个中等复杂的问题,比较答案质量和处理时间
- 成本计算:计算在你的应用中,如果全部改用推理模型会增加多少成本
中级
- 选择分析:为不同类型的应用(聊天机器人、研究助手、代码调试)制定推理模型使用策略
- 提示词优化:为推理模型设计专门的提示词,充分利用其思考能力
高级
- 混合架构设计:设计一个系统,能够智能判断何时用推理模型,何时用快速模型
- 成本优化:研究如何使用开源推理模型(如DeepSeek-R1)来降低企业成本
本章评估
你现在应该能够:
- [ ] 解释System 1和System 2在AI中的意义
- [ ] 描述推理模型与传统LLM的核心区别
- [ ] 理解什么是推理计算及其重要性
- [ ] 对比四大推理模型的特点和选择标准
- [ ] 认识推理模型的局限并能恰当地在应用中使用它
- [ ] 分析推理模型的成本-效益权衡
- [ ] 根据具体场景选择合适的模型
如果你对大部分问题都能回答,那么你已经掌握了关于推理模型的核心知识!
下一步:如果你对推理模型有浓厚兴趣,可以继续学习:
- 第八章:超越Transformer——新架构与创新案例
- 或者跳到第14章,学习如何在智能体系统中应用推理能力
📝 发现错误或有改进建议? 欢迎提交 Issue 或 PR。