AI 学院 返回课程目录
零基础学 AI:人工智能入门指南

本章小结:推理模型与推理计算

1. 从System 1到System 2 2. 推理模型的工作原理 3. 推理计算(Inference-Time Compute) 4. 四大推理模型对比 5. 推理模型的局限与成本 | 术语 | 定义 |

本章小结

本章核心概念回顾

主要观点

  1. 从System 1到System 2
  • 传统LLM类似人的System 1(快速直觉)
  • 推理模型融入System 2(深入思考)
  • 大脑的两套思维系统启示了AI的发展方向
  1. 推理模型的工作原理
  • 通过更强的回答前推理改进了传统LLM
  • 在部分产品里,用户还能看到思路摘要、步骤说明或中间验证
  • 四条代表性路线采用不同的技术方案(强化学习、内部状态管理、RL + 蒸馏、搜索整合)
  1. 推理计算(Inference-Time Compute)
  • 新的AI范式:从“训练时投入+推理时快速查表”转变
  • 到“训练时学基础+推理时深入思考”
  • 不同问题可以根据复杂度动态分配推理资源
  1. 四大推理模型对比
  • OpenAI 推理路线(学习快照:2026-05 官方模型页列出 gpt-5.5):逻辑和代码能力强,支持推理和基础模型两条路线
  • Claude Extended Thinking(3.7 Sonnet, 2025-02-24;Sonnet 4.6, 2026-02-17;Opus 4.6;Haiku 4.5)/ Adaptive Thinking(Fable 5 / Mythos 5, 2026-06-09 起常开,2026-06-12 起访问暂停;Opus 4.8, 2026-05;Opus 4.7, 2026-04-16;Sonnet 4.6):有同理心的思想家,自然的写作能力。注意:Opus 4.8/4.7 仅支持 Adaptive Thinking(不支持 Extended Thinking),而 Sonnet 4.6 两种都支持。Haiku 4.5 是首个支持 Extended Thinking 的最小模型
  • DeepSeek-R1(2025-01-20):经济的工程师,成本最低,可本地部署
  • Gemini(Deep Research 模式):知识的聚合家,擅长研究型信息整合
  1. 推理模型的局限与成本
  • 时间成本通常更高(从几秒到更久)
  • 知识局限仍然存在(只能组织已知,不能凭空创造事实)
  • 成本是否显著升高,取决于模型、缓存命中率与具体任务
  • 不适合所有创意和实时任务
  • 可能过度思考而浪费资源

核心概念术语表

术语定义
System 1快速、自动化、不需费力的思维方式
System 2缓慢、需集中力、深入思考的思维方式
思维链(CoT)让模型显式地写出推理步骤
推理计算在用户提问时分配计算资源进行推理
推理token(思考token)用于思考而非最终输出的token,按输出 token 计费
思考预算(Thinking Budget)控制模型在回答前最多可用多少推理token
Adaptive ThinkingFable 5 / Mythos 5(常开;2026-06-12 起访问暂停)、Opus 4.8、Opus 4.7、Opus 4.6 和 Sonnet 4.6 支持的推理模式,模型会根据问题难度自动调节思考深度
知识蒸馏将大模型的能力压缩到小模型中
多路径探索推理过程中尝试多个方法并选择最优

重要数字和对比

更稳妥的理解方式:

- **速度**:推理模型通常更慢,但不是所有问题都会慢到同一数量级
- **成本**:是否更贵取决于厂商定价、是否启用推理模式、缓存命中率和输出长度
- **准确度**:在复杂数学、代码、规划任务上往往更强,但在简单查询上未必值得
- **适用场景**:传统模型覆盖更多日常交互,推理模型更适合高价值复杂问题

学习要点

新手必须理解的

  1. 推理模型不是“更好的LLM”,而是“不同的LLM”
  • 它不是所有任务都优越的升级版
  • 而是在特定问题上专业化的变体
  1. 时间和成本是关键的权衡点
  • 快速性 vs 准确性的永恒权衡
  • 选择取决于你的具体需求
  1. 混合使用是智慧
  • 简单问题快速解决
  • 复杂问题深入思考
  • 不是“要么全用推理,要么都不用”
  1. 开源选项改变了游戏规则
  • DeepSeek-R1的出现打破了成本垄断
  • 小企业和个人开发者现在有机会使用推理能力

进阶思考

  1. 为什么推理计算会赢过参数扩展
  • 参数扩展:固定的模型大小,大量训练数据
  • 推理计算:固定的模型大小,问题时分配计算
  • 推理计算更灵活,能适应不同问题
  1. 知识的局限是根本的
  • 再聪明的推理也无法超越基础知识
  • 这就是为什么推理模型需要与搜索、RAG等结合
  1. 人类推理 vs AI推理
  • 人类推理:受情感、直觉、经验影响
  • AI推理:严格的逻辑,但缺乏创意和跨越式思维

与其他章节的联系

  • 第6章(大语言模型):推理模型是LLM的下一个进化
  • 第11-12章(提示词工程):推理模型需要不同的提示策略
  • 第14章(智能体):多智能体系统中推理能力很关键
  • 第15章(AI 伦理、安全与未来):推理计算是AI发展的重要方向

思考题与讨论

  1. 深层理解
  • 如果你要为不同类型的用户选择推理模型策略,怎么选?
  • 推理模型与人类的“思考”有什么相似和不同之处?
  1. 实际应用
  • 在你的工作或学习中,有哪些任务会从推理模型中受益?
  • 如何在成本和质量之间找到平衡?
  1. 未来展望
  • 五年后,推理模型的成本会下降到什么程度?
  • 会出现什么新的应用场景是现在还没想到的?
  1. 伦理思考
  • 如果AI能深入“思考”一个问题,我们是否应该给予它们更多的权力和责任?
  • 一个系统化思考的AI模型的错误,是否比快速反应的模型更严重?

推荐阅读与后续学习

  • 深入学习:OpenAI GPT-5 及其迭代版本与 o 系列文档,了解基础模型与推理模型的发展
  • 实践体验:亲自使用Claude Extended Thinking和DeepSeek-R1,感受不同的思考方式
  • 理论基础:丹尼尔·卡尼曼的《快思慢想》,理解System 1和System 2的心理学基础
  • 未来方向:关注Google的新研究,推理计算与搜索的融合

实践活动

初级

  1. 对比体验:用传统LLM和推理模型分别解决一个中等复杂的问题,比较答案质量和处理时间
  2. 成本计算:计算在你的应用中,如果全部改用推理模型会增加多少成本

中级

  1. 选择分析:为不同类型的应用(聊天机器人、研究助手、代码调试)制定推理模型使用策略
  2. 提示词优化:为推理模型设计专门的提示词,充分利用其思考能力

高级

  1. 混合架构设计:设计一个系统,能够智能判断何时用推理模型,何时用快速模型
  2. 成本优化:研究如何使用开源推理模型(如DeepSeek-R1)来降低企业成本

本章评估

你现在应该能够:

  • [ ] 解释System 1和System 2在AI中的意义
  • [ ] 描述推理模型与传统LLM的核心区别
  • [ ] 理解什么是推理计算及其重要性
  • [ ] 对比四大推理模型的特点和选择标准
  • [ ] 认识推理模型的局限并能恰当地在应用中使用它
  • [ ] 分析推理模型的成本-效益权衡
  • [ ] 根据具体场景选择合适的模型

如果你对大部分问题都能回答,那么你已经掌握了关于推理模型的核心知识!


下一步:如果你对推理模型有浓厚兴趣,可以继续学习:

  • 第八章:超越Transformer——新架构与创新案例
  • 或者跳到第14章,学习如何在智能体系统中应用推理能力

📝 发现错误或有改进建议? 欢迎提交 IssuePR

原始资料