← 回總覽

140. 对姚顺宇的 4 小时访谈:请允许我小疯一下!在 Anthropic 和 Gemini 训模型、技术预测、英雄主义已过去

📅 2026-05-11 08:00 张小珺 人工智能 2 分鐘 1764 字 評分: 93
Claude Gemini 预训练 强化学习 AI 集体主义
📌 一句话摘要 与前 Anthropic 和 Google DeepMind 研究员姚顺宇深度对话,分享训练 Claude 3.7/4.5 和 Gemini 3 的一线经验,探讨模型能力未触顶、AI 集体主义时代的到来以及技术发展的真实驱动力。 📝 详细摘要 本期播客是主持人张小珺对前 Anthropic 和现 Google DeepMind 研究员姚顺宇的深度访谈。姚顺宇从理论物理跨界 AI,先后参与了 Claude 3.7、4.5 和 Gemini 3 等关键模型的训练。访谈中,他提出了一系列尖锐观点:AI 个人英雄主义时代已过,当前是集体主义叙事;预训练远未到头,所谓的「撞墙」大概率

📌 一句话摘要

与前 Anthropic 和 Google DeepMind 研究员姚顺宇深度对话,分享训练 Claude 3.7/4.5 和 Gemini 3 的一线经验,探讨模型能力未触顶、AI 集体主义时代的到来以及技术发展的真实驱动力。

📝 详细摘要

本期播客是主持人张小珺对前 Anthropic 和现 Google DeepMind 研究员姚顺宇的深度访谈。姚顺宇从理论物理跨界 AI,先后参与了 Claude 3.7、4.5 和 Gemini 3 等关键模型的训练。访谈中,他提出了一系列尖锐观点:AI 个人英雄主义时代已过,当前是集体主义叙事;预训练远未到头,所谓的「撞墙」大概率是因为 bug 而非规律失效;AI 从业者最重要的特质是「靠谱」而非智力超群。他详细拆解了预训练与后训练的技术演进,解释了为何 Coding 成为 AI 最成功的原生场景(清晰的 reward signal 和丰富的 GitHub 数据),并预测 2026 年将实现「有限训练、无限上下文」的关键突破。他还对比了中美 AI 差距,指出中国在算力劣势下催生了独特的蒸馏技术,并点评了 Minus、Open Cloud 等产品的被收购现象,认为当前模型侧才是真正的壁垒。整场访谈信息密度极高,既有来自顶级 AI 实验室的一手技术实战,也有对行业趋势的大胆预测和冷峻反思。

💡 主要观点

- AI 个人英雄主义时代已经结束,现在是集体主义叙事。 姚顺宇认为,现代 AI 研究是系统性工程,依赖大规模分工协作,任何单个研究员的贡献都被团队和基础设施放大,神话个体是危险的。

预训练 Scaling Law 未触顶,「撞墙」说法多源于 bug。 他认为所谓预训练到头了,多数情况是实验中存在未被发现的系统性 bug,而非规律本身失效。通过合理的 ablation 实验系统性地排查问题才是关键。
AI 行业最重要的特质是「靠谱」,而非智力。 姚顺宇直言 AI 本质简单,这个行业最看重的是做事细致、负责任和可靠,这比「有脑子」和「有创意」更重要。
Coding 成为 AI 最成功的原生场景有两大原因。 编码有明确且易于自动验证的 reward signal(如测试用例),以及 GitHub 提供了数十年积累的优质数据基础。这两个条件使得模型训练的目标极其清晰。
2026 年有望实现「有限训练、无限上下文」的突破。 模型可能用有限的 context length 训练,但使用时能处理接近无限的上下文,通过动态丢弃不相关信息,解锁真正的个人助手等应用场景。

💬 文章金句

- AI 个人英雄主义时代已经过去了,所以也没有什么英雄,有时候甚至觉得旧时代英雄有点蠢。

  • 我觉得这个行业最重要的特质就是靠谱,就是做事儿细,然后对自己做的事儿负责任,这是最重要的特质。
  • 现在大家都是冲浪的人,本质上是那个浪,而不是你那个冲浪的人。
  • AI 这个事,本来也不太需要脑子——真的不太需要脑子。
  • 我觉得我自己的感受是……模型做到 train with finite context, use as infinite context。我觉得这件事儿今年是有机会能够做实现的。

📊 文章信息

AI 初评:93

精选文章:是

来源:张小珺Jùn|商业访谈录

作者:张小珺

分类:人工智能

语言:中文

阅读时间:7 分钟

字数:1524

标签: Claude, Gemini, 预训练, 强化学习, AI 集体主义

收听完整播客

查看原文 → 發佈: 2026-05-11 08:00:00 收錄: 2026-05-11 10:00:09

🤖 問 AI

針對這篇文章提問,AI 會根據文章內容回答。按 Ctrl+Enter 送出。