Ilya 最近罕见上了一期长访谈,这是他离开 OpenAI、创办 SSI 之后,第一次系统谈自己怎么看当下的大模型从第一性原理出发,直指目前人工智能发展的核心问题,总结了播客里的精华:1.Scaling 时代结束了。2012-2020 是探索时代,2020-2025 是算力规模时代。但从 2025 起,数据瓶颈让预训练 scaling law 失效,AI 正回到研究时代,未来的关键不再是 GPU,而是谁能找到新的算法。2.RL 可能在“弄傻模型”。RL 强行把智能收窄去讨好指标,训练可能使模型过于专注和狭隘,缺乏基本的自我意识,反而在撤销预训练里蕴含的人类思想投影。3.情绪 = 终极 Value Function人类能做决策,是因为情绪负责剪枝、负责判断什么重要、什么不重要。AI 像失去情绪的病人,有逻辑但没有方向感,需要我们不停地修剪。大家怎么看Ilya提出的算力时代走到头了?我们是应该在“more are more”的路上继续走下去,还是要在“less is more”的方向上另开新路?
