69岁强化学习之父Richard Sutton创业:造20瓦人脑级智能体
强化学习之父、图灵奖得主Richard Sutton在69岁时宣布创业,与学生Khurram Javed离开John Carmack的Keen Technologies,共同创立Oak Lab。Sutton是强化学习领域的奠基人,其著作是该领域经典教材,并培养出David Silver等多位AI顶尖人才。
他认为当前深度学习路线效率低下,难以实现更高阶的通用智能,因此需要全新的基础思想。Oak Lab的终极目标是开发一个万亿参数规模、能实时学习与规划、整机功耗仅20瓦(与人脑耗能相当)的智能体。
Sutton强调,智能应来自运行时持续产生的经验,而非依赖离线预训练的海量静态数据。他主张AI应在与环境交互的每一刻进行学习,通过“时间抽象”将系列动作沉淀为可复用技能。Oak Lab的核心架构OaK(Options and Knowledge)旨在让智能体从经验中发现抽象结构,形成可规划调用的技能,并以batch size为1的方式实时更新,无需存储和回放历史数据。
这一理念延续了Sutton2019年提出的“苦涩的教训”,即通用学习方法终将胜过依赖人类知识的系统。如今,他进一步推动AI从依赖人类数据转向依靠智能体自身经验。Oak Lab的创业是这一研究方向的具体实践。
Sutton将于上海世界人工智能大会(WAIC)分享相关主题。
marsbit07/14 12:29