Transformer的八个爹,如今都在哪?
《Transformer的八个爹,如今都在哪?》
2017年,谷歌八位研究人员发表了奠基性论文《Attention Is All You Need》,提出了Transformer架构。如今,这八位作者已全部离开谷歌,分散在AI领域的各个前沿。
**Ashish Vaswani** 与Niki Parmar先后共同创立了Adept AI和Essential AI。最新传闻英伟达正吸纳Essential AI核心团队,Vaswani可能加入。
**Noam Shazeer** 因谷歌未发布其聊天机器人而出走创立Character.AI,后谷歌斥资约27亿美元授权技术并请他回归。近日他再次离职,加入了OpenAI。
**Niki Parmar** 在离开Essential AI后,于2024年底加入了Anthropic,参与Claude模型开发。
**Jakob Uszkoreit** 是“仅用注意力”想法的最初提出者。他于2021年联合创立生物科技公司Inceptive,用AI设计RNA疗法。
**Llion Jones** 于2023年在东京联合创立Sakana AI,探索模型协同演化的新路径,公司已获巨额融资并与大企业合作。
**Aidan N. Gomez** 是当年最年轻的作者(实习生)。他联合创立了企业级AI公司Cohere,专注于为企业提供安全、可控的AI服务。
**Łukasz Kaiser** 是唯一一位始终留在大型实验室做纯研究的作者。他于2021年加入OpenAI,是GPT-4、推理模型o系列的核心贡献者。
**Illia Polosukhin** 于2017年离开谷歌,联合创立了区块链项目NEAR Protocol,并将其定位为未来AI智能体经济的“结算层”。
2024年,其中七人在英伟达GTC大会上重聚。尽管路径各异,但他们都未停止探索。正如他们所言,Transformer并非终点,下一个架构必须“明显地、毫无疑问地更好”才能取代它。
marsbit06/28 05:29