Transformer奠基人Noam Shazeer再次告别谷歌加盟OpenAI

据动察 Beating 监测，谷歌 AI 核心人物、Gemini 模型技术主管 Noam Shazeer 再次离开谷歌，正式加盟竞争对手 OpenAI。OpenAI 于本周三向员工宣布，Shazeer 加盟后将专注于寻找全新的大模型底层架构，并推动 Transformer 架构的演化。 Shazeer 是 2017 年谷歌奠基性论文《Attention Is All You Need》的共同作者之一，论文提出的 Transformer 架构是 ChatGPT、Claude 及 Gemini 等现代生成式 AI 模型的根基。他于 2000 年加入谷歌，是谷歌最早期的核心工程师之一。2021 年，因为谷歌出于安全和品牌考量，拒绝发布他与 Daniel De Freitas 研发的聊天机器人 Meena，Shazeer 选择离职并联合创立了 Character.AI。 2024 年 8 月，为了重新召回 Shazeer，谷歌与 Character.AI 达成了一笔高达 27 亿美元的授权与技术收编协议。作为持有 Character.AI 约 30% 至 40% 股权的创始人，Shazeer 从中个人套现了 7.5 亿至 10 亿美元。重回谷歌后，他出任副总裁兼 Gemini 联合技术主管，主要负责模型预训练。然而，距离谷歌花费巨资将他收编还不到两年，Shazeer 便再次选择出走。 Shazeer 的加盟是 OpenAI 在人才竞争中的重要收获，也使谷歌 Gemini 团队流失了核心技术主管。眼下大模型正触及 Transformer 架构的算力扩展极限。OpenAI 让 Transformer 最初设计者带队寻找替代方案，意在下一代大模型架构中抢占先机，以应对来自 Anthropic 和谷歌的竞争。

「查看原文」