本科学历但创造出GPT，奥特曼盛赞为「爱因斯坦级」天才_风闻

量子位-量子位官方账号-1小时前

2025-01-01

白小交发自凹非寺

量子位 | 公众号 QbitAI

奥特曼称他是爱因斯坦级别的天才；OpenAI总裁更是直言：

只要他想要的，我们都给。

Alec Radford大神离职OpenAI，现在牵出更多细节：

改变世界的GPT，竟然是在Jupyter notebook上诞生的。

而他只负责提供背后的灵感，剩下的由工程师来解决。

（网友：那在Excel也可以做到这一点）

奥特曼高度评价：没有他应有的知名度。

他在Jupyter notebooks上发明了GPT

在奥特曼帖子下面，更多细节轶事被扒了出来。

比如事实是，他差点就放弃了将语言作为通往 AGI 的道路。

据这位OpenAI员工描述，在Alec在职最后一天他们有机会第一次谋面，他向Alec询问了坚持语言模型背后的原因。

大概在2017年，Alec花了几年时间来研究RNN，但是进展不大。

于是Alec就感觉很沮丧，就想着要不要退出OpenAI。最终他决定休息一个月来调整，重新思考自己的方案。

回来后不久，Ilya就跟他推荐了谷歌前同事的新论文，也就是那篇著名的Attention is all you Need。

于是乎，他就开始了新的架构尝试，并将其与无监督预训练相结合。

结果效果非常好，GPT时代就此开始。

同样还有CLIP，他曾为此闭关一年来解决计算机视觉问题，最终才得以推出。CLIP也成为后续解决2D计算机视觉问题的基础。

不过能造就GPT、CLIP，也是少不了OpenAI诸位同事对他的全力支持——

当时他在Jupyter notebooks上编写代码，然后就让研究工程师在那里翻译。好奇心胜过一切。

OpenAI总裁Greg Brockman曾提到过这位天才：只要他想要的，我们都给。

当时是在2023年SXSW大会上，Greg Brockman表示，Alec Radford对语言非常感兴趣，一直在研究如何构建小型聊天机器人。

我们非常喜欢他，所以我们非常支持他做任何他想做的事情。与此同时，我们也在投资一些严肃的项目，我们就想，你知道，无论亚历克需要什么，我们都会确保他得到。

也正因如此，2017诞生了第一个有趣的结果——一个根据亚马逊评论训练出来的模型，它可以预测下一个角色、下一个角色、下一个字母是什么。实际上，它学会了最先进的情感分析分类器。你可以给它一个句子，它会说这是正面的还是负面的。这听起来并不令人印象深刻，但就是在这一刻，我们知道它一定能成功。”

还有同行们表示，他的一些想法是整个AI领域研究者们重要灵感来源。并且他从来也不吝惜地去分享他的时间和想法。