OpenAI又跑了一名大神！

The Information消息，初代GPT論文第一作者Alec Radford也要離開OpenAI，轉(zhuǎn)向獨(dú)立研究。

據(jù)了解， Alec于2016年加入OpenAI，從初代GPT到GPT-4o的論文中全都有他的名字，其中前兩代還是第一作者。

另外OpenAI的多模態(tài)模型CLIP，還有語音識別模型Whisper，論文一作也都是Alec。

對于Alec的離開，OpenAI研究負(fù)責(zé)人Mark Chen表示，“我們對Alec和他的貢獻(xiàn)深表敬意和贊賞，并期待在他探索獨(dú)立研究的過程中繼續(xù)與他合作。”

之前，前任研究團(tuán)隊負(fù)責(zé)人Jeff Clune（已于2022年離開OpenAI，現(xiàn)在是不列顛哥倫比亞大學(xué)副教授，同時給DeepMind擔(dān)任顧問）還對Alec給予過很高的評價，認(rèn)為Alec是影響力最大但知名度最低的AI科學(xué)家之一。

甚至在Jeff看來，Alec應(yīng)該作為“現(xiàn)代生成式人工智能之父”被載入史冊。

堅持做大模型的本科生，前兩代GPT一作

2016年，Alec Radford于富蘭克林·歐林工程學(xué)院（Franklin W. Olin College of Engineering）取得學(xué)士學(xué)位，隨后加入OpenAI，一干就是8年。

雖然Alec只有本科學(xué)歷，但在大模型領(lǐng)域是不折不扣的領(lǐng)軍人才，截至今日論文被引量已超19萬。

被引量排名前三的論文，分別與GPT-3、CLIP和GPT-2相關(guān)。

這三篇論文都為今天的ChatGPT打下了重要基礎(chǔ)，實際上，Alec幾乎參與了OpenAI所有的重大突破。

除了被引量最高的這三篇，從第一代GPT到GPT-4o的作者名單中，Alec的名字都赫然在列，并且前兩代中都是第一作者。

Alec同樣作為一作的CLIP，則是OpenAI在多模態(tài)路線上的重要成果，甚至在整個行業(yè)都極具影響力；同時，Alec也是OpenAI初代繪圖模型DALL·E的參與者。

其他模態(tài)方面，OpenAI開源的語音識別系統(tǒng)Whisper，一作仍然是Alec……

不過，最新的o1模型貢獻(xiàn)者列表中已經(jīng)沒有了Alec的名字，但與他一同從初代開始參與所有GPT工作的Ilya，仍然在o1的名單之上。

但無論如何，綜觀整個OpenAI，其他人或多或少都轉(zhuǎn)向過機(jī)器人、或是游戲AI等其他領(lǐng)域“發(fā)發(fā)論文”，只有Alec堅持做大模型方向的研究。

正是他所堅持的大語言模型路線，改變了OpenAI公司、乃至整個AI領(lǐng)域的發(fā)展方向。

對此，奧特曼還曾半調(diào)侃半認(rèn)真地表示：

招聘時，記得關(guān)注那些“看起來不會加入公司”的人。

OpenAI一開始并未確定大模型這一研究方向，但我們?nèi)匀徽辛薃I研究員，并在取得突破后讓更多人加入其中，最終成就了ChatGPT。

在加入OpenAI之前，Alec研究了卷積神經(jīng)網(wǎng)絡(luò)、批量歸一化和GAN，是DC-GAN的第一作者。

DC-GAN的另外兩名作者，是Alec的同學(xué)Luke Metz和PyTorch之父Soumith Chintala。

彼時，還在上學(xué)的Alec已經(jīng)參與創(chuàng)立了indico.io（現(xiàn)名為Indico Data），Luke也加入到了該公司。

（后來，大模型興起之后，Indico也增加了企業(yè)大模型業(yè)務(wù)，率先推出了基于GPT的自定義模型。）

2016年，也就是Alec加入OpenAI的同一年，Luke去了谷歌大腦，但后來又在2022年加入了OpenAI，參與了GPT-4的部分研發(fā)工作，不過今年10月也離職了。

前兩代GPT論文作者全部離開OpenAI

到Alec離職完成之后，也就標(biāo)志著前兩代GPT論文的所有作者，都離開OpenAI了。

其中最著名的是原首席科學(xué)家Ilya Sutskever，他和Alec一樣參與了包括前兩代在內(nèi)的GPT的工作。

Ilya今年五月宣布退出OpenAI時，震動了整個AI圈，后來他成立了新公司，主攻構(gòu)建“安全超級智能”。

第一代GPT的另外兩名作者分別是Karthik Narasimhan和Tim Salimans。

其中Karthik Narasimhan到OpenAI是出任訪問學(xué)者，2018年訪問期結(jié)束后到普林斯頓擔(dān)任教職，現(xiàn)在是普林斯頓NLP聯(lián)合主任，跟陳丹琦是同事。

另外，Karthik還是開源版Devin作者之一——清華姚班學(xué)霸姚順雨在普林斯頓讀博期間的導(dǎo)師（今年8月，姚順雨加入了OpenAI）。

三作Tim Salimans則是在2018年7月履新谷歌大腦，擔(dān)任職位為高級管理科學(xué)家。

同樣選擇加入谷歌的，還有GPT-2的三作Rewon Child和四作David Luan。

Rewon后來還參與了GPT-3的工作，2021年離開OpenAI加入谷歌，2022年加入了初創(chuàng)公司Inflection AI，今年三月又到了微軟；

David到谷歌則是2020年，后來他和Transformer論文作者Ashish Vaswani、Niki Parmar一起，創(chuàng)辦了一家叫Adept的公司，David出任CEO。

不過據(jù)David的領(lǐng)英資料顯示，他這個月已不在Adept擔(dān)任職務(wù)，而是加入了亞馬遜，與強(qiáng)化學(xué)習(xí)大牛、吳恩達(dá)第一屆博士生Pieter Abbeel一同工作。

除了去谷歌的，GPT-2的作者中還包括了后來OpenAI的最強(qiáng)競對，也就是Claude背后的廠商Anthropic的創(chuàng)始人Dario Amodei。

Dario在OpenAI參與了GPT-2和3的工作，2020年末和妹妹Daniela一起離開，創(chuàng)立了Anthropic，兩人分別出任CEO和總裁。

去向為Anthropic的，除了創(chuàng)始人Dario，還有GPT-2的二作Jeffrey Wu，離職的時間是今年7月，成為了倒數(shù)第二位離開OpenAI的前兩代GPT參與者。

而今天，隨著Alec的離職消息，打造最早兩代GPT的八位研究者，已經(jīng)要全部各奔東西了。