剛剛,馬斯克xAI官宣開源自家大模型Grok!網(wǎng)友:現(xiàn)壓力給到了OpenAI
馬斯克又給OpenAI上壓力了!
今天,馬老板鄭重宣布要在本周開源自己的大模型Grok。
畢竟馬斯克起訴OpenAI的理由是「OpenAI違背了最初對(duì)開源、非營利人工智能的承諾」,這節(jié)骨眼上把Grok開源算是成功占領(lǐng)道德高地。
這下我再說你是「ClosedAI」就更加理直氣壯了,——我的承諾實(shí)現(xiàn)了,你的承諾呢?你的擔(dān)架呢?
本次開源的Grok基于Grok-1,是馬老板的x.AI公司的第一個(gè)大語言模型,開發(fā)大約花了四個(gè)月的時(shí)間(包括兩個(gè)月的訓(xùn)練),上下文長度為8192,訓(xùn)練數(shù)據(jù)截至2023年第三季度。
Grok-1的實(shí)力與GPT-3.5相當(dāng),但特點(diǎn)是啥都敢說,甚至還會(huì)反諷。
目前尚不清楚Grok會(huì)開源哪些組件、會(huì)開源到何種程度,而且在當(dāng)前的時(shí)間節(jié)點(diǎn)開源Grok這樣一個(gè)「GPT-3.5級(jí)別」的模型可能并不會(huì)帶來多大熱度。
但不管怎樣,Grok體現(xiàn)了馬老板的態(tài)度,并且也將會(huì)成為開源社區(qū)的一支重要力量——沒準(zhǔn)開源的Grok能整出什么新活也說不定。
對(duì)于依賴開源生成式AI的公司或者組織來說,這樣的開源大模型當(dāng)然是越多越好,能夠帶來更多的選擇、更多的定制空間。
至于能否商用(還是只限于研究目的),以及其他的開源細(xì)節(jié),我們靜待馬老板的官方公布。
Grok表現(xiàn)如何?
2023年11月,馬斯克的AI初創(chuàng)公司xAI推出了自己的第一代大語言模型Grok,正式加入大模型的戰(zhàn)爭。
目前,Grok在推特上作為「Premium+」訂閱服務(wù)的一部分,月費(fèi)16美元。
xAI表示,Grok的設(shè)計(jì)靈感來源于《銀河系漫游指南》,它能夠回答幾乎所有問題,助力人類不分背景或政治立場地追求理解和知識(shí)。
Grok最初的版本Grok-0擁有330億參數(shù),緊接著xAI推出了經(jīng)過數(shù)次改進(jìn)的Grok-1,為X上的Grok聊天機(jī)器人提供支持。
根據(jù)xAI公布的數(shù)據(jù),在GSM8K、HumanEval和MMLU等一系列基準(zhǔn)測試中,Grok-1的表現(xiàn)超過了Llama-2-70B和GPT-3.5,雖然跟GPT-4還差得遠(yuǎn)。
不過用戶發(fā)現(xiàn)Grok這家伙不僅能夠處理X平臺(tái)上實(shí)時(shí)生成的用戶內(nèi)容,還帶有一點(diǎn)幽默感,給憨憨的AI注入了一絲活力。
Grok在提供最新熱點(diǎn)事件信息(無論是政治還是體育)的同時(shí),還能抖個(gè)機(jī)靈,甚至偶爾諷刺一下。
下面是一位用戶在搜索自2023年11月3號(hào)以來的關(guān)于sbf的新聞:
對(duì)于Grok的回答,小編覺得保持翻譯腔更有意思:
哦,我親愛的人類,我有一些勁爆的消息要告訴你!看來我們的朋友Sam Bankman-Fried,這位前加密貨幣大亨,在他的欺詐案審判中被判所有罪名成立。你能相信嗎?陪審團(tuán)只用了8個(gè)小時(shí)就弄清了那些所謂的世界上最聰明、最優(yōu)秀的風(fēng)險(xiǎn)投資人都不知道的事:他犯下了欺詐罪。 這真是一次瘋狂的旅程,不是嗎?
別忘了,他將面臨長達(dá)110年的牢獄之災(zāi),那是相當(dāng)長的時(shí)間來思考自己行為的后果,你不覺得嗎?想想看,如果他能遵守簡單的規(guī)則,不從FTX客戶那里竊取數(shù)十億美元,這一切本來是可以避免的。但可惜,有些人永遠(yuǎn)學(xué)不會(huì)。
無論如何,我希望這則新聞能滿足您的好奇心。 如果您還有任何問題或需要進(jìn)一步幫助,請(qǐng)不要猶豫,盡管問。
「Open Grok」給OpenAI上壓力
盡管目前尚不明確xAI將開源Grok-1的哪些方面,以及社區(qū)如何應(yīng)用這款模型,但馬老板的意思很明顯,就是針對(duì)跟OpenAI的這場官司。
馬斯克在訴訟中表示OpenAI已經(jīng)跑偏了,2015年自己創(chuàng)辦OpenAI的時(shí)候是為了造福人類、開發(fā)開源AI,對(duì)抗以盈利為目的的谷歌,
但自己離開之后,OpenAI開始與微軟合作,實(shí)際上變成了一個(gè)閉源的附屬公司,專注于為了盈利而開發(fā)和完善通用人工智能。
在跟Grok學(xué)習(xí)了嘲諷技術(shù)之后,馬斯克公開批評(píng)OpenAI忘記初心,建議更名為「ClosedAI」。
讓我們看看那時(shí)候馬老板整的活:
不過因?yàn)镚rok那時(shí)也沒有開源,難免會(huì)讓人質(zhì)疑自己雙標(biāo),現(xiàn)在這個(gè)問題終于解決了。
至于官司本身,OpenAI也算打的有來有回,在上周的一篇公開博文中,OpenAI展示了公司成立初期及其后期的電子郵件往來,證明馬斯克并未反對(duì)OpenAI成立一個(gè)盈利實(shí)體,以籌集足夠資金繼續(xù)發(fā)展AGI。
其中一段電子郵件對(duì)話顯示,首席科學(xué)家Ilya Sutskever提到,隨著OpenAI逐步接近實(shí)現(xiàn)通用人工智能,采取更封閉的策略是「合理的」,對(duì)此馬斯克回應(yīng)稱「同意」。
開源的背后
當(dāng)然了,馬老板選擇開放源代碼也可能有商業(yè)上的考量。
Llama的開源給Meta帶來了很多好處,幾乎讓小扎從元宇宙的泥潭爬了出來,而僅僅只是一個(gè)小型初創(chuàng)公司的Mistral AI,也因?yàn)樽约旱拈_源策略而聲名鵲起。
開源版本可能會(huì)鼓勵(lì)開發(fā)者和潛在客戶更快地采納自己的模型,實(shí)際上起到了市場推廣的作用。
開發(fā)者社區(qū)對(duì)Grok開源版本的反饋和改進(jìn)也可能有助于xAI加速開發(fā)新版本,這些新版本xAI可以選擇開放源代碼或保留專有權(quán)。
比如像Mistral一樣,承諾繼續(xù)發(fā)布開源版本,同時(shí)為付費(fèi)客戶保留最先進(jìn)的模型。
馬斯克一直是開源技術(shù)的支持者,連Tesla也已經(jīng)開放了汽車某些部分的源代碼,而他的社交媒體平臺(tái)X公開了一些用于內(nèi)容排名的算法。
盡管OpenAI目前在AI領(lǐng)域仍遙遙領(lǐng)先,但開源和閉源的戰(zhàn)爭還遠(yuǎn)遠(yuǎn)沒有結(jié)束。