?作者 | 徐杰承
自去年12月ChatGPT發(fā)布以來,關(guān)于大型語言模型(LLM)和聊天機(jī)器人的話題幾乎統(tǒng)治了整個(gè)互聯(lián)網(wǎng)。各大科技巨頭們也紛紛在不久后意識(shí)到了其所能夠帶來的無限商機(jī)。
最先采取行動(dòng)的微軟通過追加100億美元投資、將ChatGPT整合進(jìn)了自家搜索引擎Bing;稍顯謹(jǐn)慎的谷歌則在花費(fèi)了一定時(shí)間和精力后推出了自研聊天機(jī)器人Bard;不甘落后的國內(nèi)科技巨頭百度,也于近期宣布將在今年3月攜聊天機(jī)器人文心一言殺入這場(chǎng)混戰(zhàn)。
但一家以往一向表現(xiàn)激進(jìn)的科技巨頭卻似乎有意放棄了這場(chǎng)“ChatGPT之戰(zhàn)”,這家企業(yè)正是扎克伯格所帶領(lǐng)的Meta。令人感到驚訝的是,Meta可能已是目前唯一一家仍未加入此次聊天機(jī)器人潮流的科技巨頭了。
1、高開低走,屢戰(zhàn)屢敗
細(xì)究Meta表現(xiàn)反常的原因,很有可能是由于過去多次的失敗嘗試——其實(shí)早在2022年6月,Meta便開源了其自研的大型語言模型OPT-66B,并同年8月發(fā)布了基于OPT-66B的聊天機(jī)器人BlenderBot3,比ChatGPT早了3個(gè)月之久,可以說Meta算得上第一批涉足LLM聊天機(jī)器人的公司。
雖然彼時(shí)BlenderBot3只在美國進(jìn)行了發(fā)布,但其在當(dāng)時(shí)引起的轟動(dòng)甚至不亞于如今的ChatGPT。在發(fā)布僅幾小時(shí)后,Twitter和Reddit上便已充滿了人們與BlenderBot3有趣對(duì)話的截圖。
然而很快,這個(gè)“成功”的聊天機(jī)器人便走向了一場(chǎng)災(zāi)難。大量用戶發(fā)現(xiàn),BlenderBot3會(huì)發(fā)表惡性言論與虛假信息,甚至質(zhì)疑扎克伯格的商業(yè)策略,稱其“不道德”。這使得大量用戶漸漸失去了對(duì)BlenderBot3的信任,最終,Meta眼睜睜看著自己花費(fèi)重金打造的“大寶貝”逐漸走向了沒落。
當(dāng)然,一次的失敗并沒有澆滅Meta對(duì)于LLM的熱情。重整旗鼓后,Meta又于2022年11月聯(lián)合Papers with Code發(fā)布了另一款基于大型語言模型的機(jī)器人Galactica,相比于此前失敗的BlenderBot3,Galactica具有更具體的應(yīng)用領(lǐng)域——代寫論文。
據(jù)官方介紹,Galactica由4800萬份論文、教科書等素材訓(xùn)練而成,無論是代寫論文摘要、介紹、公式,甚至是參考文獻(xiàn)統(tǒng)統(tǒng)不在話下。不僅如此,除文本生成外,Galactica 還可以執(zhí)行涉及化學(xué)公式和蛋白質(zhì)序列的多模態(tài)任務(wù)。
但這一次,Meta依然沒能解決LLM生成準(zhǔn)確性的問題,雖然Galactica的賬面實(shí)力看似十分強(qiáng)勁,但其所撰寫的論文中卻存在大量錯(cuò)誤甚至是偽造內(nèi)容。為了不讓影響繼續(xù)擴(kuò)大,Meta不得不在發(fā)布僅三天后匆匆下架了Galactica。
2、掌舵人信念動(dòng)搖
接連的失敗似乎使Meta AI掌舵人——圖靈獎(jiǎng)得主、Meta首席AI科學(xué)家Yann LeCun對(duì)LLM的信念產(chǎn)生了一些動(dòng)搖。而近期ChatGPT以及谷歌Bard出錯(cuò)的消息,也仿佛給予了LeCun一定的支持。
無論是出于對(duì)自己面子的保護(hù),還是真的從兩次失敗中意識(shí)到了LLM機(jī)器人的致命缺陷,如今的LeCun都已從原先的LLM擁護(hù)者轉(zhuǎn)變?yōu)榱薒LM的抨擊者。
隨著相關(guān)話題熱度的不斷升高,LeCun也開始通過各種渠道積極揭露大型語言模型以及聊天機(jī)器人的不足。在近期由Collective Forecast組織的在線討論中,LeCun表示:雖然在公眾眼中它們是革命性的,但就底層技術(shù)而言,如今的聊天機(jī)器人不是多么了不起的創(chuàng)新。
此外,LeCun還多次在Twitter上表達(dá)了自己對(duì)ChatGPT的不屑:它無法擴(kuò)展,也永遠(yuǎn)不會(huì)成為通向強(qiáng)人工智能的正確道路。擴(kuò)大自動(dòng)回歸的LLM根本無法使聊天機(jī)器人達(dá)到人類智慧水平。除了糾正語法、完成句子或總結(jié)文章外,我不認(rèn)為ChatGPT能做更多正確的事情。
LeCun認(rèn)為,像OpenAI這樣的小公司沒有什么可以失去的,他們當(dāng)然能夠利用不成熟的技術(shù)和產(chǎn)品為自己炒作。但大公司選擇蹚這趟渾水顯然是非常不明智的,尤其是當(dāng)人們都看到了使谷歌損失1000億美元的失敗嘗試后。
3、Meta的布局與取舍
其實(shí)長久以來,Meta在人工智能領(lǐng)域的投入始終保持在各大科技企業(yè)的前列,Meta人工智能團(tuán)隊(duì)的大多數(shù)創(chuàng)新都進(jìn)入了他們的廣告業(yè)務(wù),直至現(xiàn)在,他們?nèi)栽谂⒆匝械娜斯ぶ悄苣P图八惴ㄞD(zhuǎn)化為可以帶來收益的產(chǎn)品。
LeCun指出,由于BlenderBot和Galactica的失誤,Meta長期以來一直因傳播虛假信息而受到指責(zé)。如今的Meta希望能夠更加嚴(yán)格的把控他們所發(fā)布的工具與內(nèi)容,而不是盲目利用聊天機(jī)器人潛入當(dāng)前的“人工智能熱潮”,并再次犯下相同的錯(cuò)誤。
不管是由于此前失敗所帶來的陣痛,還是掌舵人觀念的轉(zhuǎn)變,如今的Meta的確正在回避這場(chǎng)全球矚目的戰(zhàn)役。在一次有關(guān)生成式人工智能的采訪中,LeCun表示:扎克伯格關(guān)于元宇宙的長期夢(mèng)想仍在進(jìn)行中,自己也同樣認(rèn)同一個(gè)事實(shí),即生成式人工智能可能可以在元宇宙中得到最好的實(shí)現(xiàn)。而當(dāng)談到大型語言模型和聊天機(jī)器人時(shí),現(xiàn)在的他們似乎更愿意在遠(yuǎn)處坐山觀虎斗,積極尋找谷歌、微軟或是OpenAI正在犯下的錯(cuò)誤,并從中吸取足夠的經(jīng)驗(yàn)。
參考鏈接:
https://analyticsindiamag.com/meet-the-ai-genius-who-is-obsessed-with-llms/
http://www.myzaker.com/article/63e3902e8e9f094fe76b7af7/
https://analyticsindiamag.com/why-meta-took-down-its-hallucinating-ai-model-galactica/