企業(yè)正在向生成式人工智能（GenAI）投資數(shù)千億美元，希望它能改善他們的運(yùn)營。然而，這些公司中的大多數(shù)還沒有看到他們在大型語言模型（LLM）和新興的GenAI上的投資回報(bào)。那么，是什么阻礙了我們實(shí)現(xiàn)GenAI所承諾的巨大回報(bào)呢?

英偉達(dá)首席執(zhí)行官黃仁勛在上個(gè)月的GTC主題演講中表示:“有些事情正在發(fā)生。不僅僅是我們的行業(yè)正在發(fā)生變化……計(jì)算機(jī)是當(dāng)今社會(huì)最重要的工具。計(jì)算領(lǐng)域的根本性變革影響著每一個(gè)行業(yè)。”

英偉達(dá)位于GenAI行業(yè)的中心，2022年11月30日當(dāng)OpenAI向世界推出了ChatGPT，幾乎一夜之間，每個(gè)人似乎都在談?wù)撨@款模仿人類交流的程度驚人的新人工智能產(chǎn)品。無論是聊體育、接聽客服電話，還是像莎士比亞一樣押韻，ChatGPT似乎都能毫不費(fèi)力地做到。

從那以后，GenAI的業(yè)務(wù)開始起飛，科技巨頭一直是它最大的啦啦隊(duì)長。微軟向OpenAI投資了130億美元，而亞馬遜最近向Anthropic投資了27.5億美元，使其總投資達(dá)到40億美元。谷歌已經(jīng)向Anthropic投資了20億美元，Databricks以13億美元收購了MosaicML, SAP也向一系列LLM提供商投資了10億美元。

雖然GenAI的軟件正在蓬勃發(fā)展，但主要受益的硬件廠商僅有一家公司。英偉達(dá)擁有90%以上的LLM訓(xùn)練市場。這對該公司來說是件好事，它的收入呈爆炸式增長，總市值超過2萬億美元。

GenAI的大部分成果都在軟件和服務(wù)領(lǐng)域。幾乎在一夜之間，數(shù)百家構(gòu)建數(shù)據(jù)和分析工具的軟件供應(yīng)商將自己的產(chǎn)品轉(zhuǎn)向新興的GenAI堆棧，而風(fēng)險(xiǎn)資本家則向無數(shù)人工智能初創(chuàng)企業(yè)投入了數(shù)十億美元。

有這么多的資金在流動(dòng)，它已經(jīng)變得相當(dāng)泡沫了。但市場有希望從今天的數(shù)十億美元能在明天變成數(shù)萬億美元。麥肯錫2023年6月的一份報(bào)告估計(jì)，GenAI在幾十個(gè)用例中“每年可以增加相當(dāng)于2.6萬億至4.4萬億美元的收入”。麥肯錫表示，大部分好處將來自四方面應(yīng)用，包括自動(dòng)化客戶運(yùn)營、營銷和銷售、軟件工程和研發(fā)。

毫不奇怪，私營企業(yè)正在迅速行動(dòng)，抓住新的商業(yè)機(jī)會(huì)。畢馬威(KPMG)上個(gè)月對商界領(lǐng)袖進(jìn)行的一項(xiàng)調(diào)查發(fā)現(xiàn)，97%的人計(jì)劃在未來12個(gè)月內(nèi)投資GenAI。其中，近25%的人投資在1億至2.49億美元之間，15%的人投資在2.5億至4.99億美元之間，6%的人計(jì)劃投資超過5億美元。

人們對GenAI感到興奮，并投入巨額資金開發(fā)它，這是有正當(dāng)理由的。硅谷資深人士Amr Awadallah表示，如今的大型語言模型代表了人工智能模型工作方式和功能的根本轉(zhuǎn)變。

“他們正在接受的訓(xùn)練是理解、推理、理解，能夠解析英語、法語或中文，理解物理、化學(xué)、生物的概念?！?Awadallah說，他在2020年與人共同創(chuàng)立了一家名為Vectara的GenAI初創(chuàng)公司，他也是Cloudera的聯(lián)合創(chuàng)始人?！八麄兘邮艿挠?xùn)練是為了理解，而不是為了記憶。這是一個(gè)關(guān)鍵點(diǎn)?！?/span>

LLM不只是像鸚鵡一樣重復(fù)單詞，而是表明他們可以運(yùn)用所學(xué)來解決新問題。他說，這種學(xué)習(xí)能力讓人們?nèi)绱伺d奮，也是推動(dòng)LLM投資的原因。

“神經(jīng)網(wǎng)絡(luò)應(yīng)變內(nèi)部的隨機(jī)權(quán)重和參數(shù)網(wǎng)絡(luò)的進(jìn)化方式使其不僅僅是重復(fù)單詞。它實(shí)際上能理解。它真的理解世界是關(guān)于什么的。” Awadallah說，“它們只會(huì)變得越來越聰明。毫無疑問。業(yè)內(nèi)所有人都認(rèn)為，到2029年或2030年，我們將擁有超過人類智力的LLM?！?/span>

然而，根據(jù)Awadalla的說法，有幾個(gè)問題阻礙了LLM在企業(yè)中發(fā)揮宣傳作用。這些癥狀包括產(chǎn)生幻覺(或編造)的傾向；缺乏對模型如何產(chǎn)生結(jié)果的可見性；版權(quán)問題；以及提示工程難題。這些都是Vectara正在用其GenAI軟件解決的問題，其他供應(yīng)商也在解決這些問題。

法律和倫理

另外倫理、法律和監(jiān)管方面的擔(dān)憂也阻礙了GenAI的推廣。歐盟投票正式通過了《人工智能法案》，該法案禁止某些形式的人工智能，另一些形式的人工智能需要事先獲得的批準(zhǔn)。出于對歷史上不準(zhǔn)確圖像的擔(dān)憂，谷歌取消了其新Gemini模型的圖像生成功能。

OpenAI上周宣布，它的新語音引擎可以在15秒的采樣后克隆一個(gè)人的聲音。然而，不要期望在短時(shí)間內(nèi)看到語音引擎公開可用，因?yàn)镺penAI還沒有發(fā)布它的計(jì)劃。該公司在一篇博客文章中寫道:“我們認(rèn)識(shí)到，制造類似于人類聲音的言論存在嚴(yán)重風(fēng)險(xiǎn)，這在大選年尤其重要。”

加州大學(xué)圣地亞哥分校的研究科學(xué)家、圣地亞哥超級(jí)計(jì)算機(jī)中心的首席數(shù)據(jù)科學(xué)官?lkay Alt?nta?說，在很大程度上，科技界還沒有開始認(rèn)真對待GenAI和LLM的倫理問題。

“你不需要數(shù)據(jù)科學(xué)家來使用它們。這就是數(shù)據(jù)科學(xué)的商品化?！彼f，“但我認(rèn)為我們?nèi)蕴幱凇胰绾闻c人工智能互動(dòng)，以及可信賴性和道德使用’的時(shí)期。”

Alt?nta?說，應(yīng)該對GenAI應(yīng)用進(jìn)行倫理檢查和倫理技術(shù)。但要弄清楚這些檢查和技術(shù)究竟應(yīng)該在什么情況下應(yīng)用并不容易。

她說:“從應(yīng)用的方式來看，你可能會(huì)有一個(gè)看起來非常符合標(biāo)準(zhǔn)的應(yīng)用程序。”“但當(dāng)你把兩種技術(shù)、兩組數(shù)據(jù)或多個(gè)東西放在一起時(shí)，這種整合就會(huì)把它推到一個(gè)不隱私、不道德、不可信或不夠準(zhǔn)確的地步。這時(shí)就開始需要這些技術(shù)工具了。”

硬件和延遲

另一個(gè)阻礙GenAI應(yīng)許之地到來的問題是嚴(yán)重缺乏計(jì)算能力。

一旦GenAI的淘金熱開始，許多最大的LLM開發(fā)商搶購可用的GPU來訓(xùn)練他們的大型模型，這可能需要幾個(gè)月的時(shí)間來訓(xùn)練。其他科技公司一直在囤積GPU，無論是在本地運(yùn)行還是在云端運(yùn)行。與臺(tái)積電簽訂芯片生產(chǎn)合同的英偉達(dá)(Nvidia)一直無法生產(chǎn)出足夠的GPU來滿足需求，結(jié)果導(dǎo)致了“GPU擠兌”和價(jià)格上漲。

英偉達(dá)的硬件競爭對手們已經(jīng)嗅到了商機(jī)，為了滿足市場需求，他們正在大力投入。英特爾和AMD正忙著研發(fā)他們的人工智能加速器，而其他芯片制造商，如Cerebras和Hailio，也在推出新的芯片。所有的公共云提供商(AWS、Azure和Google cloud)也都有自己的人工智能加速器。

但在未來，所有GenAI工作負(fù)載都將在云中運(yùn)行是值得懷疑的。更有可能的未來是，人工智能工作負(fù)載將被推到邊緣設(shè)備上運(yùn)行，這是OctoAI首席執(zhí)行官兼創(chuàng)始人Luis Ceze正在下的賭注。

Ceze說:“對于我們來說，現(xiàn)在顯然有機(jī)會(huì)讓模型在本地運(yùn)行，然后將其連接到云端，這是我們一直在做大量公開研究的事情。”“這是我們正在積極努力的事情，我認(rèn)為未來這是不可避免的?！?/span>

根據(jù)Ceze的說法，除了以混合方式運(yùn)行GenAI工作負(fù)載外，LLM本身也將以混合方式組成和執(zhí)行?！叭绻憧紤]一下這里的潛力，那就是我們將在今天與計(jì)算機(jī)的幾乎每一次互動(dòng)中使用生成式人工智能模型?！薄昂苌僦挥幸环N模式。這是一組可以互相交談的模型?！?/span>

為了真正充分利用GenAI，公司需要獲得盡可能最新的數(shù)據(jù)。事實(shí)證明，這一要求對專門從事大容量數(shù)據(jù)提取的數(shù)據(jù)庫供應(yīng)商來說是一個(gè)福音，比如開發(fā)GPU驅(qū)動(dòng)數(shù)據(jù)庫的Kinetica公司。

Kinetica首席執(zhí)行官Nima Negahban在最近的GTC展會(huì)上說:“現(xiàn)在，我們看到實(shí)時(shí)RAG(檢索增強(qiáng)生成)的發(fā)展勢頭最強(qiáng)勁，基本上是將這些實(shí)時(shí)工作負(fù)載暴露出來，這樣生成解決方案就可以利用實(shí)時(shí)更新和增長的數(shù)據(jù)?！薄斑@是我們看到勢頭最大的地方。”

GenAI的“氣泡裂縫”

計(jì)算機(jī)社區(qū)是否會(huì)團(tuán)結(jié)起來解決所有這些挑戰(zhàn)并實(shí)現(xiàn)GenAI的巨大承諾還有待觀察。但裂縫開始出現(xiàn)，表明科技股價(jià)值已經(jīng)高估，至少到目前為止是這樣。

例如，據(jù)《華爾街日報(bào)》上周的一篇報(bào)道，風(fēng)險(xiǎn)投資公司紅杉資本(Sequoia)的一份報(bào)告估計(jì)，在英偉達(dá)GPU上投資了500億美元的人工智能資本玩家，只獲得了30億美元的收入。

去年在美國國會(huì)就人工智能問題作證的紐約大學(xué)教授Gary Marcus在今年早些時(shí)候發(fā)表的Substack博客中引用了《華爾街日報(bào)》的這篇報(bào)道?！斑@顯然是不可持續(xù)的，”他寫道?！罢麄€(gè)行業(yè)都建立在炒作的基礎(chǔ)上?！?/span>

谷歌DeepMind主管Demis Hassabis周日對英國《金融時(shí)報(bào)》表示，流入人工智能初創(chuàng)公司的數(shù)十億美元“帶來了一大堆炒作，或許還有一些欺詐”。

歸根結(jié)底，LLM和GenAI是非常有前途的新技術(shù)，它們有可能從根本上改變我們與計(jì)算機(jī)的交互方式。目前尚不清楚的是這種變化的程度以及何時(shí)會(huì)發(fā)生。