Akamai推出Akamai Cloud Inference 引領(lǐng)邊緣智能全面升級(jí)??
全球領(lǐng)先的云服務(wù)提供商Akamai Technologies(以下簡(jiǎn)稱為Akamai)宣布推出戰(zhàn)略級(jí)解決方案Akamai Cloud Inference。這款基于其全球分布式云平臺(tái)打造的AI推理解決方案,以突破性的性能指標(biāo)引發(fā)行業(yè)關(guān)注——與傳統(tǒng)超大規(guī)模云架構(gòu)相比,其吞吐量提升3倍、延遲降低60%,成本更是銳減86%。
邊緣計(jì)算重構(gòu)AI推理范式在生成式AI應(yīng)用爆發(fā)的背景下,企業(yè)逐漸意識(shí)到大型語(yǔ)言模型(LLM)訓(xùn)練與推理環(huán)節(jié)的架構(gòu)差異。彭博社預(yù)測(cè)到2032年AI推理市場(chǎng)規(guī)模將達(dá)1.3萬(wàn)億美元,其他多份近期報(bào)告也印證了這一判斷。這一市場(chǎng)轉(zhuǎn)變預(yù)示著2025年將成為分布式AI推理加速發(fā)展的元年。"訓(xùn)練如同繪制地圖,需要集中式超算中心;而推理更像是實(shí)時(shí)導(dǎo)航,必須在靠近用戶的邊緣發(fā)生。"Akamai云技術(shù)部門(mén)首席運(yùn)營(yíng)官兼總經(jīng)理Adam Karon用精妙比喻揭示了行業(yè)痛點(diǎn)。2025年大約有75%的數(shù)據(jù)將產(chǎn)生于傳統(tǒng)云區(qū)域之外(Gartner數(shù)據(jù)),傳統(tǒng)云架構(gòu)在響應(yīng)速度、數(shù)據(jù)傳輸成本等方面已稍顯疲態(tài)。
面對(duì)如此的市場(chǎng)環(huán)境,Akamai推出Akamai Cloud Inference的解決方案,依托其覆蓋130個(gè)國(guó)家、4200多個(gè)節(jié)點(diǎn)的分布式網(wǎng)絡(luò),構(gòu)建了獨(dú)特的"云-邊協(xié)同"架構(gòu)。通過(guò)與NVIDIA、VAST Data等生態(tài)伙伴的深度整合,該解決方案提供從GPU加速計(jì)算、向量數(shù)據(jù)庫(kù)實(shí)時(shí)檢索到WebAssembly邊緣執(zhí)行的完整技術(shù)棧。
技術(shù)底座的四維突破
- 異構(gòu)算力集群:該解決方案創(chuàng)新性地整合了CPU、GPU與量身定制的ASIC VPU,針對(duì)不同推理場(chǎng)景動(dòng)態(tài)調(diào)配資源。同時(shí),Akamai 還與 NVIDIA 的 NVIDIA AI Enterprise 生態(tài)系統(tǒng)進(jìn)行了整合,利用 Triton、TAO Toolkit、TensorRT 和 NVFlare 來(lái)優(yōu)化 NVIDIA GPU 上 AI 推理的性能。
- 智能數(shù)據(jù)治理:Akamai通過(guò)整合VAST Data實(shí)時(shí)數(shù)據(jù)訪問(wèn)、可擴(kuò)展對(duì)象存儲(chǔ)及Aiven/Milvus向量數(shù)據(jù)庫(kù)技術(shù),構(gòu)建了支持檢索增強(qiáng)生成(RAG)的智能數(shù)據(jù)架構(gòu),實(shí)現(xiàn)微調(diào)模型的安全存儲(chǔ)與全球范圍的低延遲AI推理。
- 容器化敏捷部署:Akamai通過(guò)Linode Kubernetes Engine企業(yè)版與最近發(fā)布的 Akamai App 平臺(tái),集成KServe、Kubeflow等開(kāi)源工具構(gòu)建容器化AI推理平臺(tái),實(shí)現(xiàn)PB級(jí)性能的自動(dòng)擴(kuò)展、混合多云部署及成本優(yōu)化。
- 邊緣Wasm運(yùn)行時(shí):Akamai與Fermyon等 Wasm 提供商合作,集成WebAssembly技術(shù),使開(kāi)發(fā)者能夠借助無(wú)服務(wù)器架構(gòu)直接在邊緣端執(zhí)行輕量化LLM推理,為延遲敏感型應(yīng)用提供支持。
行業(yè)落地開(kāi)辟新藍(lán)海
從車(chē)載語(yǔ)音助手到AI驅(qū)動(dòng)的農(nóng)田管理,從消費(fèi)品圖像優(yōu)化到虛擬試衣間,Akamai Cloud Inference通過(guò)分布式云和邊緣架構(gòu)賦能跨行業(yè)創(chuàng)新。這些場(chǎng)景化應(yīng)用不僅解決了傳統(tǒng)集中式云在實(shí)時(shí)決策和個(gè)性化體驗(yàn)上的瓶頸,更通過(guò)邊緣側(cè)低延遲推理技術(shù),為農(nóng)業(yè)、零售、制造業(yè)等垂直領(lǐng)域智能升級(jí)提供了更多的可能性,將AI從實(shí)驗(yàn)室推向了產(chǎn)業(yè)變革的最前線。
Akamai此次技術(shù)突圍,不僅重新定義了云服務(wù)商的競(jìng)爭(zhēng)維度,更預(yù)示著AI基礎(chǔ)設(shè)施從"算力軍備競(jìng)賽"向"場(chǎng)景效能革命"的戰(zhàn)略轉(zhuǎn)向。當(dāng)行業(yè)巨頭仍在追逐千億參數(shù)大模型時(shí),Akamai已悄然在離數(shù)據(jù)源頭最近處筑起新的護(hù)城河。