抖音特效背后的火山引擎技術(shù),將開放給更多平臺
抖音特效都能運(yùn)用到哪些不同的場景之中?未來的發(fā)展趨勢又是怎樣的?
7月28日,抖音聯(lián)合火山引擎在北京舉辦智能特效技術(shù)開放日?;鹕揭嫦嚓P(guān)特效技術(shù)專家分享了抖音特效的應(yīng)用場景和未來發(fā)展趨勢。

作為字節(jié)跳動的技術(shù)服務(wù)平臺,火山引擎不僅支持了抖音、今日頭條等公司內(nèi)部產(chǎn)品,也在向外部企業(yè)開放,為客戶提供特效創(chuàng)作工具套件、定制算法、工程化部署和對接聯(lián)調(diào)等產(chǎn)品及服務(wù)。
目前,火山引擎資源商城已經(jīng)提供了上萬款抖音同款特效,企業(yè)可以根據(jù)熱度、類型等方式選擇使用。
比如在火山引擎提供給某客戶的AR看車解決方案中。可以實(shí)現(xiàn)前后移動、車門打開等互動效果,還可以很方便地更換整車的顏色,幫用戶在線上更全面地了解車型。
在另一個(gè)AR試妝案例中,消費(fèi)者在手機(jī)APP上就可以直觀的看到自己使用了不同色號的效果。
基于同樣的思路,火山引擎也可以用特效技術(shù)幫助消費(fèi)者去體驗(yàn)虛擬的試衣、試鞋,甚至耳環(huán)、戒指等首飾。
這種特效既可以用在電商場景,也可以用在廣告場景。目前有很多廣告都是視頻形式,視頻編輯上天然需要很多特效,用戶除了看廣告之外,還可以有一定的互動,從而獲得更豐富的信息。
此外,火山引擎還與傳媒行業(yè)合作推出了虛擬形象——數(shù)字人。數(shù)字人就是通過AI技術(shù)+ 計(jì)算機(jī)圖形(CG)技術(shù)展現(xiàn)出一個(gè)虛擬的人物形象,可以代替真人去承擔(dān)一部分工作,比如虛擬主持人等。目前,相關(guān)客戶已經(jīng)可以在游戲、社交領(lǐng)域定制自己所需要的虛擬形象。
除了現(xiàn)有的一些應(yīng)用場景之外,火山引擎還在推動特效技術(shù)繼續(xù)往前發(fā)展。
首先是端云協(xié)同。
隨著5G時(shí)代的到來,帶寬會越來越寬,網(wǎng)絡(luò)延時(shí)變短,流量成本在不斷下降,很多特效不需要在客戶端本地完成各種計(jì)算,而是可以把更多的計(jì)算包括計(jì)算機(jī)視覺(CV)技術(shù)的運(yùn)算以及CG技術(shù)的運(yùn)算放到云端完成。這樣做的好處是,相比客戶端具備了更多的運(yùn)算資源,這也就意味著CV算法可以做得更精準(zhǔn)、識別率更高、CG效果更酷炫,給用戶更好的體驗(yàn)。
一旦實(shí)現(xiàn)端云協(xié)同,特效也不再是孤島,能把人與人連接起來,把多個(gè)人放在同一個(gè)場景,讓他們之間形成互動。
具體來說,根據(jù)兩個(gè)人是不是在一個(gè)地點(diǎn),多人互動的方案可以分成同時(shí)還是不同時(shí)、同地還是不同地,形成了四個(gè)象限。如果是同時(shí),你會需要一個(gè)數(shù)據(jù)同步的實(shí)時(shí)傳輸;如果不是同時(shí),可能是異步傳輸方案;如果是同地,整個(gè)場景的建立可能需要一個(gè)絕對的坐標(biāo)系;如果是異地,需要相對的坐標(biāo)系建立場景。
在端云協(xié)同之外,另一個(gè)需要關(guān)注的趨勢是更多新型智能終端的興起,比如說車載設(shè)備、智能家電,還有一些智能可穿戴設(shè)備,這些都會成為移動端入口。在這些移動端之上進(jìn)行多媒體內(nèi)容展示的可能性也有很多,火山引擎的CV、CG、互動等特效技術(shù),亦將在這些終端上發(fā)揮更大的作用,給更多消費(fèi)者帶去更好的體驗(yàn)。