AI算法提升AR直播體驗 亦真亦幻帶您暢玩淘寶造物節(jié)
2017年7月8日,為期五天的第二屆淘寶造物節(jié)在杭州國際博覽中心正式拉開序幕,作為淘寶一年一度,***玩、最盛大的線下集市,淘寶造物節(jié)依靠技術(shù)上的新突破和內(nèi)容創(chuàng)作上新模式,引導(dǎo)年輕人,鼓勵他們創(chuàng)造出更多的內(nèi)容、社群和流行趨勢,通過全新的展示和交互技術(shù)釋放他們的創(chuàng)新和創(chuàng)造力。
7月1日,一封制作精良,效果逼真的3D邀請函《飛躍奇市江湖》火遍互聯(lián)網(wǎng),熟悉3D動畫制作的朋友不難發(fā)現(xiàn),這封3D邀請函主場景的開發(fā)上,不同于傳統(tǒng)Web開發(fā)中使用CSS來實現(xiàn)的偽(有限)3D效果,而是使用WebGL來實現(xiàn),更接近于傳統(tǒng)圖形領(lǐng)域的基于OpenGL的開發(fā)模式;在材質(zhì)渲染及場景設(shè)計上,阿里巴巴技術(shù)團隊通過編寫編碼級別的“地圖編輯器”對整個地圖進行了多次美化與性能調(diào)優(yōu),使得設(shè)計場景能夠***還原,并流暢運行于移動端上;在分場景設(shè)計上,采用基于WebGL的三維交互技術(shù)360全景視頻,具有更快的開發(fā)效率以及更加精美***的場景體驗。為了最終在用戶面前呈現(xiàn)影視級的視覺效果,項目全程更是邀請到好萊塢***特效制作團隊FrameStore全程參與,***用好萊塢視覺特效演繹效果超炫的淘寶造物節(jié)邀請函。
AI算法助力互動體驗 打造二次元淘寶AR直播
作為互動體驗的重要環(huán)節(jié),本次淘寶造物節(jié)重點打造的AR直播則在用戶體驗上下足了功夫。這些互動背后融合了阿里巴巴技術(shù)團隊在AI算法和AR直播兩大技術(shù)領(lǐng)域的突破。技術(shù)上基于AI算法綜合運用3D空間重建、場景分割、動態(tài)行人監(jiān)測、單目同時定位和建圖、交互式視頻流等技術(shù),打造了一個現(xiàn)實與虛擬水乳交融的奇幻場景。讓線上線下參與互動的現(xiàn)場觀眾既能感受到大魚海棠身臨其境的感覺,也能變身小怪獸和奧特曼扭作一團,或者親切抱抱。
相對于上一代的VR直播,AR直播能夠突破空間和設(shè)備的限制。通過在AI算法上的不斷優(yōu)化,做到智能監(jiān)測和場景感知,構(gòu)建一個實時強互動的現(xiàn)實虛擬相疊加的場景,大大拓展了數(shù)字媒體和娛樂業(yè)務(wù)的傳播形態(tài)。此次淘寶造物節(jié)的AR直播會場,阿里巴巴技術(shù)團隊通過對視頻流進行分析,檢測并提取現(xiàn)場畫面中的關(guān)鍵人物,并發(fā)送到遠(yuǎn)程進行虛擬互動。另外通過基于深度信息的圖形合成技術(shù),還實現(xiàn)了遠(yuǎn)程和現(xiàn)實人物的有效互動,用戶足不出戶也能通過手機觀看和參與現(xiàn)場AR直播互動,體驗一個***亦真亦幻的世界。
無獨有偶,作為互聯(lián)網(wǎng)時代下零售業(yè)變革主要方向,線上線下融合的“新零售”業(yè)態(tài),無人店鋪“淘咖啡”也在此次淘寶造物節(jié)上亮相。“淘咖啡”涉及的技術(shù)包括身份識別、移動支付、人工智能等方面。此外,本次淘寶造物節(jié)上,作為阿里移動基礎(chǔ)技術(shù)引擎(Alibaba Mobile Tech Engine,簡寫為AMTE)的重要組成部分,Weex框架很好地支撐了此次淘寶造物節(jié)的主會場。
正如阿里巴巴集團CEO張勇所說,整個中國經(jīng)濟和商業(yè)都在走向數(shù)字經(jīng)濟,走向新零售。作為”五新”戰(zhàn)略的重點之一,借力于技術(shù)創(chuàng)新的新零售亦將成為未來商業(yè)變革成敗的關(guān)鍵。從去年的Buy+和VR直播,到今年交互動畫加純3D建模的飛躍奇市江湖邀請函,再到現(xiàn)場AR全景互動直播,黑科技滿滿的淘寶造物節(jié)讓技術(shù)帶來商業(yè)價值的同時,也讓更多人的真實生活受益、更加快樂, 并且讓社會得到可持續(xù)發(fā)展。
如果說雙11天貓狂歡節(jié)更多體現(xiàn)的是阿里巴巴在云計算、大數(shù)據(jù)和電商領(lǐng)域***的互聯(lián)網(wǎng)技術(shù)能力,那一年一度的淘寶造物節(jié)則成為阿里巴巴在新零售場景下移動和AR/VR等新交互技術(shù)領(lǐng)域的練兵場。