太平洋未來(lái)科技AR+Ai3D人體姿態(tài)捕捉,解鎖世界杯球星動(dòng)態(tài),解放三維設(shè)計(jì)師雙手
4年一次的世界杯,既承載著一代人炙熱的青春,也是不容錯(cuò)過(guò)的激情四射賽事,***收官之際,這家致力于A(yíng)R底層技術(shù)的科技公司——太平洋未來(lái)科技,這群技術(shù)狂熱者也是亢奮的球迷愛(ài)好者團(tuán)隊(duì),通過(guò)自身研發(fā)的AR+Ai3D人體姿態(tài)捕捉技術(shù),展示了基于Wi-Fi穿透系統(tǒng)下的純3D環(huán)境AI人體姿態(tài)算法,實(shí)時(shí)追蹤記錄球場(chǎng)上球員從開(kāi)始瞄準(zhǔn)到射球等一連串的動(dòng)作,精確的解析球場(chǎng)上每個(gè)球員的動(dòng)作形態(tài)。
太平洋未來(lái)科技(中國(guó))團(tuán)隊(duì)
AR+Ai3D人體姿態(tài)捕捉 科技讓姿捕行業(yè)跨形態(tài)更精準(zhǔn)
太平洋未來(lái)科技團(tuán)隊(duì)研發(fā)的AR+Ai3D人體姿態(tài)捕捉技術(shù),基于自身的AMreal 光場(chǎng)算法,解決光度立體算法,通過(guò)深度卷積神經(jīng)網(wǎng)絡(luò)和Wi-Fi穿墻的形態(tài)原理,整合特定人的常規(guī)形態(tài)和三維空間動(dòng)作,將所有捕捉像素點(diǎn)及掃描參數(shù)固定在一個(gè)維度中,并將其饋送到訓(xùn)練網(wǎng)絡(luò),從而完全控制目標(biāo)對(duì)象。憑借體積結(jié)構(gòu)的組成模塊和固定維度的特征計(jì)算,加之交互式用戶(hù)控制人體系統(tǒng),明確的獲取人的整個(gè)身體特征及所處背景,即使在有障礙物、有遮擋、光線(xiàn)不明朗的情況下,也能高效而準(zhǔn)確地實(shí)現(xiàn)真實(shí)環(huán)境與計(jì)算機(jī)視覺(jué)實(shí)時(shí)關(guān)聯(lián),從而實(shí)現(xiàn)掃描、追蹤、組合、傳導(dǎo)人體的神情及動(dòng)作姿態(tài),全方位識(shí)別3D人體ID。
AR+Ai3D人體姿態(tài)捕捉解析世界杯球星動(dòng)態(tài)
變革三維視覺(jué)設(shè)計(jì)工作方式 建造全方位人體動(dòng)態(tài)云端數(shù)據(jù)庫(kù)
3D卡通動(dòng)畫(huà)/武打動(dòng)作片的制作,三維動(dòng)畫(huà)設(shè)計(jì)師得去學(xué)習(xí)人體動(dòng)態(tài)課,深度了解人體動(dòng)態(tài),而后建立模型,調(diào)整多個(gè)人體骨骼,根據(jù)劇情所需分別對(duì)應(yīng)骨骼綁定蒙版,建立皮膚,毛發(fā)等,使得骨骼和皮膚貼合,***才能生成3D動(dòng)畫(huà)人物; 發(fā)展到后來(lái)的3D影視制作,則需讓武打演員穿戴上傳感器衣服及帽子,捕捉其動(dòng)作及表情方可將大片呈現(xiàn)在大眾眼前。“團(tuán)隊(duì)在研發(fā)AR+Ai3D人體姿態(tài)捕捉前,也與數(shù)千名3D設(shè)計(jì)師進(jìn)行深度溝通并觀(guān)看他們工作的日常,要配色、打光、形體到位、建模和特效等等一連串復(fù)雜的工作,科技讓世界進(jìn)步一點(diǎn),好一點(diǎn)早一點(diǎn)到來(lái)就對(duì)了。”太平洋未來(lái)科技創(chuàng)始人兼CEO李建億表示,這項(xiàng)技術(shù)的研發(fā),也希望能真正意義上解決三維設(shè)計(jì)師的痛,變革他們的復(fù)雜工作形態(tài),讓他們從高強(qiáng)度的工作中解放出來(lái),去做更多有創(chuàng)意、有意義的事情。
(左)太平洋未來(lái)科技文旅項(xiàng)目CG動(dòng)畫(huà)建模(中)三維設(shè)計(jì)師穿戴傳感器測(cè)試(右)AR+Ai3D人體姿態(tài)捕捉生成
AR+Ai3D人體姿態(tài)捕捉變革三維設(shè)計(jì)復(fù)雜的工作形態(tài)
AR+Ai3D人體姿態(tài)捕捉研發(fā)成果優(yōu)勢(shì):
支持手勢(shì)及姿態(tài)識(shí)別
支持多人姿態(tài)及動(dòng)作捕捉
支持單目RGB攝像頭/視頻文件輸入
300萬(wàn)+人體姿態(tài)圖片訓(xùn)練集
人體姿態(tài)定制版深度卷積神經(jīng)網(wǎng)絡(luò)
3D設(shè)計(jì)軟件動(dòng)作數(shù)據(jù)導(dǎo)入和實(shí)時(shí)動(dòng)作數(shù)據(jù)交互
可適用于多個(gè)場(chǎng)景應(yīng)用:3D光效人像、3D虛擬角色建立、3D 實(shí)時(shí)表情生成、3D人體ID識(shí)別、視頻重繹、復(fù)原人物復(fù)原、歷史情境再現(xiàn)等
AR+Ai3D人體姿態(tài)捕捉技術(shù),通過(guò)捕捉視頻源/實(shí)時(shí)捕捉拍攝人物臉部表情、身體姿態(tài)及動(dòng)作,解析視頻源/被捕捉人的動(dòng)作數(shù)據(jù),上傳云端算法庫(kù),打通研發(fā)實(shí)驗(yàn)室到測(cè)試的繁雜環(huán)節(jié),生成SDK數(shù)據(jù)包,供研發(fā)者直接使用。解決設(shè)計(jì)者/制作方/開(kāi)發(fā)者調(diào)整時(shí)間慢、生成時(shí)間長(zhǎng)、硬件昂貴的困局,并能實(shí)時(shí)語(yǔ)譯人群中各個(gè)人物的表情及動(dòng)作,提前洞悉和獲取多個(gè)人體或人群動(dòng)態(tài)及行為,預(yù)知人群大腦動(dòng)作及反應(yīng)。此技術(shù)一旦鋪開(kāi),不僅將三維設(shè)計(jì)師從繁雜的工作中解放出來(lái),推動(dòng)CG/3D影業(yè)進(jìn)步,也將造福安全與智慧生活,用于商場(chǎng)監(jiān)控、智能教育、無(wú)人駕駛、廠(chǎng)務(wù)培訓(xùn)、戰(zhàn)斗訓(xùn)練、預(yù)知暴亂大事件等場(chǎng)景。
技術(shù)的狂熱讓生活賦予***可能,太平洋未來(lái)科技的AR+Ai3D人體姿態(tài)捕捉技術(shù)為姿捕行業(yè)生態(tài)發(fā)展助力加速,拭目以待。