視頻會(huì)議太無(wú)聊?換張愛(ài)因斯坦的臉替你開(kāi)會(huì)如何?
現(xiàn)在,視頻通話已經(jīng)成為社交互動(dòng)的主要途徑之一,最近視頻會(huì)議,也是許多上班族需要用到的,假如有天領(lǐng)導(dǎo)找你開(kāi)會(huì),出現(xiàn)在他面前的不是你的頭像,而是埃隆·馬斯克,你說(shuō)他會(huì)不會(huì)嚇到飛起。
現(xiàn)在只需要一個(gè)開(kāi)源項(xiàng)目就可以實(shí)現(xiàn)了,最近,一個(gè)名為Ali Aliev的開(kāi)發(fā)者創(chuàng)建了一個(gè)開(kāi)源代碼工具Avatarify,能夠?qū)崟r(shí)將你的人臉替換疊加為名人的臉。
avatarify項(xiàng)目中使用的核心模型 first order model 來(lái)源于一篇 NIPS 論文《First Order Motion Model for Image Animation》。這個(gè)模型可以根據(jù)驅(qū)動(dòng)視頻的運(yùn)動(dòng),對(duì)源圖像中的對(duì)象進(jìn)行動(dòng)畫(huà)處理,以生成視頻序列,而無(wú)需使用任何注釋或有關(guān)特定對(duì)象的先驗(yàn)信息。模型采用自監(jiān)督的方法將外觀和運(yùn)動(dòng)信息分離,使用了視頻中對(duì)象的關(guān)鍵點(diǎn)及其局部仿射變換進(jìn)行特征表示。生成器網(wǎng)絡(luò)對(duì)目標(biāo)運(yùn)動(dòng)期間出現(xiàn)的遮擋進(jìn)行建模,并將源圖像中提取的外觀與從驅(qū)動(dòng)視頻獲得的運(yùn)動(dòng)進(jìn)行組合。
該模型的框架由兩個(gè)主要模塊組成:運(yùn)動(dòng)估計(jì)模塊和圖像生成模塊,如上圖所示。
Avatarify適用于大多數(shù)主流的視頻會(huì)議工具,諸如Zoom和Skype,當(dāng)加載完臉部照片后,照片上的臉部表情將會(huì)根據(jù)你的臉部表情改變而改變。
無(wú)論是你想變成愛(ài)因斯坦、還是史蒂夫·喬布斯,甚至是蒙娜麗莎,通通都可以實(shí)現(xiàn)。
Ali Aliev在Github上詳細(xì)說(shuō)明了使用方法,這里就不在一一贅述了。
目前,avatarify已經(jīng)在Github上標(biāo)星4K,F(xiàn)ork累計(jì) 375 個(gè)(Github地址:https://github.com/alievk/avatarify),感興趣的伙伴們不要錯(cuò)過(guò)了哦。