現(xiàn)在最好玩的AI竟然來自一個(gè)家譜公司？
本文經(jīng)AI新媒體量子位（公眾號ID:QbitAI）授權(quán)轉(zhuǎn)載，轉(zhuǎn)載請聯(lián)系出處。
哈利波特世界里，能讓報(bào)紙上的照片動(dòng)起來的魔法，現(xiàn)在麻瓜們已經(jīng)掌握得越來越熟練了。
看，16歲的圖靈正穿越時(shí)空朝你眨眼、微笑，神態(tài)十分自然。
原本在老照片中沉默的美人，當(dāng)年眼波流轉(zhuǎn)、巧笑倩兮的模樣，也重新清晰呈現(xiàn)。
而這樣的全家福，是否喚醒了一段有關(guān)過往的回憶？
這就是這個(gè)周末國外社交媒體上最火的AI應(yīng)用，呈現(xiàn)在人們眼前的“魔法”。
連李開復(fù)本人都忍不住玩了一把……
無需掌握什么技術(shù)，只要在MyHeritage這個(gè)網(wǎng)站上上傳一張老照片，10-20秒之后，AI就會自動(dòng)幫你賦予照片“生命”。
甚至是雕塑也一樣OK：
△圖源：twitter@FlintDibble
如此自然的效果，讓不少網(wǎng)友感嘆：這非常哈利波特。
任何足夠先進(jìn)的技術(shù)都無法與魔法區(qū)分開來。
神奇的是，這是一個(gè)在線家譜網(wǎng)站…
所以，這個(gè)當(dāng)紅炸子雞MyHeritage是什么來頭，咋就突然掀起熱潮了？
當(dāng)你點(diǎn)進(jìn)這個(gè)網(wǎng)站，你會發(fā)現(xiàn)它的本職其實(shí)是一個(gè)在線家譜平臺……
真的能幫你方便整理家譜的那一種……你可以在其中填寫每一個(gè)家庭成員的信息、上傳照片。
△是的還有官方中文
其背后的公司2003年創(chuàng)辦于以色列。截至2020年，該網(wǎng)站已支持42種語言，在全球擁有超過5000萬用戶，并已為用戶構(gòu)建了約5200萬個(gè)家譜……
雖然創(chuàng)始人Gilad Japhet是在一個(gè)家庭農(nóng)場里搞出了這么一家公司，但扒一扒他們過往的發(fā)展歷程，會發(fā)現(xiàn)MyHeritage還真是前沿技術(shù)弄潮兒。
比如2006年，MyHeritage就推出了人臉識別功能，這個(gè)功能可以幫用戶從照片數(shù)據(jù)庫中識別人臉特征，將個(gè)體聯(lián)系在一起。
2016年，MyHeritage還推出了一項(xiàng)基因檢測服務(wù)，號稱能幫你發(fā)現(xiàn)你的種族起源，并尋找到新的親戚……目前售價(jià)59美元。
據(jù)《國家地理雜志》報(bào)道，2018年，MyHeritage提供了5000份這樣的DNA檢測工具包，幫助在美墨邊境散失的移民家庭團(tuán)聚。
而公開資料顯示，到2019年為止，MyHeritage成為了全球第三大DNA檢測公司。
嗯，從制作家譜，到DNA檢測，再到用AI“復(fù)活”老照片，這個(gè)技術(shù)發(fā)展路徑還真挺合理呢！（手動(dòng)狗頭）
不僅變高清，還能動(dòng)起來
咳咳，梳（ba）理（gua）完了，我們還是照例說回到技術(shù)本身。
雖然MyHeritage沒有詳細(xì)說明這一火爆應(yīng)用背后的技術(shù)細(xì)節(jié)，但大致上，讓老照片動(dòng)起來的效果，需要兩步來完成。
先是用超分辨率，讓照片變得更高清：
然后再用動(dòng)作遷移，將另一個(gè)視頻中的人物動(dòng)作，“遷移”給照片中的人物。
首先，是超分辨率技術(shù)，也就是通過降噪、增加分辨率等方法，來增加照片的清晰度。
這里，就需要GAN來發(fā)揮作用了，對這種模型進(jìn)行訓(xùn)練后，再采用其中的生成器，來對低頻圖像進(jìn)行重建。
整體而言，GAN能夠解決MSE損失函數(shù)缺少高頻信息的問題，從而補(bǔ)全圖像中有關(guān)高頻細(xì)節(jié)的內(nèi)容。
利用這種方法重建的圖像，能構(gòu)造出非常細(xì)節(jié)的人臉圖像，甚至連馬賽克人臉都能還原：
不過，這種方法也有一些問題，那就是在還原圖像的過程中，模型會更注重圖像風(fēng)格的相似、而非像素的相似（即感知相似）。
所以即使人物逼真，在細(xì)節(jié)上也可能會出現(xiàn)像這樣與原圖不一致的情況：
當(dāng)然，將圖片變得清晰后，還需要利用動(dòng)作遷移，讓照片動(dòng)起來。
這項(xiàng)技術(shù)能實(shí)時(shí)提取一段視頻中的任務(wù)關(guān)鍵點(diǎn)，并將這些關(guān)鍵點(diǎn)和照片中的人臉關(guān)鍵點(diǎn)對應(yīng)起來。
利用一項(xiàng)名為“骨架”（skeleton）的技術(shù)，模型將視頻人物的關(guān)鍵點(diǎn)提取出來，并給照片中的人物也標(biāo)記上對應(yīng)的關(guān)鍵點(diǎn)。
△動(dòng)作遷移算法TransMoMo
然后，再一幀幀將視頻人物的動(dòng)作“遷移”到圖片中去。
通過這種方法，哪怕只有一張照片，也能讓里面的人物跟著“開口說話”：
確實(shí)接近于“魔法”了。
有人感動(dòng)，也有人擔(dān)心
除了對“魔法”效果的驚嘆，這樣的技術(shù)，也實(shí)實(shí)在在帶來了感動(dòng)。
在reddit熱度高達(dá)2.9k的火爆討論之中，就有網(wǎng)友寫下了自己的真實(shí)感受：
我試了試我父親的老照片，效果令我哽咽。他在我?guī)讉€(gè)月大時(shí)就去世了，這是我第一次看見他動(dòng)起來，眨眼、微笑……
也有網(wǎng)友提出，這要是搭配上AR放到博物館里，讓照片里的人親自給你講述他們的人生故事，那真的簡直了。
不過，也有不少網(wǎng)友表示，擔(dān)心這樣的技術(shù)被濫用，比如拍攝某些小電影……
而雖然MyHeritage強(qiáng)調(diào)他們不會向任何第三方提供用戶上傳的照片，并且未被完全注冊的照片會被自動(dòng)刪除，但網(wǎng)友仍然對數(shù)據(jù)泄露表示擔(dān)憂。
畢竟MyHeritage本來也有過翻車歷史……
2018年6月，MyHeritage被發(fā)現(xiàn)一個(gè)安全漏洞，泄露了超過9200萬名用戶的數(shù)據(jù)。
這些數(shù)據(jù)，包括用戶的Email地址和密碼。
雖然MyHeritage聲稱，用戶家譜、DNA圖譜和信用卡等信息存儲在另一個(gè)系統(tǒng)，未被泄露，且在漏洞發(fā)現(xiàn)當(dāng)天就對用戶進(jìn)行了雙重身份驗(yàn)證。
但2019年12月，這些泄露的信息卻出現(xiàn)在了各種非法網(wǎng)站上，正被出售（而且出售的信息不止Email地址和密碼）。
?
?
