人工智能火到爆,PULSE拯救渣畫質(zhì)馬賽克秒變高清
原創(chuàng)【51CTO.com原創(chuàng)稿件】馬賽克是什么意思?傳統(tǒng)的馬賽克在影視媒體中多用于遮擋重要的部位,進(jìn)行模糊化處理。例如視頻中,如果不方便將某人的臉或者其他部位露出,便使用馬賽克這一藝術(shù)處理手法將其遮掩起來。
20世紀(jì)50年代后,隨著全球電影行業(yè)的發(fā)展,經(jīng)常能在電影中出現(xiàn)血腥和色情畫面,人們就開始要求將18歲以下不宜觀看的畫面進(jìn)行處理,也就是在圖像上覆蓋馬賽克。從此,馬賽克有了新功能,在那些原本高清圖像的某些區(qū)域被蓋上厚厚的小方格,形成無法打破的禁區(qū),這也讓無數(shù)熱血少年抓耳撓腮,瘋狂的尋找破解之法,只為能看到馬賽克掩蓋下的奇跡。
不管怎么努力,人們怎么樣也找不到破解馬賽克的方法,然而隨著技術(shù)的發(fā)展,破解馬賽克已經(jīng)變成了現(xiàn)實(shí)。美國杜克大學(xué)的幾位研究人員,利用一種PULSE的AI算法,就能夠完全去除馬賽克,并且可以達(dá)到打馬賽克前的像素效果。
那么將渣到馬賽克級別的畫面秒變高清是如何做到的呢?PULSE算法可以在幾秒鐘內(nèi),就可以把 16x16 像素的低分辨率(Low Resolution)小圖,放大 64 倍,變成 1024 x 1024 像素的高分辨率(High Resolution)圖像,并且會“想象”出一些原本不存在的特征,即使是原本 LR 照片中無法看到的細(xì)節(jié),比如毛孔、細(xì)紋、睫毛和胡茬等,經(jīng)過其算法處理后,都能看得一清二楚。但是在拿到一張低分辨率的圖像后,PULSE系統(tǒng)不會慢慢的添加新的細(xì)節(jié),而是遍歷AI生成的高分辨率圖像,將這些高分辨率圖像對應(yīng)的低分辨率圖像與原圖進(jìn)行對比,找到最接近的那張。例如,將一張打有馬賽克的面部圖片,使用PULSE算法,該算法首先補(bǔ)充面部細(xì)節(jié),比如鼻子、嘴巴、眼睛的樣子,然后再打上馬賽克,打過馬賽克的這張圖片與原始圖片進(jìn)行對比調(diào)整,就這樣不斷的迭代,直到與原馬賽克圖一致就算解碼了這張“神秘”的圖片。
原始 LR 圖片和 PULSE 修復(fù)后再 donwscale 的 LR 圖片對,使兩者最接近的 HR 圖片,就是修復(fù)得到的 HR 圖片。
但是這個(gè)技術(shù)還有一個(gè)缺點(diǎn),那就是我們得到的圖片去碼部位是由軟件想象出來的,并不一定是原來真正的模樣,有可能存在差異。因此從這張圖被打馬賽克開始,它就變成了另一張圖,再也無法回到最初的美好了。
其實(shí),這項(xiàng)技術(shù)的出現(xiàn)有利也有弊,比如說,在圖像清晰化上,讓考古資料變得更有據(jù)可依,或像偵探片里那樣,刑警在馬賽克錄像中看不清嫌疑人時(shí),可以生成最接近嫌疑人的樣貌,為茫茫人海抓捕嫌犯提供了強(qiáng)有力的支持;比如在法制節(jié)目中遮蓋犯罪嫌疑人的臉,或在影視作品中看到品牌 Logo 被涂抹上模糊的霧面,識別度日益精細(xì)的 Google 地圖上,也有許多地方都進(jìn)行了模糊化和特殊化的馬賽克處理,隱藏了一些軍事秘密。總之如果我們擁有了“去碼”的技術(shù)和能力,也要珍惜“有碼”的安穩(wěn)和權(quán)利。
毋庸置疑,現(xiàn)在或未來,我們都需要馬賽克。它會以各種形式出現(xiàn),但必然不會消失。而 AI 等技術(shù)的進(jìn)步,或許能讓打碼內(nèi)容越來越逼近真實(shí),但我們可以決定,它是否有必要達(dá)到真實(shí)?;蛘?,看看它是否能在真正有利的地方進(jìn)行愛與奉獻(xiàn)。
【51CTO原創(chuàng)稿件,合作站點(diǎn)轉(zhuǎn)載請注明原文作者和出處為51CTO.com】