一鍵生成人臉像素圖,還能上傳到動森!這個(gè)項(xiàng)目很好玩
日本獨(dú)立開發(fā)者 Sato 曾因阿斯伯格綜合征輟學(xué)離職,后來自學(xué) AI 開發(fā) AI Gahaku 項(xiàng)目(AI 大師級畫家),在日美引起轟動,10 天覆蓋百萬用戶。此外,她還做了另一個(gè)有趣的項(xiàng)目 PixelMe,可以將輸入圖像一鍵轉(zhuǎn)換成像素畫。
還在用 PS 把圖像轉(zhuǎn)換成像素畫嗎?日本獨(dú)立開發(fā)者 Sato neet 自學(xué)人工智能技術(shù),開發(fā)出網(wǎng)站 PixelMe,可以將人像照片一鍵轉(zhuǎn)換成像素畫,生成的圖像還可以導(dǎo)入到最近大熱的游戲《動物森友會》。
不止如此,這個(gè)網(wǎng)站還設(shè)有寵物模式,主子的照片也可以變成像素畫了。
PixelMe 網(wǎng)址:https://pixel-me.tokyo/en/
我們先來看一下效果:
PixelMe 的圖像轉(zhuǎn)換效果。左上為輸入圖像,右上為 128x128 像素的生成結(jié)果,第二行分別為 64x64、48x48 和 32x32 像素的生成結(jié)果。
我們可以看到在處理過程中人像照片經(jīng)過裁剪,只保留頭部部分。轉(zhuǎn)換后的圖像共有 4 種像素,分別為 128x128、64x64、48x48 和 32x32,用戶可以自行選擇。
此外,默認(rèn)轉(zhuǎn)換結(jié)果的背景色為無色,用戶可以自定義背景顏色。
轉(zhuǎn)換后的 128x128 像素圖,背景色設(shè)置為天藍(lán)色。
接下來,我們來試一下寵物模式,是時(shí)候讓貓主子出馬了!
效果還可以,不過丑丑的主子似乎更丑了……
看來,連像素化也要看顏值啊。
看過了效果,接下來我們來看 PixelMe 背后的技術(shù)細(xì)節(jié)。
PixelMe 像素圖轉(zhuǎn)換背后的原理
Pixel-me 使用 pix2pix 模型生成 8-bit 風(fēng)格的肖像圖。
Pix2pix 是一種基于 GAN 架構(gòu)的風(fēng)格轉(zhuǎn)換模型,出自論文《Image-to-Image Translation with Conditional Adversarial NetWorks》,作者包括朱俊彥等。Pix2pix 使用成對的圖片數(shù)據(jù),學(xué)習(xí)從一個(gè)圖像到另一個(gè)圖像的轉(zhuǎn)換方式,并生成能夠以假亂真的圖像。
使用 pix2pix 實(shí)現(xiàn)不同風(fēng)格和用途圖像的互相轉(zhuǎn)換。
而 PixelMe 與 pix2pix 的區(qū)別就在于它使用像素化圖像進(jìn)行模型訓(xùn)練,進(jìn)而使模型輸出像素圖。
作者簡介
這些有趣項(xiàng)目的作者并非人工智能科班出身。Sato 十年前從東京的一所學(xué)校退學(xué),之后上過護(hù)理學(xué)校,也接受過面包師培訓(xùn)。Sato 發(fā)現(xiàn)自己可能因?yàn)榘⑺共窬C合征而無法很好地適應(yīng)工作環(huán)境后,決定嘗試另一種全新的領(lǐng)域:人工智能。
兩年前,Sato 開始學(xué)習(xí) AI。雖然只在大學(xué)期間上過一些基礎(chǔ)編程課,Sato 依舊想學(xué)會 Python 和 JavaScript,以便利用最新的 AI 技術(shù)創(chuàng)造有趣的項(xiàng)目,并與社區(qū)分享。
除了上文介紹的 PixelMe 以外,Sato 在今年 3 月還發(fā)布了其獨(dú)立開發(fā)的項(xiàng)目 AI Gahaku(AI 大師級畫家)。該項(xiàng)目可以將用戶上傳到網(wǎng)站上的肖像照片轉(zhuǎn)換為古典繪畫風(fēng)格的畫作。
AI Gahaku 網(wǎng)址:https://ai-art.tokyo/en#/
仍以剛才的男性照片為例,AI Gahaku 生成的油畫作品如下圖所示:
AI Gahaku 的生成效果。左圖為輸入,右圖為輸出的古典風(fēng)格肖像畫。
此外,該項(xiàng)目還支持使用濾鏡,用戶可以點(diǎn)擊不同的濾鏡更換生成畫作的風(fēng)格。
該網(wǎng)站同樣使用基于 pix2pix 的 ML 模型進(jìn)行圖像風(fēng)格轉(zhuǎn)換,模型以上傳的照片為輸入,并生成逼真的古典肖像畫作。
這個(gè)網(wǎng)站被分享到 Twitter 后,首先在日本引起了轟動,然后是美國和其他國家?,F(xiàn)在全球每天約有 100 萬用戶使用 AI Gahaku。
看來,Sato 做到了。