奧特曼和老黃動手了……Luma干的
發(fā)布不到2天,那個號稱“下一代”文生視頻的Dream Machine(來自Luma AI),大大大大翻車。
原本宣傳中的效果是這樣的:
效果之驚艷,令人直呼“忘掉Sora”、“影視級水平”,并且Luma也是相當自信地表示“在線免費可玩”。
然而……當網(wǎng)友們紛紛前去嘗鮮之后,得到的結(jié)果卻是大跌眼鏡。
例如給Dream Machine“投喂”一張OpenAI的一張合影:
結(jié)果它生成的視頻是這樣的:
是的,打起來了,而且人物的畸變也是相當離譜。
網(wǎng)友們也是忍俊不禁,調(diào)侃地說道:
我們終于知道去年OpenAI發(fā)生了什么。
再“投喂”一張奧特曼、老黃和Brockman的合影:
Dream Machine這次給出的結(jié)果是:
沒錯……又打起來了。(Dream Machine好像很暴力的樣子)
雖說Dream Machine生成視頻的效果和劇情有些離譜,但愛整活兒的網(wǎng)友們卻是坐不住了,直接開辟了一個新賽道。
讓表情包“活”起來
或許Dream Machine這種“不走尋常路”的風格,跟表情包的氣質(zhì)很搭,現(xiàn)在網(wǎng)友們更樂于讓AI“續(xù)寫”表情包:
AI讓memes栩栩如生。
Luma的Dream Machine可以當成Meme Machine了。
例如這張非常經(jīng)典的表情包,在Dream Machine的加持下,后續(xù)的故事就譜寫出來了:
然而還有更drama的版本——順手牽羊:
男主角還從一名白人直接變成了三哥……
我們經(jīng)常用到的“狗頭”表情包,也在Dream Machine之下活了起來:
還有“淡定姐”和“勵志哥”:
不難看出,Dream Machine被網(wǎng)友們吐槽翻車的最大問題,就是在于無法保證視頻內(nèi)容的連續(xù)性。
尤其是在生成人物方面,前后幀直接變?nèi)朔N、變性別的概率比較高。
因此,也有網(wǎng)友建議:
使用Luma最好的方法,就是先用Midjourney這樣的工具生成關(guān)鍵圖片,然后再用Luma對其處理。
然而,說到AI翻車,Luma的Dream Machine并不是個例。
SD3開源也秒翻車
前兩天Stable Diffusion 3開源的消息也是讓不少的網(wǎng)友們興奮了一把。
但在親自體驗過后,很多人卻直呼離了大譜。
例如生成一個躺在草地上的女孩,結(jié)果“打開方式”是這樣的:
而且不是個例,只要是和人(整體)相關(guān)的內(nèi)容,生成結(jié)果都有點掉san。
雖然在生成其它方面SD3的效果還是能讓人滿意,但它和Dream Machine一樣,總是處理不好人類。
有人發(fā)現(xiàn),如果細看“躺在草坪上的女孩”這張圖像,會發(fā)現(xiàn)它在局部細節(jié)上確實還可以,甚至很棒。
草地上的影子、衣物上反射的光線、頭發(fā)的質(zhì)地……都遵循了物理規(guī)律。
但人物整體就不敢恭維了。
不少網(wǎng)友都認為,這就是問題的關(guān)鍵。
我認為他們的NSFW過濾器,把所有人類圖像都判定為了NSFW。
這個過濾器全稱是filtering out adult content,作用在于過濾掉不合規(guī)的成人內(nèi)容。
SD2發(fā)布時就出現(xiàn)過類似的問題,研究人員發(fā)現(xiàn)審查這部分內(nèi)容可能影響了模型對人體結(jié)構(gòu)的理解。
后面的SD2.1和SDXL版本在這一問題上有所緩解。
這次SD3的翻車,暴露了一個問題:過于嚴格的數(shù)據(jù)審核,可能誤刪了一些無害的成人圖像,所以現(xiàn)在模型沒法理解人體結(jié)構(gòu)。
總而言之,無論是Dream Machine還是SD3等,AIGC應(yīng)用工具還需要不斷加強和完善。
不過若是對整活表情包感興趣的小伙伴,現(xiàn)在就可以去試試了:
https://lumalabs.ai/dream-machine