Stability AI殺回來(lái)了:視頻生成新Demo效果驚人,網(wǎng)友:一致性超群
Stable Diffusion要王者歸來(lái)了?
Stability AI CEO Emad Mostaque最新推文,四段視頻引人無(wú)數(shù)遐想。
不少網(wǎng)友懷疑,這是Stable Video Diffusion新版本的演示Demo。
因?yàn)閺男Ч峡?,不管是?huà)面清晰度、一致性還是流暢度都十分驚人。
比如這只毛絨熊帶著泳鏡潛水。
毛絨熊動(dòng)作十分流暢,甚至還眨眼睛。而背后也有豐富的海水細(xì)節(jié)。
再加上Emad Mostaque本人,自今年1月1日開(kāi)始就消失了幾星期,始終未曾在社交網(wǎng)絡(luò)上露面。
網(wǎng)友覺(jué)得,這一波更像是憋了個(gè)大新聞。Stability AI is back?
(一度以為Stability AI已經(jīng)在競(jìng)爭(zhēng)中落后)
Stable Diffusion殺回來(lái)了?
從釋出的四秒Demo來(lái)看,應(yīng)該是針對(duì)SVD視頻生成功能的升級(jí)。
不過(guò)基于文本還是圖像生成尚不能斷定,直接來(lái)感受一下效果。
還有這種動(dòng)漫風(fēng)夜晚的街道。
去年11月,Stable Video Diffusion(SVD)正式問(wèn)世,當(dāng)時(shí)除了支持圖像、文本到視頻之外,還支持物體3D合成。
按照當(dāng)時(shí)透露的計(jì)劃, SVD只是作為基礎(chǔ)模型,接下來(lái)還將繼續(xù)拓展,建立起整個(gè)Stable Diffusion的生態(tài)系統(tǒng)。
當(dāng)時(shí)網(wǎng)友對(duì)Demo的反饋包括光影不對(duì)、而且整體不連貫(視頻幀與幀之間閃爍)。
而從現(xiàn)在Demo看,以一個(gè)類似視頻作對(duì)比:綠色機(jī)器人躺在床上。
可以看到,機(jī)器人,以及旁邊的杯子燈盞,甚至床被枕頭的褶皺細(xì)節(jié)都更為豐富了。
而且在機(jī)器人臉上也有明顯的光影映射。
不過(guò)更多更新信息還得等官方版本發(fā)布才能知曉。
值得一提的是,在這條推文之后,Emad Mostaque還發(fā)了條類似的。
沒(méi)有文字,四張靜圖。
網(wǎng)友們表示了期待?!跋M@個(gè)模型能全方位地超越SDXL,并更好地及時(shí)迭代?!薄斑@是SD3?”
不過(guò)這個(gè)地球西紅柿是什么鬼???
又是同一天,他們的StableLM2 1.6B發(fā)布,一個(gè)只有16億參數(shù)的小語(yǔ)言模型。它經(jīng)過(guò)了英語(yǔ)、西班牙語(yǔ)、德語(yǔ)、法語(yǔ)、葡萄牙語(yǔ)和荷蘭語(yǔ)等多語(yǔ)種訓(xùn)練。
幾天前,他們剛發(fā)布新年以來(lái)第一個(gè)大語(yǔ)言模型Stable Code 3B。
如此頻繁的進(jìn)展,Stability AI莫不是真的要翻身了?
決戰(zhàn)視頻生成
之所以要說(shuō)翻身,因?yàn)镾tability AI在上一波文生圖賽道里的確備受矚目,Stable Diffusion的爆火,讓它一度成為全球最受關(guān)注的AI獨(dú)角獸。
但隨著Midjourney的出現(xiàn),以及OpenAI谷歌在內(nèi)的頻繁進(jìn)展,而內(nèi)部也不安生,包括CEO疑似剽竊成果、挪用公款,公司商業(yè)模式不明晰、拖欠工資等情況爆雷,Stability AI一度陷入風(fēng)波之中。
去年11月官宣進(jìn)軍視頻生成賽道,彼時(shí)已經(jīng)有runway和pika這樣的熱門(mén)玩家出現(xiàn)了。
如今SVD新版本疑似亮相,之所以受到眾人關(guān)注,除了本身企業(yè)之外, 還同當(dāng)下正在高能爆發(fā)的視頻生成賽道密切相關(guān)。
不少網(wǎng)友直言:真是一波又一波的卷,一家比一家更卷。
要么是比版本發(fā)布迭代,這段時(shí)間國(guó)內(nèi)大廠阿里字節(jié)等新進(jìn)展頻出。要么是從生成效果,清晰度、流暢性,前段時(shí)間,Moonvalley橫空出世,驚呆不少人。
又或者在可控性等上面去卷……
這不就在前幾天,runway的Gen-2再進(jìn)化——
只需5個(gè)筆刷,對(duì)著一張圖一頓刷刷刷刷刷,原本靜止的小鳥(niǎo)們就各自運(yùn)動(dòng)了起來(lái)。
那么在視頻生成這個(gè)賽道,你看好Stability AI嗎?