英偉達(dá)投的Sora競品飛速上新!一手實(shí)測這就奉上
在AI視頻賽道卷麻了之際,英偉達(dá)投的Sora競品,馬不停蹄地推出1.5代了!
官方宣傳是醬嬸兒的:
據(jù)Luma創(chuàng)始成員介紹,相比6月推出的Dream Machine 1.0,此次升級主要圍繞文生視頻,整體更加智能。
新版本全民在線可玩,已經(jīng)嘗鮮的網(wǎng)友紛紛直呼:
incredible!(不可思議)
看了下網(wǎng)友試玩,目前的效果雀食不錯(cuò),下面挑幾個(gè)例子康康(PS:畫質(zhì)均有一定壓縮)
雞蛋成精了,會(huì)騎車的流心蛋黃:
視覺沖擊力強(qiáng),堪比電影運(yùn)鏡的快鏡頭。
Prompt:FPV, fast moving footage, at light speed, flying through houses before exploding into a volcano.(FPV,快速移動(dòng)的鏡頭,以光速飛過房屋,然后爆炸成火山。)
畫面上加文字的老大難,貌似也克服了。
上下分屏,叢林和海底世界刷一下就拼接起來了:
Dynamic motion, vertical 2-panel Split-screen view: lush jungle canopy above, underwater coral reef below, UHD, nature documentary style(動(dòng)態(tài)運(yùn)動(dòng),垂直2面板分屏視圖:上面茂密的叢林樹冠,下面的水下珊瑚礁,超高清,自然紀(jì)錄片風(fēng)格)
衣袂飄飄,自然抬頭的少女漫也安排上了。
看完這波效果,不難推測為何Luma AI在過去兩個(gè)月增長迅猛。
網(wǎng)站分析平臺(tái)Similarweb的數(shù)據(jù)顯示,目前它在所有AI視頻中(主要是國外產(chǎn)品)訪問量排第一,僅7月份全球訪問量達(dá)到了2260萬次。
實(shí)測1.5代
手癢了,量子位第一時(shí)間也來試一下Dream Machine v1.5。為了順帶檢驗(yàn)官方demo的真實(shí)性,咱們直接微調(diào)一下官方提示詞。(機(jī)智如我)
直接看重頭戲——文生視頻。
第一個(gè),將原玄幻場景中的老頭換成了老太太。從生成結(jié)果來看,基本要素都齊了,但是細(xì)節(jié)之處(如手部畸變)還是不能看。
prompt:old woman with a swirling fireball(手持旋轉(zhuǎn)火球的老婦人)
第二個(gè),將考察視頻運(yùn)動(dòng)能力的原綠色puppy換成了貓咪。這個(gè)效果相當(dāng)不錯(cuò),貓咪大佬的氣質(zhì)簡直撲面而來!不僅煙霧在空中的運(yùn)動(dòng)軌跡非常逼真,而且貓咪的耳朵還會(huì)動(dòng)。
prompt:green cat smoking a cigar(抽煙的小貓咪)
第三個(gè),將考察視頻添加文字能力的原“WOW”換成了”STOP”。整體倒是挺自然,但是犯了一個(gè)致命錯(cuò)誤:單詞拼錯(cuò)了。(且這個(gè)視頻生成最耗時(shí))
prompt:“STOP” in balloons in the sky(”STOP”出現(xiàn)在天空中的氣球上)
對了,知道大家肯定會(huì)被提示詞難倒,有網(wǎng)友已經(jīng)貼心整理好了大禮包。(文末鏈接可取)
來自Luma AI
Dream Machine是由英偉達(dá)投資的Sora競品,背后公司是Luma AI。
聯(lián)合創(chuàng)始人兼CEO Amit Jain是前蘋果AR/CV工程師;聯(lián)合創(chuàng)始人兼CTO Alex Yu 2021年畢業(yè)于加州伯克利,曾與Angjoo Kanazawa教授一起研究NeRF相關(guān)的3D計(jì)算機(jī)視覺。
最近一輪融資是在今年1月(B輪4300萬美元),a16z領(lǐng)投,Anjey Midha、Amplify、Matrix、NVIDIA、South Park Commons等參投。
而且在國外一眾AI視頻生成工具中,用戶訪問數(shù)據(jù)較好。
根據(jù)Similarweb的統(tǒng)計(jì),當(dāng)前Luma AI領(lǐng)先于許多類似的AI視頻生成應(yīng)用。7月份全球訪問量達(dá)到2260萬次。
試玩地址給大家放文末了,歡迎來波反饋~
體驗(yàn)地址:https://lumalabs.ai/dream-machine/creations