繼Sora、Vidu、快手可靈、Luma AI輪番出場“秀”完之后,視頻生成領(lǐng)域的核心玩家Runway也來了。
當(dāng)?shù)貢r間6月17日,AI視頻生成初創(chuàng)公司Runway在官網(wǎng)宣布,即將推出新的視頻生成模型Gen-3 Alpha,該模型可以創(chuàng)建具有復(fù)雜場景變化、多種電影風(fēng)格和詳細(xì)藝術(shù)指導(dǎo)的高精細(xì)視頻。
目前Gen-3還未開放給公眾試用,但在官網(wǎng)的博客中,Runway秀出了數(shù)十個精彩的生成視頻,無論是光線、色彩、運(yùn)動軌跡、人物細(xì)節(jié)都非常逼真,有行業(yè)人士表示一些視頻是Sora級別的質(zhì)量。
Runway表示,Gen-3 Alpha是即將推出的一系列模型中的首個,這一系列模型是在為大規(guī)模多模態(tài)訓(xùn)練而構(gòu)建的新基礎(chǔ)設(shè)施上訓(xùn)練的。Gen-3 Alpha 經(jīng)過視頻和圖像聯(lián)合訓(xùn)練,將為 Runway 的文本轉(zhuǎn)視頻、圖像轉(zhuǎn)視頻和文本轉(zhuǎn)圖像工具、現(xiàn)有控制模式(如運(yùn)動畫筆、高級相機(jī)控制、導(dǎo)演模式)以及即將推出的工具提供支持,以更精細(xì)地控制結(jié)構(gòu)、風(fēng)格和運(yùn)動。
Gen-3 Alpha背后的訓(xùn)練工作是研究科學(xué)家、工程師和藝術(shù)家組成的跨學(xué)科團(tuán)隊共同努力完成的,旨在讓Gen-3 Alpha理解、解釋各種藝術(shù)風(fēng)格和電影術(shù)語。Runway提到,與 Gen-2 相比,Gen-3在保真度、一致性和運(yùn)動方面有了重大改進(jìn),并且朝著構(gòu)建通用世界模型邁出了一步。
Runway 2018年成立紐約,在2023年6月完成了1.41億美元的 C 輪融資,估值達(dá)到15億美元,這一輪投資方包括谷歌、英偉達(dá)、Salesforce Venture 等。自創(chuàng)立以來Runway的總?cè)谫Y額已達(dá)2.37億美元。
Runway是AI視頻生成領(lǐng)域的先行者,2023年2月Runway發(fā)布第一代視頻生成模型Gen1,支持視頻風(fēng)格轉(zhuǎn)繪;隨后在2023年3月發(fā)布Gen2,拉開了文生視頻和圖生視頻的序幕。Runway也和不少電影有過合作,包括《黑寡婦》《瞬息全宇宙》等都運(yùn)用了Runway的技術(shù)支持。
自O(shè)penAI在年初發(fā)布Sora以來,AI視頻生成“戰(zhàn)場”就風(fēng)起云涌。上周6月12日,AI初創(chuàng)公司Luma AI發(fā)布視頻生成工具Dream Machine,效果逼真且開放使用,引起轟動,用戶涌入網(wǎng)頁導(dǎo)致“請求需排隊”。同樣在本月,快手自研視頻生成大模型可靈上線,申請使用的預(yù)約人數(shù)已經(jīng)超5萬。4月底,生數(shù)科技發(fā)布首個文生視頻模型Vidu,稱全面對標(biāo)Sora。
在這個時間點(diǎn),Runway加入隊列宣布發(fā)布新一代視頻生成模型,有行業(yè)人士稱其“坐不住了”。目前Runway官網(wǎng)工具界面仍然顯示的是Gen-2模型,此次提及的Gen-3還未有入口。
(本文來自第一財經(jīng))
發(fā)表評論