智東西(公眾號:zhidxcom)
編譯 | 汪越
編輯 | 心緣

智東西11月7日報道,據(jù)VentureBeat報道,11月1日,美國明星AI視頻生成創(chuàng)企Runway為其Gen-3 Alpha Turbo模型推出了新的AI相機控制功能。該功能允許用戶在基于文本提示、上傳的圖像或現(xiàn)有視頻生成新視頻時,進行更精細(xì)的AI攝像機控制、動態(tài)視角調(diào)整和創(chuàng)意鏡頭運動,從而創(chuàng)造出更加逼真和生動的3D效果。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

此外,據(jù)VentureBeat報道,Runway還在積極研發(fā)能夠模擬物理世界的AI系統(tǒng),稱為“世界模型”。該系統(tǒng)的目標(biāo)是創(chuàng)建一種能夠表示和模擬各種現(xiàn)實世界情況和交互的通用模型。

一、打造電影級3D視覺:精細(xì)控制、動態(tài)視角與創(chuàng)意鏡頭

Runway的高級AI攝像頭控件為用戶提供了更精細(xì)的攝像機控制功能,使用戶能夠輕松實現(xiàn)對場景和主題的放大、縮小,同時保持AI生成角色的形態(tài)不變,以及背后背景的真實感,仿佛置身于真實的電影拍攝現(xiàn)場。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

例如,用戶可以放大和縮小他們的場景和主題,甚至保留AI生成的角色形態(tài)和背后的背景,真實地將他們和他們的觀眾帶入一個完全實現(xiàn)的、看似3D的世界,就像在真實的電影布景或外景地一樣。

除了精細(xì)的攝像機控制,Runway的新功能還支持用戶進行動態(tài)視角調(diào)整,實現(xiàn)水平移動、圍繞主題平滑地形成弧線,或是從不同的角度探索場景,極大地提升了視頻的沉浸感和視角多樣性。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

例如,創(chuàng)作者可以使用水平運動圍繞一個主題形成平滑的弧線,或從不同的有利位置探索位置,增強沉浸感和視角。此外,還可以將各種攝像機移動與速度變化相結(jié)合,創(chuàng)造出視覺上更加引人入勝的循環(huán)或過渡效果。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

新功能還支持用戶進行創(chuàng)意鏡頭運用,包括戲劇性的放大操作,深入具有電影質(zhì)感的場景;或執(zhí)行快速縮小,引入新的背景,轉(zhuǎn)移故事的焦點,為觀眾帶來全新的視角體驗。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

例如,用戶可以進行戲劇性的放大,更深入地進入具有電影風(fēng)格的場景,或執(zhí)行快速縮小以引入新的背景,轉(zhuǎn)移敘事焦點并為觀眾提供新鮮的視角。緩慢移動攝像機的能力也被加入進來,使得攝像機能夠在場景中平穩(wěn)滑行,適合強調(diào)細(xì)節(jié)或營造緊張氣氛。

AI視頻生成能操控運鏡了!輕松推拉升降,秒拍電影大片,Runway出品

從Runway在X平臺展示的這些新功能的視頻來看,這些控件顯著提高了控制的精確度,有助于AI電影制作人,包括與Runway合作的傳統(tǒng)好萊塢工作室如獅門影業(yè),以更快、更經(jīng)濟、更無縫的方式實現(xiàn)高質(zhì)量的電影場景。

二、開發(fā)AI“世界模型”,愿景是預(yù)知未來

Runway不僅致力于提供強大的視頻生成工具,還著眼于開發(fā)能夠模擬物理世界的“世界模型”。這類AI系統(tǒng)的目標(biāo)是構(gòu)建環(huán)境的內(nèi)部表示,并用它來預(yù)測未來的事件。

據(jù)VentureBeat報道,當(dāng)被問及Runway是否開發(fā)了3D AI場景生成模型時,Runway首席執(zhí)行官Cristóbal Valenzuela回答說:“世界模型。” 該回答暗示了Runway對開發(fā)“世界模型”持開放態(tài)度,并可能在這方面進行研究和開發(fā)。

Runway的聯(lián)合創(chuàng)始人兼首席技術(shù)官Anastasis Germanidis在去年12月的一篇文章中談道,世界模型是一種AI系統(tǒng),它能夠構(gòu)建環(huán)境的內(nèi)部表示,并用它來預(yù)測該環(huán)境中的未來事件。迄今為止,世界模型的研究主要集中在非常有限和受控的環(huán)境中,例如視頻游戲中的虛擬世界或自動駕駛汽車的模擬環(huán)境。

Germanidis還說,Runway的目標(biāo)是創(chuàng)建一種能夠表示和模擬各種現(xiàn)實世界情況和交互的通用世界模型。正如最近推出的新相機控件所證明的那樣,Runway在構(gòu)建此類模型并將其應(yīng)用到實際場景中的進展非常順利。

結(jié)語:突破AI面部識別障礙,打造3D影視效果,Runway持續(xù)創(chuàng)新

Runway首席執(zhí)行官Cristóbal Valenzuela曾經(jīng)說過,AI是這個時代的攝像機。上個月,Runway推出了一項名為Act-One的新功能,突破了AI面部識別的障礙,讓用戶能夠輕松制作高質(zhì)量的動畫表情捕捉視頻。這個月,Runway又推出了高級AI相機控制功能,使用戶可以輕松創(chuàng)造出具有電影級3D視覺效果的視頻內(nèi)容。

AI視頻生成市場競爭激烈,新的模型幾乎每周都會發(fā)布。在這一賽道上,Runway面臨著來自Adobe的Firefly、OpenAI的Sora、Meta的Movie Gen和Google的Veo等強大競爭對手的挑戰(zhàn)。但Runway作為早期的領(lǐng)導(dǎo)者,沒有在技術(shù)能力上讓步。

來源:Runway、VentureBeat