突破AI影片極限!Runway Gen-3 Alpha 與 SORA 一較高下,帶來超真實感,Sora等不到,Gen3 Alpha 率先使用

Runway Gen-3 Alpha SORA

Runway Gen-3 Alpha自從OpenAI 發布Sora,將文本生成影片的技術提升到新高度後,各大AI 影片工具也紛紛加緊升級其模型和功能,力圖在這場競賽中保有一席之地。例如,Pika 已經推出了風格選擇、視訊配音、唇形同步等多種功能,Vidu 和 Kling 也推出了類似 Sora 的新模型,生成效果與 Sora 已經相當接近。然而,曾經的領導產品 Runway 一直沒有太大動靜,這讓許多人擔憂其未來發展。

最近,Runway 終於發布了第三代模型 Gen-3 Alpha,它的性能已經達到與 Sora 相當的水平。若前些日子推出的 Dream Machine 能秒殺 Runway 的 Gen-2,那麼 Gen-3 Alpha 就足以反過來秒殺 Dream Machine,展示出AI 模型競爭的激烈。今天,我們就來詳細了解一下 Gen-3 Alpha 的功能與特色。

一、Runy Gen-3 Alpha 簡介

Runway 官網:https://app.runwayml.com/(Gen-3 將在未來幾天開放)
不同於之前的 Gen-1 和 Gen-2 模型,這次的 Gen-3 Alpha 是一個全新的視頻生成基礎模型。它在視頻和圖像資料上進行了聯合訓練,不僅能生成文本到視頻,還能實現文本到圖像和圖像到視頻,與 Sora 相似。

相比 Gen-2,Gen-3 Alpha 在保真度、一致性和運動方面有了重大改進。雖然目前只能生成最長 10 秒的視頻,但在視頻清晰度、細節豐富度、動態流暢度、對提示詞的理解和鏡頭運動等方面已達到 Sora 的水平,光憑肉眼已難以區分與現實的區別。

尤其在人物生成上,角色形象和動態非常自然,手部動作和臉部表情的變化也能精準呈現。角色形象的一致性也很穩定,即使有大幅度動作,臉部和身體也不會變形。這對於提升 AI 影片品質非常重要。

二、Runway Gen-3 Alpha 精彩演示

提示詞範例:一個中年悲傷的禿頭男人突然戴上了一頂捲曲假髮和太陽眼鏡,變得快樂起來。

Gen-3 Alpha 也能在某種程度上理解並模仿物理世界的運作規律。例如,火車行駛過程中,人物臉部光影隨窗外場景改變;生成繪畫場景時,畫筆在紙上留下痕跡等,證明其具備與 OpenAI Sora 同等的能力。

提示詞範例:一個女人在日本城市高速行駛的火車窗戶上的微妙倒影。

三、藝術內容生成能力

除了模仿現實內容,Gen-3 Alpha 還能產生風格化影片和奇幻內容。目前展示的風格包括水彩、動漫、賽博龐克和電子故障等,品質非常出色。像「棉花糖巨人在咆哮」、「混泥土地面長出植物」、「玻璃碎片旋風席捲小巷」等需要特效的場景,現在僅憑文字就能生成,這對影片創作者來說,既能擴大創作範圍,又能提升效率、降低成本。

提示詞範例:一個日本動畫電影中,一位年輕女子站在船上,回頭看向鏡頭。

四、精準控制與進階編輯功能

Gen-3 Alpha 透過訓練學習了大量具有時間序列資訊的描述性字幕,因此能實現場景中元素的想像性過渡和精確的關鍵影格設定。例如,它可以從海面絲滑過渡到火焰場景,前面提到的「混凝土長出植物」可能也是透過這種能力實現的。這些動態效果可能是上傳了一張包含文字的圖像作為關鍵幀,然後藉助 Gen-3 Alpha 的過渡能力生成動態,而非直接用文字生成。

提示詞範例:海洋的空拍。一個漩渦在水中形成,旋轉著,直到露出下面熾熱的深處。

Runway 已有的運動畫筆(Motion Brush)、鏡頭運動控制(Camera Controls)等功能在 Gen-3 Alpha 中依舊可用,且會有一些新功能推出,幫助用戶對結構、風格和動作進行更精細的控制。官方也表示可以為影視公司創建 Gen-3 的定製版本,以滿足特定藝術和敘事需求。

Gen-3 Alpha 將在未來幾天內對所有人開放,這意味著普通用戶很快就能使用到與 Sora 同等級的 AI 影片生成工具,AI 影片創作將進入一個新階段。最後,推薦大家觀看 Runway CEO 發布的預告視頻,全部素材都是 Gen-3 Alpha 生成的,效果非常震撼,我們離實現這種效果也非常近了。

以上就是本次為大家介紹的最新 AI 影片生成模型 Gen-3 Alpha 的相關內容。如果想了解更多 AI 新資訊,歡迎購買 GoGo 的新書《一本搞定生成式AI》或參加 AI 高手訓練營的線上課程

點擊前往:AI 高手訓練營的線上課程

發佈留言

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *