Runway Gen-3的視頻轉繪功能太牛了!大片制作0門檻!

大家好我是花生~

Runway 在推出 Gen-3 Alpha 視頻生成模型后,還一直有一些小的更新,比如推出了新的 Turbo 模型,生成速度比原來快了 7 倍;支持尾幀控制;支持將視頻延長至 40s 等,都是非常符合用戶需求的優化提升。

而它前幾天推出的 V2V (Video to Video) 功能,更是將 AI 視頻在風格轉繪上的水平提升到了一個新的高度,再次秀了一波「AI 視頻生成王者」的實力。該功能一經推出就受到眾多專業 AI 視頻創作者的稱贊,并迅速衍生出多種玩法,很有潛力成為一個新的流量風口,喜歡 AI 視頻創作的小伙伴一定不要錯過。

了解 Runway Gen-3 Alpha 模型:

一、Gen-3 V2V 功能介紹

Video to Video 即視頻轉視頻,作用是基于一個視頻的基礎內容框架,賦予其新的外表和風格,因此也叫做 「視頻轉繪」或「視頻風格化」。

其實 Runway 最早嘗試的 AI 視頻生成模式就是 Video to Video。那時候還是 23 年 2 月份,Runway 推出了可以轉換視頻風格的 Gen -1 模型,其效果現在看來可能比較粗糙幼稚,但在當時作為首個實現此功能的商業產品,Gen-1 給人帶來的新奇感十足,并且也啟發了視頻創作的新思路。

  1. 了解 Gen-1 模型的用法: http://www.hx168888.com/gen-2
  2. Gen-1 網址: https://app.runwayml.com/video-tools/teams/Huasheng_/ai-tools/gen-1

而在前幾天推出的新 V2V 功能,則是基于最新的 Gen-3 Alpha 模型實現的。與 Gen-1 模型相比,它的轉換效果更穩定流流暢,畫面質量也非常精致清晰;更重要的是,它不僅能改變視頻的整體風格,還可以對視頻局部內容進行修改,這給后期編輯帶來了極大的便利。

先看幾個官方演示視頻:

通過視頻大家對新的 V2V 效果應該有一個更直觀的認識了。無論是處理人物還是場景,Gen-3 能做到的不單單是改變表面風格,而是能在保留大體框架的情況下,賦予視頻新的內容形式,比如讓人臉變成老鼠、讓晴朗的城市烏云密布電閃雷鳴、讓山谷變成沙地等。

這些原本需要 CG 才能實現的神奇特效,現在用文字就能輕松做到,對影視制作、視頻后期等行業來說無疑是好消息。目前網上已經有很多專業人員分享了自己用 Gen-3 V2V 制作的創意視頻,效果相當令人驚艷,從中我們也能看到 AI 在釋放人類創意和生產力上的巨大潛力。

比如 AI 藝術家 Karoline Georges 用 V2V 將一段舊電視電路板的 3D 建模視頻,轉換為一段冰雪覆蓋、寒風呼嘯的末日城市的鳥瞰視頻,效果非常自然。

視頻來源:Twitter @KarolineGeorges

還有一位導演 Jon Finger 展示了更高階的玩法 —— 借助 Gen-3 V2V 一個人拍攝一部商業大片。

他先拍攝了多個真實場景的視頻,然后用 V2V 進行視頻轉換。這個過程中,不僅畫面質感統一變成了好萊塢大片風格,視頻內容也完全變了一個樣:簡陋 3D 模型成了太空戰艦、手機變成了定制炸彈、玩具槍變成了激光武器。一套操作下來,讓原本搞笑的場景瞬間變成了大制作電影。

看完這個視頻的前后效果對比,相信你一定會驚嘆于導演本人強大的腦洞和對 AI 技術的靈活運用。這種創作思路非常具有落地應用價值,值得借鑒學習,并且肯定會在未來對傳統影視制作流程產生深遠印象。

當視頻在手機上無法加載,可前往PC查看。

即使你不是專業導演,Gen-3 的 V2V 功能也能讓你秒變創意視頻達人,迅速站上 AI 視頻的流量風口。

它可以讓你生活在賽博朋克風格的城市中,讓你連續穿越四季變化,讓你輕松實現角色扮演、一秒換裝,甚至拍攝一部屬于自己的電影和動畫短片。只要你想,AI 視頻、真實拍攝、3D 建模、動畫、電影、甚至游戲錄屏都可以成為你的創意原材料。

視頻來源:Twitter @oFaleco

之前我也為大家介紹了多種目前超火的 AI 視頻流量玩法,感興趣的話可以點擊下方鏈接了解:


二、Gen-3 V2V 用法

新的 V2V 功能需要在 Gen-3 Alpha 模型內使用,也就是需要開通會員才能用上。不過用法依舊簡單,只需上傳本地的視頻,然后在提示詞中只需描述視頻內容,并添加上對應的風格提示詞就可以了。

雖然 Gen-3 的目前只支持文本控制風格,但也足夠使用了。無論是色調、風格還是元素內容,只要你能寫出對應的關鍵詞,視頻在轉換后就能實現你想要的效果。這里我先用 AI 生成了一個 5 秒的寫實風格的視頻,然后用提示詞轉換為了科幻電影風格,整體質感非常好。

提示詞:Hollywood science fiction film, a future warrior, wearing silver armor, carrying a laser weapon, patrolling the Mars base

另外可以通過 Structure transformation (結構傳輸)參數控制轉換效果:數值越高,畫面變化就越明顯,反之則更像原視頻。對于喜歡或常用的關鍵詞,可以在 “Preset 預設” 中保存下來,下次就能一鍵直接調用了。

Runway Gen-3的視頻轉繪功能太牛了!大片制作0門檻!

那么以上就是本期為大家推薦的 AI 視頻神器的 Runway 的新功能 Gen-3 視頻轉視頻。如果你喜歡本期推薦,一定記得點贊評論支持一波,我會更有動力為大家分享新的干貨內容。

想了解更多設計神器的話,歡迎關注優設網 神器推薦專欄 和優設微信視頻號,超多好用的設計神器等你探索。也歡迎大家掃描下方的二維碼加入“優設 AI 知識交流群”,和我及其他設計師一起交流學習 AI 知識~

Runway Gen-3的視頻轉繪功能太牛了!大片制作0門檻!

另外我的最新課程《AI 視頻零基礎系統入門》已經上線了,可以幫你快速掌握目前 95% 人們 AI 視頻生成工具,對 AI 視頻感興趣的小伙伴不要錯過。課程內容包括:

  1. 從文生視頻、圖生視頻、視頻生成視頻、數字人視頻 4 個方面,系統全面地帶你了解目前主流的 AI 視頻制作方式以及優缺點;
  2. 十余種熱門 AI 視頻生成神器用法詳解,輕松掌握大神同款工具;
  3. 附贈課程專屬工具清單,收錄了近 300 款 AI 視頻、音頻、文案神器,全面賦能 AI 視頻創作
  4. 高質量免費自學資源、最新 AI 視頻資訊獲取渠道全分享

Runway Gen-3的視頻轉繪功能太牛了!大片制作0門檻!

推薦閱讀:


贊賞
收藏 30
點贊 64

復制本文鏈接 文章為作者獨立觀點不代表優設網立場,未經允許不得轉載。