大家好,這里是和你們聊設計的花生~
之前和大家聊過不少 AI 圖像生成工具,有的可以根據文本生成圖像,有的則是將 AI 技術運用到圖像處理中,讓扣除背景、消除畫面元素成為非常輕松快速的事情,大大提升了設計師的工作效率。既然 AI 技術在圖片處理的應用上如此成熟,那如果用到視頻的剪輯制作上會有什么效果呢?
Runway 官網: https://runwayml.com/
借助 AI 技術的快速消除圖像內容
比如在視頻里實現一鍵摳圖,將人物從背景中分離出來,進行背景更換或者插入文字圖層:
或者在視頻里實現快速修圖,用畫筆一抹,就能去除視頻中不需要的部分:
甚至在視頻里也用上 Ai 生成性技術,輸入一段話,就能將原來的物體變成另一個新的物體:
其實這些 AI 技術在視頻制作中應用的并非想象,也不是特效,而是真的有公司將其變?yōu)榱爽F實。下面就是“一鍵去除畫面元素”技術在視頻制作中的實現過程:
在線視頻制作工具 Runway 的操作界面
這些神奇的視頻處理功能都是一家名為 Runway 的公司開發(fā)的。Runway 是國外一家在線視頻剪輯制作網站,成立于 2018 年。它有非常完善的在線視頻處理技術,更重要的是公司團隊一直在積極地將生成性 AI 技術應用到視頻內容制作中,致力于降低視頻創(chuàng)作的門檻,幫助人們輕松制作出內容強大且富有創(chuàng)意的視頻內容。
Runway 官網: https://runwayml.com/
Runway 官網展示的 30 多個 AI 魔法工具
Runway 目前已經開發(fā)了 30 多個 AI 魔法工具,其中一部分是將 AI 圖像生成技術內置。比如我們熟悉的根據文本生成圖像、根據圖像生成風格化變體、圖像延展外繪、根據文本生成 3D 貼圖紋理、視頻局部無損放大等技術,在 Runway 內都可以實現。
Runway 內置的圖像無限外延功能
另一部分則是令人驚喜的視頻處理魔法,除了我們前面提到的 3 種功能,Runway 還開發(fā)了包括動態(tài)追蹤,智能調色、智能慢鏡頭、平滑插幀及一鍵模糊人臉等功能。
“動態(tài)追蹤”即通過 AI 技術識別視頻中物體的運動軌跡,然后為其附上文字或者其他元素,這些元素會自動跟隨物體一起運動,不用手動設置軌跡。
“智能調色”功能利用 AI 技術自動分析畫面的色彩等級,然后依據文本描述的內容對視頻相應的色調調整,處理速度很快,上色效果也非常和諧。
除了視頻處理工具,Runway 也將 AI 技術與音頻處理結合起來,開發(fā)出了自動生成文字稿、一鍵去除空白音頻及智能去除背景雜音等工具。Runway 的研究團隊目前還在開發(fā)一種名為 Soundify 的音效系統(tǒng),該系統(tǒng)利用 AI 技術先識別視頻內容,然后為之生成準確高質量的音頻,且自動對齊音頻與視頻的進度,以解決傳統(tǒng)視頻制作過程中尋找合適音頻困難、精準對齊音頻與視頻耗時的問題。
Runway 的野心當然不止于此。有了圖像、視頻與音頻等一系列 AI 工具作為基礎,Runway 還推出了 "文本生成視頻 "技術并發(fā)布了一段演示視頻。
從視頻中可以看出,Runway 的 "文本生成視頻 "技術包括:通過輸入文本指令實現導入視頻素材、調色及消除視頻中的選中對象;通過文本生成各種圖像;通過文本描述添加文字及動效、扣取人物及替換背景等。我們也可以看出視頻當中的很多功能都是我們前面介紹過的。
目前 "文本生成視頻 "技術還沒有公開,想體驗的小伙伴可以申請加入等待名單: https://runwayml.com/text-to-video/
當然了,這么好的工具肯定不是免費的。新用戶注冊 runway 后可以享受 3 次免費的視頻制作額度,但 30 多項 AI 工具只能使用其中 3 個,并且只能導出 720P 的視頻文件。對國內用戶來說需要搭梯子才能只用,并且最好使用 Chrome 或 Edge 瀏覽器打開,不然容易崩潰。所以目前只能期待國內的視頻制作軟件可以努努力,早日推出與 runway 類似的功能。
此外 Runway 還舉辦了首屆 AI 電影節(jié),號召全球藝術家使用最新的 AI 技術制作 1-10 分鐘的創(chuàng)意影片,優(yōu)勝者將獲得最高 10000 美元的獎勵。目前電影節(jié)正處于接受投稿的階段,最終獲獎結果會在 2 月份公布,到時候再和大家一起看看有哪些有意思的作品。
AI 電影節(jié)官網: https://aiff.runwayml.com/
Runway 的 AI 電影節(jié)官網公布的 AI 影片片段
以上就是為今天和大家分享的有關 AI 技術在視頻制作中應用,大家對此有什么看法和期待呢?歡迎在評論區(qū)分享。喜歡本期推薦的話記得點贊收藏,也可以轉發(fā)給身邊有需要朋友 。如果你有關于本文或者設計的疑問,可以在評論區(qū)提出,我會第一時間為大家解答 ~
推薦閱讀:
復制本文鏈接 文章為作者獨立觀點不代表優(yōu)設網立場,未經允許不得轉載。
發(fā)評論!每天贏獎品
點擊 登錄 后,在評論區(qū)留言,系統(tǒng)會隨機派送獎品
2012年成立至今,是國內備受歡迎的設計師平臺,提供獎品贊助 聯(lián)系我們
標志設計標準教程
已累計誕生 729 位幸運星
發(fā)表評論 為下方 20 條評論點贊,解鎖好運彩蛋
↓ 下方為您推薦了一些精彩有趣的文章熱評 ↓