大家好,這里是和你們一起探索 AI 的花生~
巴黎奧運會已經結束了,這段時間除了觀看激動人心的競賽,我的另一大樂趣就是在 B 站看各種奧運會的吐槽/整活視頻。而在這個過程中,我也發現不少視頻都用上了 AI 技術,給人帶來了新的觀看體驗。那么今天就和大家聊聊其中比較新奇有趣的效果以及相關實現方法,說不定哪天你也用得上~
相關推薦:
首先是一個調侃在奧運 會開幕式上出場的 “藍精靈” 的視頻。由于 “藍精靈” 的裝扮造型和 86 版《西游記》里的青獅怪非常相似,于是一個 B 站 up 主借用了電影《美人魚》里的經典片段,演繹 “青獅精因身份被藍精靈冒充到警局報警”的劇情。
視頻截圖來源:B 站 @蘇三不是珊
如果是在之前,這種視頻一般會摳出青獅怪的頭像,貼在演員的頭部,用來實現角色替換的效果,雖然簡陋但足以達意。而這個視頻中,青獅怪的形象則完全覆蓋了原本的演員形象,并且動作姿勢都和原版一樣,再加上重新配音,讓整個視頻的融合度非常高,猶如青獅怪真身出演了電影一樣。
這個視頻的評論區就有人在問這種效果是如何實現的,大家應該也都猜到肯定是用了 AI,而持續關注我文章推薦的小伙伴可能已經知道具體用的是哪個工具,沒錯就是之前為大家推薦過的 AI 視頻生成神器 Viggle。
了解 Viggle:
目前 Viggle 已經有了官方網站,支持三種功能:Mix 功能可替換單一角色,Multi 可替換多角色,Move 是為圖像角色添加動態;上面視頻的實現方法就是先扣取了青獅怪的完整形象,然后用 Mix 覆蓋住鄧超所飾演的角色,做到完全替換。目前這些功能都可以免費試用,感興趣的小伙伴可以體驗一下。
最新的 Multi 功能演示,視頻來源:Twitter@ViggleAI
然后是一個關于韓國乒乓球選手林鐘勛的視頻。林鐘勛原本要在 8 月 19 號入伍服兵役,但在贏得奧運會混雙銅牌后,有了免除服兵役的資格,因此非常高興,比賽結束后高舉雙手怒吼慶祝,甚至當場敬禮,宣布免服兵役,成為奧運會上的又一 “名場面”,引起不少網友的關注和調侃。
B 站一位 up 主就以杰倫的《牛仔很忙》為基礎重新填詞,用幽默的方式呈現林鐘勛對不用服兵役的興奮之情。雖然是一個整活視頻,但是填詞和視頻效果非常精彩,目前播放量已經接近 700 萬。
視頻截圖來源:B 站 @蔚藍邊際
與一般只用圖片配圖的整活視頻不同,這首歌全程由林鐘勛 “本人” 演唱,不僅口型與歌詞一致,甚至有眨眼、挑眉等細微動態,給人一種 “一本正經搞笑” 的感覺。大家肯定都明白這是 AI 合成的,目前能實現唇型匹配的工具也不少,但效果這么精準、連面部肌肉運動都能呈現出來的工具卻不多,目前最熱門的應該是快手團隊開發的 LivePortarit 面部動畫生成模型 。
了解 Live Portarit:
LivePortarit 可以將真人的面部動作完美復刻到圖像角色身上,效果自然貼合,給影視、游戲、3D 動畫制作帶來了新的處理思路。這個視頻應該是 up 主先錄制了自己唱歌的視頻,然后將復刻到林鐘勛的頭像上,最后再合成到視頻中。Live Portarit 是開源模型,可以部署到本地免費使用,ComfyUI 也有對應插件,目前也可以在 Huggingface 上免費體驗。
在線體驗 : https://huggingface.co/spaces/KwaiVGI/LivePortrait
視頻來源:Twitter@Yokohara_h
其實生成式 AI 技術早已融入到視頻剪輯制作的各個方面,最常用的有自動生成字幕、文本轉語音(TTS)等;短視頻中廣泛使用的猴哥、紫薇的聲音,是通過 AI 音色克隆實現的,我們現在也可以隨時克隆自己的聲音;還有 “不同明星演繹某一角色“ 的視頻,也是目前非常熱門的一個賽道,用的是 FaceFusion 這類換臉工具。
通過換臉技術,讓我們熟悉的明星重新演繹真人版《海賊王》。截圖來源:B 站 UP 主 @ 電影七十二變 ,
而 AI 技術目前熱仍在不斷發展,未來將進一步改變視頻的制作方式和呈現效果。比如前面提到的 LivePortarit, 最近又推出了動物版,可以將人物的面部表情復刻到小貓、小狗、小熊等動物身上。Windows 用戶可以直接下載一鍵整合包,解壓安裝后在本地免費使用:
下載地址: https://huggingface.co/cleardusk/LivePortrait-Windows/blob/main/LivePortrait-Windows-v20240806.zip (解壓就能用,文末有資源包)
用 LivePortarit 制作的創意視頻。視頻來源:微博@海辛 Hyacinth
萌寵類的視頻本身自帶流量,以其為基礎的進行而二次創作也非常受歡迎,給小動物加上人類的眼睛嘴巴進行吐槽就是其中一種。而有了 Live Portarit 的這類新技術后,“動物開口說話唱歌” 將直接變成了現實,而不再需要后期合成了,大家更喜歡哪一種效果呢?
動物配音吐槽是目前非常熱門的一種視頻類型。截圖來源:B 站 UP 主@濤哥玩配音
還有新出的 AI 視頻編輯器 Vozo,支持對視頻進行無痕重新編輯。你可以重新編寫視頻腳本,然后 AI 會自動完成翻譯、音色克隆、配音、唇型匹配等工作,還支持多角色處理、自動剪輯片段和調整畫幅,讓我們輕松得到一個新版本的視頻。
Vozo 官網: https://www.vozo.ai/
可以預見在未來的影視制作中,同一部作品在全球發行時,演員唇型可以隨配音發生變化,做到無痕配音;而短視頻平臺上也可能會一種新類型的視頻:視頻片段來自某部經典電影或者電視劇,不過人物說的話卻完全不一樣了,但口型卻是一致的。而 “眼睛為實” 也將不再絕對,甄別視頻真偽會成為一件需要嚴肅對待的事情。
利用 Vozo 快速將一段英文視頻轉為中文版本,并做到音色、唇型一致。來源:Twitter@zeng_wt
還有已經是 Next Level 的 Runway gen-3 圖生視頻功能,目前已經有創作者將其融入到自己的 Vlog 中,基于現實生成奇幻的的視覺效果,給原本平淡的視頻內容帶來新活力,這也將給給影視創作、廣告營銷視頻、以及自媒體創作帶來新的創意思路。
利用 Gen-3 圖生視頻功能,為真實視頻添加視覺特效。來源:Twitter @runwayml
那么以上就是本期對 AI 技術在視頻制作上應用現狀的相關介紹,喜歡的話記得點贊、收藏、評論支持一波。如果你還知道其他更多有趣的 AI 視頻效果,可以在評論區和我分享。
想了解更多 AI 新鮮資訊的話,歡迎關注 優設 AI 自學網 和優設微信視頻號,每天都會分享最新的 AIGC 資訊和神器,讓你輕松掌握 AI 發展動態。也歡迎大家掃描下方的二維碼加入“優設 AI 知識交流群”,和我及其他設計師一起交流學習 AI 知識~.
另外我的最新課程《AI 視頻零基礎系統入門》已經上線了,對 AI 視頻感興趣的小伙伴不要錯過。課程內容包括:
- 從文生視頻、圖生視頻、視頻生成視頻、數字人視頻 4 個方面,系統全面地帶你了解目前主流的 AI 視頻制作方式以及優缺點;
- 十余種熱門 AI 視頻生成神器用法詳解,輕松掌握大神同款工具;
- 附贈課程專屬工具清單,收錄了近 300 款 AI 視頻、音頻、文案神器,全面賦能 AI 視頻創作
- 高質量免費自學資源、最新 AI 視頻資訊獲取渠道全分享
相關鏈接:
我沒在開玩笑,我真的被藍精靈冒充了!_嗶哩嗶哩_bilibili
相關推薦:
復制本文鏈接 文章為作者獨立觀點不代表優設網立場,未經允許不得轉載。
發評論!每天贏獎品
點擊 登錄 后,在評論區留言,系統會隨機派送獎品
2012年成立至今,是國內備受歡迎的設計師平臺,提供獎品贊助 聯系我們
標志設計標準教程
已累計誕生 729 位幸運星
發表評論 為下方 16 條評論點贊,解鎖好運彩蛋
↓ 下方為您推薦了一些精彩有趣的文章熱評 ↓