DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

大家好,我是花生~

之前為大家介紹過一款 AI 視頻生成工具 DreamMachine,它由知名 AI 科技公司 Luma AI 推出,可以將圖像轉為動態視頻,而且尤其擅長實現兩張不同的圖像間的流暢轉換,很適合用來制作創意轉場。

相關推薦:

就在昨天,Luma AI 宣布推出全新版本的 DreamMachine,它不再是一個單純的視頻生成工具,而成了一個集圖像/視頻生成、編輯為一體的 AI 創作工具,給用戶帶來了一種新的創作方式和體驗。新版 DreamMachine 在交互方式上也有全面升級,整體使用體驗非常絲滑,下面就一起來看看吧~

一、新版簡介

官網直達: https://dream-machine.lumalabs.ai/

新版 Dream Machine 在網站風格和功能排布上有很大變化。第一次使用的時候,官網彈出了一個窗口列舉了它的 7 大新功能,分別是:

  1. Boards:情緒板/故事板,這是 Dream Machine 的基礎創作單位。你的想法可以在一個 Board 中無限延展,生成各種圖片和視頻,知道得到滿意的結果;
  2. Creactive Intelligence:AI 生成功能,包括新的 DM1.6 視頻生成模型和 Luma Photon 圖像生成模型;
  3. Modify:支持通過自然語言對圖像/視頻內容進行編輯;
  4. Reference:通過墊圖保持圖像風格/角色特征一致性;
  5. Keyframe:支持首位幀控制視頻生成;
  6. Share & Remix:將包含創作過程的 Board 分享給他人;
  7. Brainstorm & Creative Query:系統會基于你的想法,延展出多個不同的建議,幫助你進行頭腦風暴。

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

這個 7 個功能并不是獨立存在的,而是分布在圖像/視頻生成的不同階段,幫助用戶更好地生成創意和想法。如上所說,Dream Machine 的基礎創作單位是 Board,所以我們進入網站后首先需要新建一個 Board,然后再進行后續的生成操作。

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

Dream Machine 使用方式和 Midjourney 官網有些相似。它將圖像生成、視頻生成、風格參考、角色一致性控制等功能都放在一個底部輸入框內進行。

如果想生成圖像,就直接在文本框內描述用英語描述你想要的內容,自然語言就行,無需遵循什么語法和規則;如果想生成視頻,就在提示詞前加上 make a video of,發送后就會生成視頻。圖像/視頻的默認畫幅比是 16:9;點擊底部右側的圓形調節按鈕可以修改畫幅。

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

二、圖像生成

圖像和視頻的生成結果會以線性的方式排列,上下滑動鼠標可以查看所有生成歷史。下面是文生圖的界面截圖,Dream Machine 的圖像生成質量還是不錯的,不過美學風格和多樣性還是比 Midjourney v6.1 差了一些。

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

可以看到我們的提示詞被多個橢圓形線框分割開來了,點擊這些線框,下面會彈出一系列同類型的關鍵詞;選擇其中任意一個,系統會根據新的關鍵詞重新生成一組圖像。生成結果會平行排列,用鼠標點擊可以切換查看,這樣我們就能很方便地探索不同的圖像內容和風格。

將鼠標懸浮在單張圖像之上,可以在右下角看到一串小圖標,它們分別代表不同的功能:Modify 修改、Make Video 轉視頻、Reference 將圖像做為參考、More like this 生成相似變體和 Download 下載。

這里著重說一下 Modify 圖像修改功能。選擇此功能后,圖像會自動加載到底部的文本框內,我們只需再描述需要的修改,比如 “讓這個女人帶上一串珍珠項鏈”,或者“將其轉為動漫風格”,圖像就會發生對應的變化。新圖像的內容構圖會與原圖有所不同,因此它不是局部重繪、也沒有 controlnet 的硬控制屬性,而是一種基于自然語言的圖像修改功能。

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

點擊圖像組左上角的 「Brainstorm」按鈕,可以查看系統給出的靈感建議,比如讓圖像風格更夢幻、生成不同藝術特色的動漫風格等。所有建議都自帶提示詞和效果圖預覽,點擊就能自動復制使用。

三、視頻生成

如果一開始生成的就是視頻,也可以進行 show more 再次生成、Brainstorm 生成建議、Modify 視頻修改、Extend 視頻延長等操作。而且新的 DM1.6 模型在視頻生成質量上的確比之前好了很多,畫質更加清晰,動態也很自然。

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

如果是圖像轉視頻,點擊 make video 后,可以拖動將圖像設置為首幀或者尾幀,然后直接用自然語言描述你想要的畫面動態和鏡頭運動,比如填寫 “zoom out”,系統會自動彈出對應的鏡頭運動選項 pull out,選擇它再發送生成就可以了。但我感覺這種方式對新手來說并不是很友好,畢竟不是所有人都知道專業的鏡頭描述用語,不如直接將所有可選鏡頭都羅列出來。

四、圖像上傳

Dream Machine 支持上傳本地圖像進行編輯,點擊底部文本框左側的「圖像小圖標」上傳,然后在右上角設置圖像的應用類型,包括 KeyFrames 視頻首尾幀、Modify 圖像修改和 Reference 圖像參考。

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

其中 Reference 可分為風格參考和角色參考兩種。如果想參考風格,就先在文本框內輸入@ 然后選擇 style,然后描述新的畫面內容,比如 “a cute cat”,就能借鑒圖像的風格,不過從測試結果來看效果并不是很好。

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

如果想要創造一致的人物角色,就先上傳一張角色的正面肖像照,然后輸入 @ 并選擇 character,再描述想要場景。Dream Machine 在保持人物一致性的效果還不錯,就是人物表情會有些僵硬,希望之后能更做進一步的優化。

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

當生成了一系列圖像、視頻后,再回到網站主頁,就能看到系統自動將我們開始新建的 Board 進行了命名,并配上了最新生成圖像做為預覽圖方便識別,整體界面看起來非常規整有秩序。進入 Board 后,點擊右上角的 Share 按鈕,可以將此畫板的內容全部分享給他人,這樣別人能清晰了解圖像的創作思路與過程,還可以通過 reply 按鈕發布評論。

點擊網站左側的第二個小圖標可以進入圖庫,我們生成的所有圖像、視頻都會在這里展示。Dream Machine 的會員最低 10 美元/月,新用戶有免費試用額度,感興趣的小伙伴可以試玩一下。

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

那么以上就是對新版 Dream Machine 功能用法的介紹,此次更新的亮點有:新增了圖像生成和多種圖像編輯功能,讓原本的單一的生態更加完整,方便用戶一站式完成各種創意工作;新的交互界面也非常有意思,值得一試。

當然目前也有一些明顯的不足,比如風格參考的效果并不好;用自然語言控制鏡頭運動的方式對新手來說不夠友好;以及沒有生成中止選項,不小心點到生成按鈕后就無法撤回,感覺積分白白浪費,希望官方在這些官方可以盡快做出優化。

喜歡本期內容的話記得點贊評論支持一波。也歡迎大家關注「優設 AI 自學網」 和「優設微信視頻號」,每天都會分享最新的 AIGC 資訊和神器,讓你輕松掌握 AI 發展動態。也歡迎大家掃描下方的二維碼加入“優設 AI 知識交流群”,和我及其他設計師一起交流學習 AI 知識~

DreamMachine 全面升級!支持圖像生成,7 大功打造全新體驗

推薦閱讀:


贊賞
收藏 22
點贊 38

復制本文鏈接 文章為作者獨立觀點不代表優設網立場,未經允許不得轉載。