大家好,這里是和你們一起探索 AI 的花生~
最新 ControlNet 有兩款新模型非常熱門,一個是用于提取圖像線稿的預處理模型 Anyline,一個是 SDXL 線條類控制模型 Mistoline。它們不僅單獨的功能強于目前的 canny、lineart、softedge 等模型,組合在一起更是可以快速準確地處理超復雜的圖像,今天就為大家詳細介紹一下它們的特點和用法。
相關推薦:
Anyline 是一款新的線條類預處理模型,可以從大部分圖像中快速提取高精度的線稿圖。與其他常用的線條預處理器相比,Anyline 在輪廓精度、對象細節和字體識別(尤其是在大型場景中)方面具有顯著優勢。在大多數場景中,它在減少噪點方面也表現更好,能實現更清晰的圖像處理。
下圖是 Anyline 與其他預處理模型的效果對比,可以看到 Anyline 可以提取非常微小的細節,線條也非常完整清晰,即使是很小的文字也可以復現,相比之下 canny 和 lineart 在細節上多少都會有一些丟失。因此 Anyline 非常適合用來處理場景復雜或者需要精準控制細節的圖像,比如文字、紋理材質、機械細節等。
Anyline 目前已經可以在 SD WebUI 和 ComfyUI 中使用了。SD WebUI 只需要將 controlnet 更新到最新版本,就能在預處理器列表中看到 softedge_anyline 選項了。初次使用會自動從網上下載一個 MTEED.pth 文件到 extensions\sd-webui-controlnet\annotator\downloads\TEED 文件夾中,如果自動下載失敗可以手動安裝(文末云盤有模型資源)
如果是 ComfyUI,需要先安裝一個名為 comfyui-anyline 的插件,可以從 manager 中安裝,也可以通過 github 克隆。安裝完成后,再進入插件文件夾中,打開終端執行 pip install -r requirements.txt 命令。然后重啟 comfyui,搜索 “anyline” 即可找到對應節點。
MistoLine 是一款強大的 SDXL ControlNet 控制模型,它可以根據用戶提供的各種類型的線條圖生成高質量的圖像(短邊大于 1024px),包括手繪草圖、不同的 ControlNet 線條類預處理圖和 3D 模型線框圖等。
MistoLine 生成的圖像在穩定性、細節還原上比現有的線條類 CN 模型表現都好。如果和 Anyline 配合使用,加上 SDXL 模型,可以很輕松地生成 1024*1024px 以上的高清圖像,用來處理場景復雜、層次豐富、紋理豐富的圖像效果非常好,因此目前最推薦的就是 Anyline 和 MistoLine 的搭配使用。
MistoLine 同樣可以在 SD WebUI 和 ComfyUI 中使用, 使用時前需要下載 mistoLine_rank256.safetensors 模型(文末有資源包),安裝到 extensions\sd-webui-controlnet\models 或者 comfyui\models\controlnet 中,然后重啟應用,再按正常流程選用模型即可。使用時需要注意選擇 SDXL 的 checkpoints 大模型。
文末的資源包內有還有搭建好的 Anyline+Mistoline ComfyUI 工作流,用來處理大幅的、場景復雜、需要清晰細節的圖像非常方便。
那么以上就是本期為大家推薦的 Controlnet 線條類新模型 Anyline 和 Mistoline。喜歡的話記得點贊、收藏、評論三連支持一波,我會更有動力為大家推薦更多 AI 干貨內容。相關模型、工作流文件都在下方的云盤鏈接內,記得下載~
如果你也想學習使用 Midjourney 和 Stable Diffusion 這兩款 AI 繪畫工具,可以了解一下我最新制作的課程《零基礎 AI 繪畫入門》已經上線,課程包含對 Midjourney 及 Stable Diffusion WebUI 的系統入門教學,并提供配套資源、各類實用工具和提示詞庫,能幫助初學者快速掌握這 2 款目前最熱門的 AI 工具,感興趣的小伙伴可以戳的鏈接了解詳情:夏花生的《零基礎 AI 繪畫錄播課》
也歡迎大家掃描下方的二維碼加入“優設 AI 知識交流群”,和我及其他設計師一起交流學習 AI 知識~
相關鏈接:
- MistoLine 項目地址: https://github.com/TheMistoAI/MistoLine
- AnyLine 項目地址: https://github.com/TheMistoAI/ComfyUI-Anyline?tab=readme-ov-file
- MistoLine 模型下載地址: https://huggingface.co/TheMistoAI/MistoLine/tree/main
- SD WebUI Controlnet 更新說明: https://github.com/Mikubill/sd-webui-controlnet/discussions/2907
推薦閱讀:
復制本文鏈接 文章為作者獨立觀點不代表優設網立場,未經允許不得轉載。
發評論!每天贏獎品
點擊 登錄 后,在評論區留言,系統會隨機派送獎品
2012年成立至今,是國內備受歡迎的設計師平臺,提供獎品贊助 聯系我們
標志設計標準教程
已累計誕生 729 位幸運星
發表評論 為下方 15 條評論點贊,解鎖好運彩蛋
↓ 下方為您推薦了一些精彩有趣的文章熱評 ↓