本文將帶您深入了解如何設定穩定的擴散環境以及如何完成垂直繪圖。 在軟體部分,我們將推薦一些b站up大師的優秀教程,他們的講解非常詳細。 首先,我們將介紹模型、VAE 和 LoRa 三個概念,以幫助您更好地了解該過程。 接下來,我們將進入實戰部分,通過草圖、大量AI繪圖、區域性修改(AI迭代)和重新修改,完成乙個垂直繪圖。
本文分為兩個主要部分:
1.軟體(如何構建穩定的擴散環境)。
2.實戰(如何完成一幅豎畫)。
軟體部分會推薦一些優秀的b站up大師教程,並有非常詳細的解釋。
在本文中, 我們將首先帶您了解模型的三個概念, VAE 和 LoRa. 實戰部分將是乙個繪製大量AI圖紙和區域性修改(AI迭代)的過程——再次修改。
1. 軟體
前期需要準備:Stable Diffusion本地包、Stable Diffusion模型、VAE、LoRa。
1.穩定的擴散本地封裝
這裡我們推薦紅葉的區域性穩定擴散包,如下圖所示
2.如何穩定擴散模型**
點選右上角可開啟和關閉18+模式)大部分型號都可以在C站找到,建議優先在C站找到,如果找不到,那就去Huggingface吧com,它有更多的資源,但使用起來不如C站方便。
3.如何選擇模型
C站的優點是可以直接看到效果圖和網友的回映圖片。 你甚至可以點選**右下角的感嘆號,可以看到圖中的大部分引數,可以直接複製到穩定擴散使用,極大地方便了我們的繪圖過程。
基於原始影象反向搜尋模型。
開啟 Stable Diffusion,輸入 **Info,將原始圖片拖拽進去,即可在右側看到 ** 的所有資訊。
藍色框是提示詞,黃色框是反向提示詞,紅色框是我們需要的模型雜湊值(即型號)。
4.型號 VAE
VAE是用來增強圖片的色彩資訊的,如果覺得圖片灰度大多是VAE問題造成的。 大多數型號將提供 VAE。 如果沒有VAE顯示,一般使用預設顯示
5.什麼是LoRa
LoRa是用來穩定你的畫面元素的, 比如想讓畫面出現特定的人物, **服裝, 等等, 都需要使用相對的LoRa. 你可以把蘿拉看作是穩定你的照片的東西.
二、實戰篇
1.素描
這裡需要注意的重要一點是盡可能清晰地勾勒出你需要的運動和形狀,線條應該足夠深,足夠清晰,否則穩定的擴散將無法識別。 在這裡,我們可以使用PS中的顏色級別選項來繪製線條圖。
2.關鍵字:
關鍵詞分為兩種型別:正面和負面。 正面關鍵詞的內容可以分為頭部、上半身、四肢等,比較清晰。 說明想要的動作(如手裡拿著劍)、衣服的材質和顏色等,並加上括號強調重要內容的分量。
最後,新增一些圖形和風格補充(獨奏、最高質量、逼真等)。 由於模型已經確定了樣式,因此我們不需要新增太多樣式描述符。
否定關鍵詞是你不想出現在螢幕上的內容,這裡有一組更通用的否定關鍵詞:(bad-artist:1.)。0), loli:1.2), worst quality, low quality:1.4), bad_prompt_version2:0.8), bad-hands-5,lowres, bad anatomy, bad hands, (text)),watermark), error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, (username)),blurry, (extra limbs),3.生成設定
我們將生成的描述符複製到其中,點選loar模型,點選我們想要的模型,在正描述符中會自動生成乙個關於lora的關鍵字,並將短語的最後乙個數字1改為05.減輕其重量。
左上角選單下拉選擇你需要的模型,這次我們用的是國風三大模型,取樣器選擇DPM++穩定擴散卡拉斯,步數選擇30步,生成批次選擇6個
4.控制網路設定和應用程式
滾動到頁面底部,點選控制網選項,將藝術線條拖入其中,點選啟用,點選後面的畫素靈敏度,然後選擇允許Preivew,選擇藝術線條的加長選項和對應的模型。
在新版的Stable Diffusion中,會有乙個選項可以直接選擇,只需選擇LineArt的選項即可。 (注意:這需要乙個相對於控制網的模型)。
單擊小圖示,我們可以看到相對於它生成的線條圖稿。 點選預覽圖片下方的小箭頭,線條圖的尺寸解像度將相對於配置。
5.批量生成
單擊“生成”開始批量計算。 在這裡,我嘗試了不同的大型模型來生成不同的樣式。
在這裡我們可以看到,通過控制網的畫線,我們可以很好地識別出我們草圖的動作姿勢和服裝形狀,我們可以選擇乙個比較滿意的進行下一步。
注意:如果電腦配置比較低,可以先將草圖壓縮到大小再拉進去識別線條圖,這一步我們主要尋找整體畫面的大感,對於畫面模糊或者區域性bug不需要特別注意,會在下面的操作中細化補救。
6.草圖示意圖
接下來選擇一張我們比較滿意的圖片,點選預覽下方的圖表按鈕進入,進入後可以看到我們相應的引數已經自動配置好了,這裡我們需要做的就是重新選擇我們的取樣器dpm++穩定擴散卡拉斯,然後放大高度和寬度,重繪幅度建議控制在0。4、取樣步數可適當增加,約30-50步,點選生成,進行下一步精細生成。
注意:如果電腦配置比較低,高度和寬度一次不宜過高。
在這裡,在我完善影象並生成影象後,我在PS中對其進行了調整,並裁剪了一些需要更多細節的地方,然後放大並重新生成。
7.優雅
最後,我們可以重點調整面部描寫,這裡推薦乙個外掛程式Face Editor,可以有效修復面部塌陷、異發等。 然後優化PS中的bug。
例如,如果手部結構有錯誤,我們可以通過跟隨AI生成的影象進行優化,或者我們可以製作深度圖並再次輸入AI進一步生成,這因人而異,因此我們可以採取最適合您的方法。 並調整畫面的光影和整體氛圍,因為這只是乙個小案例,所以已經粗略修復過了。
可以看出,整體動作和衣服相對於素描的修復程度還是比較高的。 借助 Control Net 的 LineArt,我們可以精確地控制畫面中人物的動態服裝,使其更適合我們的需求。
以上就是如何快速生成穩定擴散的固定姿態,如果您有其他快速方法,歡迎在評論區留言。