墨顏教育丨獲得穩定擴散角色的固定姿態

Mondo 教育 更新 2024-01-31

本文將帶您深入了解如何設定穩定的擴散環境以及如何完成垂直繪圖。 在軟體部分,我們將推薦一些b站up大師的優秀教程,他們的講解非常詳細。 首先,我們將介紹模型、VAE 和 LoRa 三個概念,以幫助您更好地了解該過程。 接下來,我們將進入實戰部分,通過草圖、大量AI繪圖、區域性修改(AI迭代)和重新修改,完成乙個垂直繪圖。

本文分為兩個主要部分:

1.軟體(如何構建穩定的擴散環境)。

2.實戰(如何完成一幅豎畫)。

軟體部分會推薦一些優秀的b站up大師教程,並有非常詳細的解釋。

在本文中, 我們將首先帶您了解模型的三個概念, VAE 和 LoRa. 實戰部分將是乙個繪製大量AI圖紙和區域性修改(AI迭代)的過程——再次修改。

1. 軟體

前期需要準備:Stable Diffusion本地包、Stable Diffusion模型、VAE、LoRa。

1.穩定的擴散本地封裝

這裡我們推薦紅葉的區域性穩定擴散包,如下圖所示

2.如何穩定擴散模型**

點選右上角可開啟和關閉18+模式)大部分型號都可以在C站找到,建議優先在C站找到,如果找不到,那就去Huggingface吧com,它有更多的資源,但使用起來不如C站方便。

3.如何選擇模型

C站的優點是可以直接看到效果圖和網友的回映圖片。 你甚至可以點選**右下角的感嘆號,可以看到圖中的大部分引數,可以直接複製到穩定擴散使用,極大地方便了我們的繪圖過程。

基於原始影象反向搜尋模型。

開啟 Stable Diffusion,輸入 **Info,將原始圖片拖拽進去,即可在右側看到 ** 的所有資訊。

藍色框是提示詞,黃色框是反向提示詞,紅色框是我們需要的模型雜湊值(即型號)。

4.型號 VAE

VAE是用來增強圖片的色彩資訊的,如果覺得圖片灰度大多是VAE問題造成的。 大多數型號將提供 VAE。 如果沒有VAE顯示,一般使用預設顯示

5.什麼是LoRa

LoRa是用來穩定你的畫面元素的, 比如想讓畫面出現特定的人物, **服裝, 等等, 都需要使用相對的LoRa. 你可以把蘿拉看作是穩定你的照片的東西.

二、實戰篇

1.素描

這裡需要注意的重要一點是盡可能清晰地勾勒出你需要的運動和形狀,線條應該足夠深,足夠清晰,否則穩定的擴散將無法識別。 在這裡,我們可以使用PS中的顏色級別選項來繪製線條圖。

2.關鍵字:

關鍵詞分為兩種型別:正面和負面。 正面關鍵詞的內容可以分為頭部、上半身、四肢等,比較清晰。 說明想要的動作(如手裡拿著劍)、衣服的材質和顏色等,並加上括號強調重要內容的分量。

最後,新增一些圖形和風格補充(獨奏、最高質量、逼真等)。 由於模型已經確定了樣式,因此我們不需要新增太多樣式描述符。

否定關鍵詞是你不想出現在螢幕上的內容,這裡有一組更通用的否定關鍵詞:(bad-artist:1.)。0), loli:1.2), worst quality, low quality:1.4), bad_prompt_version2:0.8), bad-hands-5,lowres, bad anatomy, bad hands, (text)),watermark), error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, (username)),blurry, (extra limbs),3.生成設定

我們將生成的描述符複製到其中,點選loar模型,點選我們想要的模型,在正描述符中會自動生成乙個關於lora的關鍵字,並將短語的最後乙個數字1改為05.減輕其重量。

左上角選單下拉選擇你需要的模型,這次我們用的是國風三大模型,取樣器選擇DPM++穩定擴散卡拉斯,步數選擇30步,生成批次選擇6個

4.控制網路設定和應用程式

滾動到頁面底部,點選控制網選項,將藝術線條拖入其中,點選啟用,點選後面的畫素靈敏度,然後選擇允許Preivew,選擇藝術線條的加長選項和對應的模型。

在新版的Stable Diffusion中,會有乙個選項可以直接選擇,只需選擇LineArt的選項即可。 (注意:這需要乙個相對於控制網的模型)。

單擊小圖示,我們可以看到相對於它生成的線條圖稿。 點選預覽圖片下方的小箭頭,線條圖的尺寸解像度將相對於配置。

5.批量生成

單擊“生成”開始批量計算。 在這裡,我嘗試了不同的大型模型來生成不同的樣式。

在這裡我們可以看到,通過控制網的畫線,我們可以很好地識別出我們草圖的動作姿勢和服裝形狀,我們可以選擇乙個比較滿意的進行下一步。

注意:如果電腦配置比較低,可以先將草圖壓縮到大小再拉進去識別線條圖,這一步我們主要尋找整體畫面的大感,對於畫面模糊或者區域性bug不需要特別注意,會在下面的操作中細化補救。

6.草圖示意圖

接下來選擇一張我們比較滿意的圖片,點選預覽下方的圖表按鈕進入,進入後可以看到我們相應的引數已經自動配置好了,這裡我們需要做的就是重新選擇我們的取樣器dpm++穩定擴散卡拉斯,然後放大高度和寬度,重繪幅度建議控制在0。4、取樣步數可適當增加,約30-50步,點選生成,進行下一步精細生成。

注意:如果電腦配置比較低,高度和寬度一次不宜過高。

在這裡,在我完善影象並生成影象後,我在PS中對其進行了調整,並裁剪了一些需要更多細節的地方,然後放大並重新生成。

7.優雅

最後,我們可以重點調整面部描寫,這裡推薦乙個外掛程式Face Editor,可以有效修復面部塌陷、異發等。 然後優化PS中的bug。

例如,如果手部結構有錯誤,我們可以通過跟隨AI生成的影象進行優化,或者我們可以製作深度圖並再次輸入AI進一步生成,這因人而異,因此我們可以採取最適合您的方法。 並調整畫面的光影和整體氛圍,因為這只是乙個小案例,所以已經粗略修復過了。

可以看出,整體動作和衣服相對於素描的修復程度還是比較高的。 借助 Control Net 的 LineArt,我們可以精確地控制畫面中人物的動態服裝,使其更適合我們的需求。

以上就是如何快速生成穩定擴散的固定姿態,如果您有其他快速方法,歡迎在評論區留言。

相關問題答案

    Moyan教育教育丨Zenos Cafe品牌設計案例

    當商務人士在繁忙的工作日需要片刻的休息和放鬆時,位於商務中心旁邊的Zenos咖啡店無疑是乙個絕佳的選擇。該品牌對這家咖啡店的視覺設計既商務又時尚,使室內環境既舒適又精緻。品牌標誌以手寫簽名的形式,用輕盈的單行勾勒出輪廓,給人留下深刻的印象,讓我們一起欣賞Zenos品牌的視覺設計。Zenos 是一家位...

    Moyan教育丨LoRa助力設計活動運營頁面

    隨著人工智慧技術的快速發展,各大企業紛紛轉向人工智慧技術,以增強運營活動的設計。在這種趨勢下,Ganji Direct Recruitment也在積極探索如何利用AI來輔助設計師的工作。以月秋季招聘活動頁面為例,分享我的心思和落地。專案背景 為滿足月 招聘季的招聘需求,我們將開展專項招聘活動,引導使...

    墨顏教育丨字型設計理解 瘋狂鉛筆尖

    探索字型的更多視覺表達 我看到網上分享了很多優秀的字型設計作品,各式各樣,各式各樣。在我看來,字型設計大多是為了表達字型的形式,比如字型結構的調整 筆畫的變化 視覺效果的擺放等等。但是很少看到字型圖形的想法。對於從事商業設計的設計師來說,創造力是他工作的核心。將圖形創意與字型設計相結合,不僅探索了字...

    Moyan教育丨海報設計其實很簡單

    其實,在平面設計之初,我們就要一步乙個腳印,從易到難,首先要弄清楚設計的基本邏輯是什麼,掌握最基本的設計方法,你的設計就已經是一件非常好的設計作品了。它不是在追求每件作品之初就需要有很強的創意表現和超前的設計理念,總覺得自己的畫面沒有網際網絡上那麼有創意和深思熟慮,其實這樣就會把自己框起來,作為乙個...

    墨言教育丨詳細的AI海報設計教程,從角色到背景生成全過程

    當你掌握了AI繪圖工具後,最重要的是設計師能否在工作中通過AI工具的實施來提高效率,本期為大家帶來了一套AI輔助設計,加速需求落地的完整過程,第一步主要涉及前期需求和溝通確認低保真框架 具體流程因公司而異,但最終結果取向是一樣的 第二步和第三步主要講解詳細的步驟過程和著陸時的注意事項。本教程AI工具...