發(fā)布時(shí)間:2024-03-24 20:13:25 瀏覽量:319次
今天分享內(nèi)容的視頻版如下,視頻已添加進(jìn)度條及配音,文中涉及到的模型已上傳,想要原視頻以及模型的鹿友公眾號后臺(tái)撩我獲取:
視頻版稍后單獨(dú)發(fā)送
以下是圖文版內(nèi)容:
正文共:3661字 51圖
預(yù)計(jì)閱讀時(shí)間:10分鐘
其實(shí)一直以來,我覺得分享式的學(xué)習(xí)方法特別適合我。在學(xué)習(xí)的過程中,分享出來,相當(dāng)于對自己學(xué)到的內(nèi)容進(jìn)行進(jìn)一步的梳理和鞏固。
前面連續(xù)兩篇文章,我們分別分享了SD的軟件安裝、文生圖的概述、Ai繪圖初體驗(yàn)以及模型的分類。
今天我打算將文生圖的內(nèi)容補(bǔ)充完整,著重分享一些之前沒分享過的知識(shí)點(diǎn)。我相信通過這三篇連續(xù)的文章分享,新手在文生圖方面基本上可以算是入門了。
01
Clip跳過層
Clip跳過層我們一般很少調(diào)整,但為了完整性還是大概說明一下它的作用。
這里先說一下測試出來的結(jié)論:數(shù)值越高,生成的圖和提詞的相關(guān)性越低。
例如,在提詞器中設(shè)置了關(guān)鍵詞吉尼龜、可愛、帽子、水,接下來需要找一個(gè)不錯(cuò)的狀態(tài)來固定隨機(jī)種子:
這里我用XYZ圖表腳本生成了一個(gè)對比圖,關(guān)于XYZ圖表的使用我們以后再說:
橫向?qū)Ρ仁荂lip跳過層從1-10,縱向?qū)Ρ攘藘蓚€(gè)模型,可以觀察到,總的來說數(shù)值越高,得到的圖像就越缺少我們在提詞器中設(shè)定的內(nèi)容:
這一點(diǎn)我覺得我們新手僅作了解就好,大部分情況下Clip跳過層的數(shù)值保持默認(rèn)即可。
02
采樣迭代步數(shù)
采樣迭代步數(shù)在之前的文生圖概述中已經(jīng)提到過了,當(dāng)鼠標(biāo)停留在上面時(shí),也可以看到它的含義:
簡單來說,采樣迭代步數(shù)就是用多少次來計(jì)算你提詞器里的內(nèi)容。
同樣我這里設(shè)置了在1-40的步數(shù)范圍內(nèi)取其中10張圖來做對比:
可以觀察到,當(dāng)步數(shù)太低時(shí),生成的圖像幾乎無法呈現(xiàn)內(nèi)容;個(gè)人認(rèn)為,將步數(shù)控制在30以內(nèi)比較合適,因?yàn)槌^30步會(huì)增加生成圖片所需的時(shí)間,但收益可能有限:
03
采樣方法
采樣方法在之前已經(jīng)提到過,它指的是不同的算法。在之前的采樣迭代步數(shù)對比的基礎(chǔ)上,我在上面增加了所有采樣方法的對比,以便進(jìn)行縱向比較:
從速度方面來看,DDIM的速度最快,而DPM Adaptive則較慢:
但是這個(gè)對比只能作為參考,因?yàn)椴煌牟蓸臃椒赡軐Σ煌哪P彤a(chǎn)生不同的影響。
因此,對于采樣方法的選擇,我認(rèn)為最好的方法便是嘗試,以及根據(jù)個(gè)人的喜好進(jìn)行選擇。
目前在網(wǎng)絡(luò)上使用最廣泛的幾種采樣方式分別是:Euler a、DPM++ 2M Karras、DPM++ SDE Karras、DDIM:
04
面部修復(fù)、平鋪及高清修復(fù)
面部修復(fù)通常用在生成三次元的圖,例如我這里生成一個(gè)三次元的圖,面部會(huì)有些崩壞:
開啟面部修復(fù)功能后,對于生成的三次元圖像,崩壞情況可能會(huì)有一定改善。但對于二次元圖像,建議不要開啟面部修復(fù)功能:
平鋪是用于生成花紋的,我沒用過,這個(gè)咱們新手就暫時(shí)跳過吧:
高清修復(fù)功能在一定程度上也可以幫助改善面部效果,例如我這里以男人的圖為例進(jìn)行演示:
對于三次元圖像,可以選擇R-ESRGAN 4x+算法;對于二次元圖像,可以選擇R-ESRGAN 4x+ Anime6B算法。這兩個(gè)算法在高清修復(fù)中通常會(huì)獲得較好的效果。
通常情況下,高清修復(fù)的采樣次數(shù)可以保持默認(rèn)值為0,這樣它會(huì)和采樣迭代步數(shù)保持一致。
而重繪幅度數(shù)值越高,生成圖像與原圖的差異也會(huì)越大。一般情況下,0.4到0.7的效果都不錯(cuò):
放大倍率顧名思義就是在原有分辨率的基礎(chǔ)上放大多少,千萬別給太高,否則顯卡會(huì)崩,通常2倍就足夠了:
可以看到面部得到了改善,并且由于我重繪幅度給的比較高,所以畫面的變動(dòng)比較大。
另外提示一點(diǎn),當(dāng)面部崩壞的時(shí)候,面部修復(fù)和高清修復(fù)二選一,不要兩個(gè)都開,否則會(huì)適得其反:
05
分辨率
分辨率的設(shè)置是尤為關(guān)鍵的,上一篇模型分類的文章中,我們提到了幾乎所有的模型都是基于SD官方模型訓(xùn)練得來的。
而以官方模型sd1.5為例,訓(xùn)練時(shí)候圖片的分辨率是512*512:
sd2.1的分辨率新增了768*768版本:
也就是說幾乎所有的模型訓(xùn)練的尺寸都是512*512或者768*768。
因此當(dāng)我們分辨率太低,例如低于256*256,會(huì)讓SD沒地方發(fā)揮,導(dǎo)致圖像質(zhì)量下降:
而當(dāng)我們把分辨率設(shè)置過高,例如高于1024*1024,會(huì)讓SD亂發(fā)揮,構(gòu)圖會(huì)有問題,甚至產(chǎn)生鬼畜效果:
這個(gè)和寬高比沒有關(guān)系,例如我把寬改為512,高保持1280也能生成一副正常的圖片:
具體分辨率應(yīng)該如何設(shè)置,我的個(gè)人建議是至少保證其中一個(gè)參數(shù)為512或者768,有一些模型它也會(huì)寫明推薦的分辨率。
如果你確實(shí)想生成高分辨率圖像,建議生成小的分辨率尺寸然后在此基礎(chǔ)上開高清修復(fù):
06
生成批次和CFG
生成批次很好理解,相當(dāng)于每次生多少組圖,這些圖的隨機(jī)種子是依次增加的:
每批數(shù)量就是每組圖有多少張,例如我這里生成了4批,每批數(shù)量是2,一共就是8張圖:
CFG參數(shù)控制生成圖像的提詞相關(guān)性,數(shù)值越高越接近提詞內(nèi)容,但過高會(huì)導(dǎo)致飽和度過曝,我這里同樣以吉尼龜為例做了一個(gè)對比圖大家可以看看:
07
隨機(jī)種子
最后一個(gè)參數(shù)隨機(jī)種子,說到隨機(jī)種子我們這里先提一下AI繪圖的工作原理,用人話講AI繪圖就是先給一個(gè)噪聲圖,然后通過不斷的調(diào)整往你的提詞靠攏最后生成圖片。
隨機(jī)種子隨機(jī)的就是這個(gè)噪聲圖,我這里用DDIM這種采樣模式生成了一個(gè)采樣迭代步數(shù)1到10的對比圖:
可以看到當(dāng)采樣迭代步數(shù)為1的時(shí)候,就是一個(gè)噪聲圖,然后隨著步數(shù)的增加逐漸形成一張圖:
之前我們也提過,當(dāng)你得到一個(gè)覺得不錯(cuò)的效果時(shí)候,可以點(diǎn)擊環(huán)保圖標(biāo)按鈕固定住隨機(jī)種子。
這樣在同樣硬件環(huán)境以及參數(shù)不變的情況下,你每次得到的圖可以達(dá)到百分之99的相似:
點(diǎn)擊骰子按鈕隨機(jī)種子的數(shù)值會(huì)變成-1,這樣每次都會(huì)使用一個(gè)新的隨機(jī)種子:
激活倒三角旁邊的按鈕之后,這里你還可以再設(shè)置一個(gè)隨機(jī)種子,然后通過調(diào)整差異強(qiáng)度,將兩個(gè)種子的圖片進(jìn)行混合。
下面的寬度和高度是指的生成圖時(shí)按照你指定的分辨率的構(gòu)圖或者效果生成圖片,但實(shí)際最終的分辨率還是你上面設(shè)置的出圖分辨率,這個(gè)功能很少用:
08
Ai繪圖小案例 吉尼龜
本來以上就是今天要分享的所有內(nèi)容,但是由于我習(xí)慣了寫案例的文章,所以就順便把前面舉例的吉尼龜案例弄完吧。
找到之前測試過程中還不錯(cuò)的一張圖,上傳到圖片信息選項(xiàng)卡,它會(huì)自動(dòng)讀取到你的文生圖參數(shù)信息,點(diǎn)擊文生圖:
你的參數(shù)設(shè)置就會(huì)自動(dòng)填寫到文生圖的各個(gè)欄位:
讓我們在此基礎(chǔ)上繼續(xù)調(diào)整吧,首先我把模型切換為了ReV Animatedv1.2.2,這個(gè)是ReV Animated的最新版本,文末我也會(huì)把模型分享給大家。
然后尺寸我把高度改為了768,寬度保持為512,這張圖之前用的采樣方法是DDIM,然后把采樣迭代步數(shù)改為30生成圖試一下:
出問題了,生成的圖片跑出一個(gè)女孩出來并且在翻車的邊緣徘徊,我只希望出現(xiàn)吉尼龜。
所以在正向提詞框內(nèi),我輸入了“沒有人類”,并且括弧加冒號1.3來提高它的權(quán)重。
同時(shí)為了避免翻車,反向提詞里我輸入了“NSFW(不適合在工作時(shí)間瀏覽的內(nèi)容)”,權(quán)重為1.4:
接下來我們就需要找到一個(gè)比較合適的隨機(jī)種子狀態(tài),固定住進(jìn)一步微調(diào)。
大家可以通過生成多個(gè)批次的方式找到自己想要的狀態(tài),為了節(jié)約時(shí)間,我直接輸入之前嘗試好的seed:
C站上看一下這個(gè)模型的介紹,它是有推薦填寫的正反向提詞內(nèi)容:
這些主要都是用于調(diào)整畫面品質(zhì)的提詞,把它們都抄進(jìn)提詞框吧,模型介紹中的權(quán)重書寫方式我改為了自己習(xí)慣的寫法,這個(gè)以后我們再進(jìn)一步分享:
開始微調(diào)吧,提詞內(nèi)首先我把“一個(gè)吉尼龜,可愛,帽子,水”改成了“吉尼龜戴著綠色的帽子,可愛,水”:
接著我在可愛后面輸入了“chibi”,這個(gè)是用于描述Q版形象的意思,我記得吉尼龜?shù)难劬κ羌t色的,所以又輸入了“紅色眼睛”:
然后我又加入了“站立,張開短手臂,短腿,微笑”來進(jìn)一步控制它的形態(tài),大體感覺就出來了:
現(xiàn)在手部出現(xiàn)問題了,這個(gè)是最不好控制的,我這里首先把負(fù)向提詞里和手有關(guān)的權(quán)重都提高了,但是現(xiàn)在又多出一個(gè)手出來:
所以負(fù)向提詞里我加了一個(gè)“多余肢體”在最前面:
現(xiàn)在帽子出現(xiàn)了紅色,我只想要純綠色的帽子,所以在負(fù)向提詞里加了“紅色帽子”。
至于它的位置我建議大家先放到最前面開始嘗試,如果對畫面影響太大,就向后移。
如圖所示我移動(dòng)到“低質(zhì)量”后面的時(shí)候,畫面影響不太大,但是又多了部分肢體出來:
所以再次提高“多余肢體”的權(quán)重,這個(gè)權(quán)重大家可以多嘗試一下太高或者太低效果都不好:
另外有個(gè)知識(shí)點(diǎn)是我意外發(fā)現(xiàn)的,當(dāng)我們在提詞中連續(xù)輸入兩個(gè)逗號,即表示中間有個(gè)空白提詞,對畫面也有微弱的影響。
因?yàn)槠鋵?shí)相當(dāng)于還是改變了提詞之間的前后順序,也就是權(quán)重,例如這里意外的長出了尾巴這反而是我想要的:
只是這種微調(diào)就需要多多嘗試了,例如我這里尾巴雖然意外的長出來了,但是手指又多了,并且反而降低“多余肢體”的權(quán)重能得到滿意的效果,有點(diǎn)玄學(xué):
另外我開了高清修復(fù),由于本身我對畫面已經(jīng)比較滿意了,所以重繪幅度開得比較低,主要是為了放大分辨率,算法記得選擇正確哦:
最后PS里調(diào)色排版看看效果吧:
以上就是今天要分享的所有內(nèi)容啦,其實(shí)內(nèi)容還是比較多的,希望對大家有所幫助,希望各位鹿友一鍵三連支持哦!
更多內(nèi)容歡迎關(guān)注公眾號:
本文由“野鹿志”發(fā)布
轉(zhuǎn)載前請聯(lián)系馬鹿野郎
熱門資訊
1. 照片變漫畫效果,這4個(gè)方法操作簡單有效,快來試試吧!
想將照片變成漫畫效果?這篇文章分享了4個(gè)方法,包括Photoshop、聰明靈犀、VanceAI Toongineer、醒圖,簡單操作就能實(shí)現(xiàn),快來嘗試一下吧!
2. 華為手機(jī)神奇“AI修圖”功能,一鍵消除衣服!原圖變身大V領(lǐng)深V!
最近華為手機(jī)Pura70推出的“AI修圖”功能引發(fā)熱議,通過簡單操作可以讓照片中的人物換裝。想了解更多這款神奇功能的使用方法嗎?點(diǎn)擊查看!
近年來,人工智能逐漸走入公眾視野,其中的AI圖像生成技術(shù)尤為引人注目。只需在特定軟件中輸入關(guān)鍵詞描述語以及上傳參考圖就能智能高效生成符合要求的...
4. AI視頻制作神器Viggle:讓靜態(tài)人物動(dòng)起來,創(chuàng)意無限!
Viggle AI是一款免費(fèi)制作視頻的AI工具,能讓靜態(tài)人物圖片動(dòng)起來,快來了解Viggle AI的功能和優(yōu)勢吧!
5. Logo Diffusion——基于sd繪畫模型的AI LOGO 生成器
這下LOGO設(shè)計(jì)徹底不用求人了。接下來詳細(xì)演示一遍操作流程首先進(jìn)入Logo D... 想學(xué)習(xí)更多AI技能,比如說關(guān)于怎么樣利用AI來提高生產(chǎn)效率、還能做什么AI...
6. 零基礎(chǔ)10分鐘生成漫畫,教大家如何用AI生成自己的漫畫
接下來,我將親自引導(dǎo)你,使用AI工具,創(chuàng)作一本既有趣又能帶來盈利的漫畫。我們將一起探索如何利用這個(gè)工具,發(fā)揮你的創(chuàng)意,制作出令人驚嘆的漫畫作品。讓...
7. 趕緊收藏好!這4個(gè)完全免費(fèi)的AI視頻制作網(wǎng)站和工具
以下是一些免費(fèi)的AI視頻制作網(wǎng)站或工具,幫助您制作各種類型的視頻。 1. Lumen5:Lumen5是一個(gè)基于AI的視頻制作工具,可將文本轉(zhuǎn)換為視頻。 用戶可以使...
8. AI顯卡繪畫排行榜:4090無懸念,最具性價(jià)比出人意料
在AI繪圖領(lǐng)域,Stable Diffusion的顯卡繪圖性能備受關(guān)注。本文整理了Stable Diffusion顯卡的硬件要求和性能表現(xiàn),以及2023年3月顯卡AI繪圖效率排行榜和性價(jià)比排行榜。歡迎查看最新的AI顯卡算力排行榜。
9. 一款免費(fèi)無限制的AI視頻生成工具火了!國內(nèi)無障礙訪問!附教程
人人都可以動(dòng)手制作AI視頻! 打開網(wǎng)址https://pixverse.ai/,用郵箱注冊后,點(diǎn)擊右上角Create,就可以開始創(chuàng)作了。 PixVerse目前有文案生成視頻,和圖片生...
就能快速生成一幅極具藝術(shù)效果的作品,讓現(xiàn)實(shí)中不懂繪畫的人也能參與其中創(chuàng)作!真的超贊噠~趣趣分享幾款超厲害的AI繪畫軟件,提供詳細(xì)操作!有需要的快來...
最新文章
同學(xué)您好!