發(fā)布時(shí)間:2023-12-02 16:41:32 瀏覽量:153次
即使在家里,Stable Diffusion XL Turbo(SDXL Turbo)也可以以驚人的速度創(chuàng)建詳細(xì)的圖像。
周二,Stability AI公司推出了一種人工智能圖像合成模型“Stable Diffusion XL Turbo”,該模型可以根據(jù)書面提示快速生成圖像。事實(shí)上,它的速度如此之快,以至于該公司將其標(biāo)榜為“實(shí)時(shí)”圖像生成,因?yàn)樗€可以快速轉(zhuǎn)換來自網(wǎng)絡(luò)攝像頭等來源的圖像。
SDXL Turbo的主要?jiǎng)?chuàng)新在于它能夠在一個(gè)步驟中產(chǎn)生圖像輸出,比其前身所需的20-50個(gè)步驟顯著減少。Stability AI將這種效率的飛躍歸功于一種被稱為對(duì)抗性擴(kuò)散蒸餾(ADD)的技術(shù)。ADD使用分?jǐn)?shù)提取,其中模型從現(xiàn)有的圖像合成模型中學(xué)習(xí),以及對(duì)抗性損失,這增強(qiáng)了模型區(qū)分真實(shí)圖像和生成圖像的能力,提高了輸出的真實(shí)性。
在周二發(fā)表的一篇專注于ADD技術(shù)的研究論文中,Stability AI詳細(xì)介紹了該模型的內(nèi)部工作原理。SDXL Turbo的優(yōu)點(diǎn)之一是它與生成對(duì)抗網(wǎng)絡(luò)(GAN)相似,特別是在產(chǎn)生單步圖像輸出方面。
SDXL Turbo圖像不像在更高步數(shù)下生成的SDXL圖像那么詳細(xì),所以它不被認(rèn)為是以前型號(hào)的替代品。但就速度節(jié)省而言,結(jié)果令人瞠目結(jié)舌。
為了進(jìn)行嘗試,我們使用 Automatic111 在Nvidia RTX 3060上本地運(yùn)行SDXL Turbo(權(quán)重與SDXL權(quán)重一樣下降),它可以在大約4秒內(nèi)生成3步1024×1024圖像,而具有類似細(xì)節(jié)的20步SDXL圖像則需要26.4秒。較小的圖像生成速度要快得多(對(duì)于512×768而言,不到1秒),當(dāng)然,更強(qiáng)大的顯卡,如RTX 3090或4090,也將允許更快的生成時(shí)間。與Stability的營(yíng)銷相反,我們發(fā)現(xiàn)SDXL Turbo圖像在每張圖像大約3-5步處具有最佳細(xì)節(jié)。
SDXL Turbo的生成速度就是所謂的“實(shí)時(shí)”。Stability AI表示,在NVIDIA A100(一款強(qiáng)大的AI調(diào)整圖形處理器)上,該模型可以在207ms內(nèi)生成一張512×512圖像,包括編碼、單個(gè)去噪步驟和解碼。如果能夠解決一致性問題,這樣的速度可能會(huì)導(dǎo)致實(shí)時(shí)生成AI視頻過濾器或?qū)嶒?yàn)性視頻游戲圖像生成。在這種情況下,一致性意味著在多個(gè)幀或代之間保持相同的主題。
目前,SDXL Turbo是在非商業(yè)研究許可證下提供的,限制其用于個(gè)人非商業(yè)目的。這一舉措已經(jīng)在Stable Diffusion社區(qū)受到了一些批評(píng),但Stability AI表示對(duì)商業(yè)應(yīng)用持開放態(tài)度,并邀請(qǐng)感興趣的各方聯(lián)系以獲取更多信息。
與此同時(shí),Stability AI本身也面臨著內(nèi)部管理問題,一位投資者最近敦促首席執(zhí)行官埃馬德·莫斯塔克(Emad Mostaque)辭職。據(jù)報(bào)道,Stability AI管理層一直在探索將公司出售給更大實(shí)體的可能性,但這并沒有放慢Stability AI發(fā)布的節(jié)奏。就在上周,該公司發(fā)布了一款名為“穩(wěn)定視頻擴(kuò)散”(Stable Video Diffusion)的軟件,可以將靜止圖像轉(zhuǎn)換為短視頻剪輯。
Stability AI在其圖像編輯平臺(tái)Clipdrop上提供了SDXL Turbo功能的測(cè)試版演示。你也可以在 Hugging Face 上免費(fèi)試用一個(gè)非官方的現(xiàn)場(chǎng)演示。顯然,所有常見的警告都適用,包括缺乏訓(xùn)練數(shù)據(jù)的來源和濫用的可能性。即使有這些懸而未決的問題,人工智能圖像合成的技術(shù)進(jìn)步肯定不會(huì)放緩。
如果朋友們喜歡,敬請(qǐng)關(guān)注“知新了了”!
熱門資訊
1. 照片變漫畫效果,這4個(gè)方法操作簡(jiǎn)單有效,快來試試吧!
想將照片變成漫畫效果?這篇文章分享了4個(gè)方法,包括Photoshop、聰明靈犀、VanceAI Toongineer、醒圖,簡(jiǎn)單操作就能實(shí)現(xiàn),快來嘗試一下吧!
2. 華為手機(jī)神奇“AI修圖”功能,一鍵消除衣服!原圖變身大V領(lǐng)深V!
最近華為手機(jī)Pura70推出的“AI修圖”功能引發(fā)熱議,通過簡(jiǎn)單操作可以讓照片中的人物換裝。想了解更多這款神奇功能的使用方法嗎?點(diǎn)擊查看!
近年來,人工智能逐漸走入公眾視野,其中的AI圖像生成技術(shù)尤為引人注目。只需在特定軟件中輸入關(guān)鍵詞描述語以及上傳參考圖就能智能高效生成符合要求的...
4. AI視頻制作神器Viggle:讓靜態(tài)人物動(dòng)起來,創(chuàng)意無限!
Viggle AI是一款免費(fèi)制作視頻的AI工具,能讓靜態(tài)人物圖片動(dòng)起來,快來了解Viggle AI的功能和優(yōu)勢(shì)吧!
5. Logo Diffusion——基于sd繪畫模型的AI LOGO 生成器
這下LOGO設(shè)計(jì)徹底不用求人了。接下來詳細(xì)演示一遍操作流程首先進(jìn)入Logo D... 想學(xué)習(xí)更多AI技能,比如說關(guān)于怎么樣利用AI來提高生產(chǎn)效率、還能做什么AI...
6. 零基礎(chǔ)10分鐘生成漫畫,教大家如何用AI生成自己的漫畫
接下來,我將親自引導(dǎo)你,使用AI工具,創(chuàng)作一本既有趣又能帶來盈利的漫畫。我們將一起探索如何利用這個(gè)工具,發(fā)揮你的創(chuàng)意,制作出令人驚嘆的漫畫作品。讓...
7. AI顯卡繪畫排行榜:4090無懸念,最具性價(jià)比出人意料
在AI繪圖領(lǐng)域,Stable Diffusion的顯卡繪圖性能備受關(guān)注。本文整理了Stable Diffusion顯卡的硬件要求和性能表現(xiàn),以及2023年3月顯卡AI繪圖效率排行榜和性價(jià)比排行榜。歡迎查看最新的AI顯卡算力排行榜。
8. 趕緊收藏好!這4個(gè)完全免費(fèi)的AI視頻制作網(wǎng)站和工具
以下是一些免費(fèi)的AI視頻制作網(wǎng)站或工具,幫助您制作各種類型的視頻。 1. Lumen5:Lumen5是一個(gè)基于AI的視頻制作工具,可將文本轉(zhuǎn)換為視頻。 用戶可以使...
就能快速生成一幅極具藝術(shù)效果的作品,讓現(xiàn)實(shí)中不懂繪畫的人也能參與其中創(chuàng)作!真的超贊噠~趣趣分享幾款超厲害的AI繪畫軟件,提供詳細(xì)操作!有需要的快來...
10. 10個(gè)建筑AI工具,從設(shè)計(jì)到施工全覆蓋!肯定有你從來沒聽過的
講述了建筑業(yè)比較著名的AI公司小庫(kù)科技做出的探索,在這兒就不多說了。今天,我們?cè)囍谝?guī)劃設(shè)計(jì)、建筑方案設(shè)計(jì)、住宅設(shè)計(jì)、管道設(shè)計(jì)、出渲染圖、3D掃...
最新文章
同學(xué)您好!