發(fā)布時間:2023-12-02 16:41:32 瀏覽量:159次
即使在家里,Stable Diffusion XL Turbo(SDXL Turbo)也可以以驚人的速度創(chuàng)建詳細(xì)的圖像。
周二,Stability AI公司推出了一種人工智能圖像合成模型“Stable Diffusion XL Turbo”,該模型可以根據(jù)書面提示快速生成圖像。事實(shí)上,它的速度如此之快,以至于該公司將其標(biāo)榜為“實(shí)時”圖像生成,因?yàn)樗€可以快速轉(zhuǎn)換來自網(wǎng)絡(luò)攝像頭等來源的圖像。
SDXL Turbo的主要創(chuàng)新在于它能夠在一個步驟中產(chǎn)生圖像輸出,比其前身所需的20-50個步驟顯著減少。Stability AI將這種效率的飛躍歸功于一種被稱為對抗性擴(kuò)散蒸餾(ADD)的技術(shù)。ADD使用分?jǐn)?shù)提取,其中模型從現(xiàn)有的圖像合成模型中學(xué)習(xí),以及對抗性損失,這增強(qiáng)了模型區(qū)分真實(shí)圖像和生成圖像的能力,提高了輸出的真實(shí)性。
在周二發(fā)表的一篇專注于ADD技術(shù)的研究論文中,Stability AI詳細(xì)介紹了該模型的內(nèi)部工作原理。SDXL Turbo的優(yōu)點(diǎn)之一是它與生成對抗網(wǎng)絡(luò)(GAN)相似,特別是在產(chǎn)生單步圖像輸出方面。
SDXL Turbo圖像不像在更高步數(shù)下生成的SDXL圖像那么詳細(xì),所以它不被認(rèn)為是以前型號的替代品。但就速度節(jié)省而言,結(jié)果令人瞠目結(jié)舌。
為了進(jìn)行嘗試,我們使用 Automatic111 在Nvidia RTX 3060上本地運(yùn)行SDXL Turbo(權(quán)重與SDXL權(quán)重一樣下降),它可以在大約4秒內(nèi)生成3步1024×1024圖像,而具有類似細(xì)節(jié)的20步SDXL圖像則需要26.4秒。較小的圖像生成速度要快得多(對于512×768而言,不到1秒),當(dāng)然,更強(qiáng)大的顯卡,如RTX 3090或4090,也將允許更快的生成時間。與Stability的營銷相反,我們發(fā)現(xiàn)SDXL Turbo圖像在每張圖像大約3-5步處具有最佳細(xì)節(jié)。
SDXL Turbo的生成速度就是所謂的“實(shí)時”。Stability AI表示,在NVIDIA A100(一款強(qiáng)大的AI調(diào)整圖形處理器)上,該模型可以在207ms內(nèi)生成一張512×512圖像,包括編碼、單個去噪步驟和解碼。如果能夠解決一致性問題,這樣的速度可能會導(dǎo)致實(shí)時生成AI視頻過濾器或?qū)嶒?yàn)性視頻游戲圖像生成。在這種情況下,一致性意味著在多個幀或代之間保持相同的主題。
目前,SDXL Turbo是在非商業(yè)研究許可證下提供的,限制其用于個人非商業(yè)目的。這一舉措已經(jīng)在Stable Diffusion社區(qū)受到了一些批評,但Stability AI表示對商業(yè)應(yīng)用持開放態(tài)度,并邀請感興趣的各方聯(lián)系以獲取更多信息。
與此同時,Stability AI本身也面臨著內(nèi)部管理問題,一位投資者最近敦促首席執(zhí)行官埃馬德·莫斯塔克(Emad Mostaque)辭職。據(jù)報(bào)道,Stability AI管理層一直在探索將公司出售給更大實(shí)體的可能性,但這并沒有放慢Stability AI發(fā)布的節(jié)奏。就在上周,該公司發(fā)布了一款名為“穩(wěn)定視頻擴(kuò)散”(Stable Video Diffusion)的軟件,可以將靜止圖像轉(zhuǎn)換為短視頻剪輯。
Stability AI在其圖像編輯平臺Clipdrop上提供了SDXL Turbo功能的測試版演示。你也可以在 Hugging Face 上免費(fèi)試用一個非官方的現(xiàn)場演示。顯然,所有常見的警告都適用,包括缺乏訓(xùn)練數(shù)據(jù)的來源和濫用的可能性。即使有這些懸而未決的問題,人工智能圖像合成的技術(shù)進(jìn)步肯定不會放緩。
如果朋友們喜歡,敬請關(guān)注“知新了了”!
熱門資訊
1. 華為手機(jī)神奇“AI修圖”功能,一鍵消除衣服!原圖變身大V領(lǐng)深V!
最近華為手機(jī)Pura70推出的“AI修圖”功能引發(fā)熱議,通過簡單操作可以讓照片中的人物換裝。想了解更多這款神奇功能的使用方法嗎?點(diǎn)擊查看!
想將照片變成漫畫效果?這篇文章分享了4個方法,包括Photoshop、聰明靈犀、VanceAI Toongineer、醒圖,簡單操作就能實(shí)現(xiàn),快來嘗試一下吧!
近年來,人工智能逐漸走入公眾視野,其中的AI圖像生成技術(shù)尤為引人注目。只需在特定軟件中輸入關(guān)鍵詞描述語以及上傳參考圖就能智能高效生成符合要求的...
4. AI視頻制作神器Viggle:讓靜態(tài)人物動起來,創(chuàng)意無限!
Viggle AI是一款免費(fèi)制作視頻的AI工具,能讓靜態(tài)人物圖片動起來,快來了解Viggle AI的功能和優(yōu)勢吧!
5. Logo Diffusion——基于sd繪畫模型的AI LOGO 生成器
這下LOGO設(shè)計(jì)徹底不用求人了。接下來詳細(xì)演示一遍操作流程首先進(jìn)入Logo D... 想學(xué)習(xí)更多AI技能,比如說關(guān)于怎么樣利用AI來提高生產(chǎn)效率、還能做什么AI...
6. 一款免費(fèi)無限制的AI視頻生成工具火了!國內(nèi)無障礙訪問!附教程
人人都可以動手制作AI視頻! 打開網(wǎng)址https://pixverse.ai/,用郵箱注冊后,點(diǎn)擊右上角Create,就可以開始創(chuàng)作了。 PixVerse目前有文案生成視頻,和圖片生...
7. 零基礎(chǔ)10分鐘生成漫畫,教大家如何用AI生成自己的漫畫
接下來,我將親自引導(dǎo)你,使用AI工具,創(chuàng)作一本既有趣又能帶來盈利的漫畫。我們將一起探索如何利用這個工具,發(fā)揮你的創(chuàng)意,制作出令人驚嘆的漫畫作品。讓...
8. 趕緊收藏好!這4個完全免費(fèi)的AI視頻制作網(wǎng)站和工具
以下是一些免費(fèi)的AI視頻制作網(wǎng)站或工具,幫助您制作各種類型的視頻。 1. Lumen5:Lumen5是一個基于AI的視頻制作工具,可將文本轉(zhuǎn)換為視頻。 用戶可以使...
9. AI顯卡繪畫排行榜:4090無懸念,最具性價(jià)比出人意料
在AI繪圖領(lǐng)域,Stable Diffusion的顯卡繪圖性能備受關(guān)注。本文整理了Stable Diffusion顯卡的硬件要求和性能表現(xiàn),以及2023年3月顯卡AI繪圖效率排行榜和性價(jià)比排行榜。歡迎查看最新的AI顯卡算力排行榜。
就能快速生成一幅極具藝術(shù)效果的作品,讓現(xiàn)實(shí)中不懂繪畫的人也能參與其中創(chuàng)作!真的超贊噠~趣趣分享幾款超厲害的AI繪畫軟件,提供詳細(xì)操作!有需要的快來...
最新文章
同學(xué)您好!