發(fā)布時間:2024-04-12 17:34:56 瀏覽量:253次
本文旨在引導(dǎo)用戶掌握Animate diff這一革新性免費AI動畫工具,它借助文字描述賦予靜態(tài)畫面生動動態(tài)效果。相較于同類軟件如Runway,Animate diff憑借其可控性強、開源免費及新近推出的stable diffusion插件,顯著改善了動畫流暢度和穩(wěn)定性,盡管對顯卡配置有一定要求,但通過靈活策略如調(diào)整參數(shù)或云端租用,也能讓普通用戶制作出高質(zhì)量短片。接下來,我們將詳解Animate diff的關(guān)鍵使用技巧與實戰(zhàn)操作,助您輕松步入AI動畫創(chuàng)作世界。
文章涉及的所有有關(guān)AI動圖視頻的軟件和平臺基本都需要稍微會寫點描述詞的能力,動圖的制作和普通AI繪圖極其相似,只是需要在關(guān)鍵詞的內(nèi)容上注意以下幾個點:
①描述的角色的內(nèi)容旁,增加動詞動作,比如女孩微笑大笑
②描述風(fēng)格的用詞旁邊,采用移動方向的描述,比如向左平移,向上向下
AI繪圖里大致有midjourney還有stable diffusion兩派,類比一下,AI動圖和視頻內(nèi)容中,Runway和midjourney很類似,可以不用魔法,除了Runway應(yīng)該還有很多不同的平臺在,希望能有更多便宜大碗的網(wǎng)站推薦。
Runway官網(wǎng)可以直接生成視頻:https://app.runwayml.com/
亮點:
①綠幕去背、模糊人臉、移除影片物件等等視頻剪輯的便捷操作,嘗試一下會有驚喜。
視頻剪輯的便捷操作
②不吃自己的顯卡,如果電腦配置跟不上,類似Runway的平臺,真滴香。
③筆刷涂抹控制部分畫面移動情況,這個設(shè)計補足了單單文字提示詞的短板,更適合生成穩(wěn)定的圖片。
缺點:
①目前沒能找到以視頻生成AI視頻的操作,只有文字描述生成或者圖片生成視頻。
文字描述生成或者圖片生成視頻
②免費生成的幾張圖會帶有水印,不過嘗鮮也夠用
③每次生成的視頻或者動圖的時長只能4秒,但是由于可以在4秒的基礎(chǔ)上,通過最后一幀生成再獲得四秒鐘,其實是可以拼成很長一段視頻
Runway效果
很早的時候大多數(shù)AI視頻的做法是運用stable diffusion中controlnet對已經(jīng)變成圖片的視頻幀進行批量AI繪制,然后運用圖片轉(zhuǎn)視頻的操作再形成AI視頻,但是這種處理方式會出現(xiàn)跳幀以及不穩(wěn)定現(xiàn)象。然而近期Animate diff終于出stable diffusion的插件了,效果比較絲滑、穩(wěn)定、閃爍較小,是一大進步。
早期做法抽搐感強
亮點:
①可控性比Runway高,不卡死4s鐘,顯卡有多大膽,時間有多大產(chǎn)。
②開源,免費之光!!
缺點:
①需要不錯顯卡,推薦顯存12GB往上(個人是N卡3060,12GB,用的SD WebUI版本的Animate diff,不太能視頻生成視頻很容易爆顯存),當(dāng)然也有說8G顯存也夠用。
②操作稍微麻煩一些
顯卡問題解決方案:
①單獨安裝ComfyUI版的Animate diff,占用顯存比較少,但需要適應(yīng)新的工作流節(jié)點
②云端租用,可以嘗試百度的飛槳平臺每天可以免費用8小時,或者使用青椒云可以按小時租用云端電腦搞搞(只帶了筆記本電腦的時候會用)
③一鍵換新顯卡(苦笑)
animate diff插件下載:
①SDwebUI擴展-可用-搜索animate diff安裝插件即可
②animate diff模型和鏡頭運動lora下載:
https://huggingface.co/guoyww/animatediff/tree/main
模型放到SD源目錄\extensions\sd-webui-animatediff\model
鏡頭控制lora放到SD源目錄\models\Lora
重點參數(shù)調(diào)整:
部分參數(shù)
①顯卡配置不高,建議高度*寬度512*512分辨率生成,后期放大。
②啟用animate diff
③動畫模型:不同模型可能使用體驗不同,目前嘗試二次元模型要比三次出效果。
④總幀數(shù)不小于幀率,幀率默認填8比較好用,容易出效果。
⑤closed loop中N(不循環(huán)的視頻動圖)A(循環(huán)的)R-P、R+P(由算法按效果生成是否循環(huán)的動畫)
⑥其余參數(shù)基本可以保持默認狀態(tài)
使用貼士:
1.文生視頻
①Prompt Travel的使用:
普通提示詞后加上Prompt Travel觸發(fā)詞“幀數(shù): 提示詞”,注意半角冒號后面有空格。
例如:
1boy,short black hair,smile,Masterpiece
0: closed mouth
8: open mouth
說明剛開始是閉嘴,第8幀后張開嘴巴,從而使用提示詞控制畫面。
Prompt Travel使用效果示意
②添加控制鏡頭lora:此處不如Runway的畫筆控制部分畫面移動的功能好用,是對整個畫面的鏡頭移動控制。
2.圖生視頻
想要生成兩張圖間隔動畫:可以controlnet上傳初始圖,animate diff上傳末尾幀內(nèi)容,中間由AI發(fā)揮,注意繪制中重回幅度盡量調(diào)整較大,不要太小,太小容易突變?nèi)菀壮龉謻|西,合適重繪幅度為0.75左右。
兩張圖補間重繪幅度較小
熱門資訊
想將照片變成漫畫效果?這篇文章分享了4個方法,包括Photoshop、聰明靈犀、VanceAI Toongineer、醒圖,簡單操作就能實現(xiàn),快來嘗試一下吧!
2. 華為手機神奇“AI修圖”功能,一鍵消除衣服!原圖變身大V領(lǐng)深V!
最近華為手機Pura70推出的“AI修圖”功能引發(fā)熱議,通過簡單操作可以讓照片中的人物換裝。想了解更多這款神奇功能的使用方法嗎?點擊查看!
近年來,人工智能逐漸走入公眾視野,其中的AI圖像生成技術(shù)尤為引人注目。只需在特定軟件中輸入關(guān)鍵詞描述語以及上傳參考圖就能智能高效生成符合要求的...
4. AI視頻制作神器Viggle:讓靜態(tài)人物動起來,創(chuàng)意無限!
Viggle AI是一款免費制作視頻的AI工具,能讓靜態(tài)人物圖片動起來,快來了解Viggle AI的功能和優(yōu)勢吧!
5. Logo Diffusion——基于sd繪畫模型的AI LOGO 生成器
這下LOGO設(shè)計徹底不用求人了。接下來詳細演示一遍操作流程首先進入Logo D... 想學(xué)習(xí)更多AI技能,比如說關(guān)于怎么樣利用AI來提高生產(chǎn)效率、還能做什么AI...
6. 零基礎(chǔ)10分鐘生成漫畫,教大家如何用AI生成自己的漫畫
接下來,我將親自引導(dǎo)你,使用AI工具,創(chuàng)作一本既有趣又能帶來盈利的漫畫。我們將一起探索如何利用這個工具,發(fā)揮你的創(chuàng)意,制作出令人驚嘆的漫畫作品。讓...
7. 趕緊收藏好!這4個完全免費的AI視頻制作網(wǎng)站和工具
以下是一些免費的AI視頻制作網(wǎng)站或工具,幫助您制作各種類型的視頻。 1. Lumen5:Lumen5是一個基于AI的視頻制作工具,可將文本轉(zhuǎn)換為視頻。 用戶可以使...
8. AI顯卡繪畫排行榜:4090無懸念,最具性價比出人意料
在AI繪圖領(lǐng)域,Stable Diffusion的顯卡繪圖性能備受關(guān)注。本文整理了Stable Diffusion顯卡的硬件要求和性能表現(xiàn),以及2023年3月顯卡AI繪圖效率排行榜和性價比排行榜。歡迎查看最新的AI顯卡算力排行榜。
9. 一款免費無限制的AI視頻生成工具火了!國內(nèi)無障礙訪問!附教程
人人都可以動手制作AI視頻! 打開網(wǎng)址https://pixverse.ai/,用郵箱注冊后,點擊右上角Create,就可以開始創(chuàng)作了。 PixVerse目前有文案生成視頻,和圖片生...
就能快速生成一幅極具藝術(shù)效果的作品,讓現(xiàn)實中不懂繪畫的人也能參與其中創(chuàng)作!真的超贊噠~趣趣分享幾款超厲害的AI繪畫軟件,提供詳細操作!有需要的快來...
最新文章
同學(xué)您好!