火星網(wǎng)校
或許是最有商業(yè)價(jià)值的AI，谷歌發(fā)布VideoPoet，可從0直接生成視頻
發(fā)布時(shí)間：2024-04-01 10:16:11 瀏覽量：146次
今年無疑是生成式AI最火爆的一年，文字對(duì)話有ChatGPT、Gemini等，圖片生成有midjourney、DALL-E等，在這之后不少廠商將目光投入到了生成式AI的最后一個(gè)關(guān)卡——視頻生成。如今看來，這一領(lǐng)域也出現(xiàn)了突破，那就是這款名為VideoPoet的大語言模型。
據(jù)了解，這款名為VideoPoet的大語言模型之所以被認(rèn)為是從0生成視頻的革命性視頻生成工具，主要就在于它不僅可以以文生視頻、以圖像生成視頻，還能根據(jù)需要進(jìn)行風(fēng)格遷移也就是將一種風(fēng)格的視頻轉(zhuǎn)換到另外一種風(fēng)格，根據(jù)文本指令的提示進(jìn)行交互式視頻編輯，可能會(huì)給視頻剪輯工作帶來非常大的變革。
不僅如此，VideoPoet還能生成音頻，并能通過調(diào)節(jié)視頻的最后一秒預(yù)測并生成之后的一秒，并且能夠通過重復(fù)這一過程來生成任意時(shí)長的視頻，至于擴(kuò)展視頻就更不在話下，而這在視頻修復(fù)、視頻視頻擴(kuò)展方面有著非常重要的意義。
更令人眼前一亮的是，為了展示 VideoPoet 的功能，谷歌還制作了一部由 VideoPoet 生成的多個(gè)短片組成的小短片。劇本由接入了Gemini的Bard編寫，整體式一個(gè)關(guān)于關(guān)于一只旅行浣熊的短篇故事，并附有逐個(gè)場景的分解和附帶的提示列表。然后，谷歌為每個(gè)提示生成視頻剪輯，并將所有生成的剪輯拼接在一起以生成下面的最終視頻。
VideoPoet生成視頻的部分截圖
相關(guān)研究團(tuán)隊(duì)將VideoPoet與其他視頻生成模型進(jìn)行了對(duì)比，用各種參數(shù)來評(píng)估VideoPoet在文本生成視頻方面的表現(xiàn)，受訪者認(rèn)為VideoPoet中約24-35%的示例比競爭模型更好，而競爭模型的這一比例為8-11%。由于VideoPoet生成視頻的動(dòng)作更有趣，評(píng)分者對(duì)VideoPoet提供示例41-54%表示了喜歡，而其他模型的這一比例則只有11-21%。
不難看出，VideoPoet不僅性能不錯(cuò)，還在視頻制作、剪輯、修復(fù)等多個(gè)方面具有非常實(shí)際的作用，或許會(huì)成為補(bǔ)全生成式AI的最后一環(huán)。
不過如果以后在視頻平臺(tái)上看到的都是AI生成的視頻，恐怕還是有點(diǎn)驚悚。
熱門課程推薦
熱門資訊
-
1. 照片變漫畫效果，這4個(gè)方法操作簡單有效，快來試試吧！
想將照片變成漫畫效果？這篇文章分享了4個(gè)方法，包括Photoshop、聰明靈犀、VanceAI Toongineer、醒圖，簡單操作就能實(shí)現(xiàn)，快來嘗試一下吧！
-
2. 華為手機(jī)神奇“AI修圖”功能，一鍵消除衣服！原圖變身大V領(lǐng)深V！
最近華為手機(jī)Pura70推出的“AI修圖”功能引發(fā)熱議，通過簡單操作可以讓照片中的人物換裝。想了解更多這款神奇功能的使用方法嗎？點(diǎn)擊查看！
-
近年來,人工智能逐漸走入公眾視野,其中的AI圖像生成技術(shù)尤為引人注目。只需在特定軟件中輸入關(guān)鍵詞描述語以及上傳參考圖就能智能高效生成符合要求的...
-
4. AI視頻制作神器Viggle：讓靜態(tài)人物動(dòng)起來，創(chuàng)意無限！
Viggle AI是一款免費(fèi)制作視頻的AI工具，能讓靜態(tài)人物圖片動(dòng)起來，快來了解Viggle AI的功能和優(yōu)勢吧！
-
5. Logo Diffusion——基于sd繪畫模型的AI LOGO 生成器
這下LOGO設(shè)計(jì)徹底不用求人了。接下來詳細(xì)演示一遍操作流程首先進(jìn)入Logo D... 想學(xué)習(xí)更多AI技能,比如說關(guān)于怎么樣利用AI來提高生產(chǎn)效率、還能做什么AI...
-
6. 零基礎(chǔ)10分鐘生成漫畫，教大家如何用AI生成自己的漫畫
接下來,我將親自引導(dǎo)你,使用AI工具,創(chuàng)作一本既有趣又能帶來盈利的漫畫。我們將一起探索如何利用這個(gè)工具,發(fā)揮你的創(chuàng)意,制作出令人驚嘆的漫畫作品。讓...
-
7. 趕緊收藏好!這4個(gè)完全免費(fèi)的AI視頻制作網(wǎng)站和工具
以下是一些免費(fèi)的AI視頻制作網(wǎng)站或工具,幫助您制作各種類型的視頻。 1. Lumen5:Lumen5是一個(gè)基于AI的視頻制作工具,可將文本轉(zhuǎn)換為視頻。 用戶可以使...
-
8. AI顯卡繪畫排行榜:4090無懸念，最具性價(jià)比出人意料
在AI繪圖領(lǐng)域，Stable Diffusion的顯卡繪圖性能備受關(guān)注。本文整理了Stable Diffusion顯卡的硬件要求和性能表現(xiàn)，以及2023年3月顯卡AI繪圖效率排行榜和性價(jià)比排行榜。歡迎查看最新的AI顯卡算力排行榜。
-
9. 一款免費(fèi)無限制的AI視頻生成工具火了!國內(nèi)無障礙訪問!附教程
人人都可以動(dòng)手制作AI視頻! 打開網(wǎng)址https://pixverse.ai/,用郵箱注冊(cè)后,點(diǎn)擊右上角Create,就可以開始創(chuàng)作了。 PixVerse目前有文案生成視頻,和圖片生...
-
就能快速生成一幅極具藝術(shù)效果的作品,讓現(xiàn)實(shí)中不懂繪畫的人也能參與其中創(chuàng)作!真的超贊噠~趣趣分享幾款超厲害的AI繪畫軟件,提供詳細(xì)操作!有需要的快來...
最新文章
