火星網(wǎng)校
OpenAI視頻生成模型Sora，一句文本描述即可生成視頻，內(nèi)容太魔幻
發(fā)布時間：2024-03-28 12:56:15 瀏覽量：170次
OpenAI視頻生成模型Sora，一句文本描述即可生成視頻，內(nèi)容太魔幻
春節(jié)還未開工的2月15日，OpenAI 正式發(fā)布了文本到視頻生成模型 Sora，繼 Runway、Pika、谷歌和 Meta 之后，OpenAI 終于加入視頻生成領(lǐng)域的戰(zhàn)爭。現(xiàn)在各大廠都在自己造！
OpenAI這次推出創(chuàng)新性文生視頻模型Sora，可根據(jù)文本生成60秒視頻。
以下是官方介紹：
Sora 能夠生成具有多個角色、特定類型的運動以及主體和背景的準確細節(jié)的復雜場景。該模型不僅了解用戶在提示中提出的要求，還了解這些東西在物理世界中的存在方式。
該模型對語言有深入的理解，使其能夠準確地解釋提示并生成引人注目的字符來表達充滿活力的情感。Sora 還可以在單個生成的視頻中創(chuàng)建多個鏡頭，準確地保留角色和視覺風格。
但是官方也講了：
當前的模型存在弱點。它可能難以準確模擬復雜場景的物理原理，并且可能無法理解因果關(guān)系的具體實例。例如，吹蠟燭前后的燭火毫無變化。
該模型還可能會混淆提示的空間細節(jié)，例如混淆左右，并且可能難以精確描述隨著時間推移發(fā)生的事件，例如遵循特定的相機軌跡。
Sora 建立在過去 DALL?E 和 GPT 模型的研究基礎(chǔ)之上。它采用了 DALL?E 3 中的重述技術(shù)，即為視覺訓練數(shù)據(jù)生成高度描述性的字幕。因此，該模型能夠在生成的視頻中更忠實地遵循用戶的文字提示。
除了能夠僅根據(jù)文字說明生成視頻外，該模型還能根據(jù)現(xiàn)有的靜態(tài)圖像生成視頻，并準確、細致地對圖像內(nèi)容進行動畫處理。該模型還能提取現(xiàn)有視頻，并對其進行擴展或填充缺失的幀。
雖然看起來不錯但是文本轉(zhuǎn)視頻技術(shù)要真正威脅到傳統(tǒng)電影制作，可能還需要很長時間夫。
附幾張sora生成視頻的動圖
熱門課程推薦
熱門資訊
-
想將照片變成漫畫效果？這篇文章分享了4個方法，包括Photoshop、聰明靈犀、VanceAI Toongineer、醒圖，簡單操作就能實現(xiàn)，快來嘗試一下吧！
-
2. 華為手機神奇“AI修圖”功能，一鍵消除衣服！原圖變身大V領(lǐng)深V！
最近華為手機Pura70推出的“AI修圖”功能引發(fā)熱議，通過簡單操作可以讓照片中的人物換裝。想了解更多這款神奇功能的使用方法嗎？點擊查看！
-
近年來,人工智能逐漸走入公眾視野,其中的AI圖像生成技術(shù)尤為引人注目。只需在特定軟件中輸入關(guān)鍵詞描述語以及上傳參考圖就能智能高效生成符合要求的...
-
4. AI視頻制作神器Viggle：讓靜態(tài)人物動起來，創(chuàng)意無限！
Viggle AI是一款免費制作視頻的AI工具，能讓靜態(tài)人物圖片動起來，快來了解Viggle AI的功能和優(yōu)勢吧！
-
5. Logo Diffusion——基于sd繪畫模型的AI LOGO 生成器
這下LOGO設(shè)計徹底不用求人了。接下來詳細演示一遍操作流程首先進入Logo D... 想學習更多AI技能,比如說關(guān)于怎么樣利用AI來提高生產(chǎn)效率、還能做什么AI...
-
6. 零基礎(chǔ)10分鐘生成漫畫，教大家如何用AI生成自己的漫畫
接下來,我將親自引導你,使用AI工具,創(chuàng)作一本既有趣又能帶來盈利的漫畫。我們將一起探索如何利用這個工具,發(fā)揮你的創(chuàng)意,制作出令人驚嘆的漫畫作品。讓...
-
7. 趕緊收藏好!這4個完全免費的AI視頻制作網(wǎng)站和工具
以下是一些免費的AI視頻制作網(wǎng)站或工具,幫助您制作各種類型的視頻。 1. Lumen5:Lumen5是一個基于AI的視頻制作工具,可將文本轉(zhuǎn)換為視頻。 用戶可以使...
-
8. AI顯卡繪畫排行榜:4090無懸念，最具性價比出人意料
在AI繪圖領(lǐng)域，Stable Diffusion的顯卡繪圖性能備受關(guān)注。本文整理了Stable Diffusion顯卡的硬件要求和性能表現(xiàn)，以及2023年3月顯卡AI繪圖效率排行榜和性價比排行榜。歡迎查看最新的AI顯卡算力排行榜。
-
9. 一款免費無限制的AI視頻生成工具火了!國內(nèi)無障礙訪問!附教程
人人都可以動手制作AI視頻! 打開網(wǎng)址https://pixverse.ai/,用郵箱注冊后,點擊右上角Create,就可以開始創(chuàng)作了。 PixVerse目前有文案生成視頻,和圖片生...
-
就能快速生成一幅極具藝術(shù)效果的作品,讓現(xiàn)實中不懂繪畫的人也能參與其中創(chuàng)作!真的超贊噠~趣趣分享幾款超厲害的AI繪畫軟件,提供詳細操作!有需要的快來...
最新文章
