火星網(wǎng)校
虛幻5再次炸場(chǎng)!1部iPhone搞定3A大作動(dòng)捕，網(wǎng)友:游戲行業(yè)要變天
發(fā)布時(shí)間：2024-01-05 16:16:12 瀏覽量：122次
Pine 魚(yú)羊 發(fā)自 凹非寺
量子位 | 公眾號(hào) QbitAI
什么樣的新技術(shù)，能在ChatGPT的包圍圈里脫穎而出火爆全場(chǎng)？
一部iPhone，兩分鐘，真人大變數(shù)字人！
還是表情動(dòng)態(tài)、眼神細(xì)節(jié)一比一還原的那種。
沒(méi)錯(cuò)，動(dòng)作捕捉視頻，發(fā)布會(huì)現(xiàn)場(chǎng)iPhone錄制，后期處理全過(guò)程也都當(dāng)場(chǎng)完成。
在此之前，這位《地獄之刃》女主演經(jīng)歷的動(dòng)捕都是醬嬸的：
復(fù)雜的設(shè)備必不可少，而且不僅要在臉上標(biāo)滿定位點(diǎn)，后期花費(fèi)的時(shí)間也還得長(zhǎng)達(dá)幾周甚至數(shù)月。
這不，Epic剛把虛幻引擎5這一新能力公布出來(lái)，網(wǎng)友們都炸了鍋了，相關(guān)視頻播放量迅速突破百萬(wàn)。
“現(xiàn)場(chǎng)”氛圍嘛，總結(jié)起來(lái)就是一通操作猛如虎，網(wǎng)友直呼太瘋狂：
（實(shí)現(xiàn)面部建模）從幾個(gè)月到幾分鐘，未來(lái)幾年游戲的發(fā)展必定是瘋狂的。
還有網(wǎng)友表示，以后再也不能說(shuō)什么眼見(jiàn)為真了。
三幀視頻就能生成3D模型
具體來(lái)看看，這一名為“MetaHuman Animator”的騷操作，究竟是如何做到兩分鐘搞定面部動(dòng)捕的。
以現(xiàn)場(chǎng)演示為例。首先，演員要錄制一段視頻，期間可以做出任何表情?？梢允强鋸埖膽嵟?/p>
也可以是細(xì)小的眼神變化：
并且錄制全程只需一部iPhone。
接下來(lái)，技術(shù)人員將錄制好的視頻上傳到軟件，整個(gè)處理過(guò)程都是在本地進(jìn)行。
總結(jié)下來(lái)，處理過(guò)程分為兩步：
1、最新版本的Live Link Face應(yīng)用程序會(huì)盡可能用最佳的分辨率捕獲所有面部動(dòng)態(tài)；
2、MetaHuman Animator使用視頻和Dev數(shù)據(jù)將其轉(zhuǎn)換成高保真的動(dòng)畫(huà)。
在這個(gè)過(guò)程中，先是用Live Link Face對(duì)演員的視頻進(jìn)行面部動(dòng)作捕捉。
完成面捕之后，只需要三幀視頻 （正面、左側(cè)面、右側(cè)面）就能生成演員的“元人類DNA”。
其中用到的算法是定制版面部特征算法，生成的過(guò)程只要幾秒鐘。
這樣一來(lái)，所有的面部數(shù)據(jù)都會(huì)被標(biāo)定，還原出剛剛視頻錄制中的面部表情也就更加容易了。
更重要的是，在這個(gè)過(guò)程中，可以將真人視頻與生成的建模視頻進(jìn)行逐幀比較。
然后等幾分鐘不到，完整的動(dòng)畫(huà)視頻就成功生成了，最終工作人員要做的就只有微調(diào)和導(dǎo)入音頻。
在新應(yīng)用的加持下，做到下圖這樣的效果，對(duì)于工作人員來(lái)說(shuō)也是信手拈來(lái)。
算法細(xì)節(jié)上，Epic是采用自家“面部求解器”和“標(biāo)志檢測(cè)器”來(lái)確定視頻中人物面部的關(guān)鍵操作點(diǎn)。
利用這些關(guān)鍵點(diǎn)，基于語(yǔ)義空間解決方案，AI會(huì)將每一幀視頻映射到“n維人類空間”數(shù)據(jù)庫(kù)中的最近鄰居上。
這個(gè)所謂“n維人類空間”，是Epic在多年來(lái)收集到的詳細(xì)面部捕捉數(shù)據(jù)的基礎(chǔ)上，挑選打磨過(guò)的龐大數(shù)據(jù)庫(kù)，包含頭部各個(gè)部位的各種運(yùn)動(dòng)姿態(tài)。
網(wǎng)友：3D動(dòng)畫(huà)和游戲都要變天了
Epic這波炸場(chǎng)，算是給最近被AI大浪沖擊得恍恍惚惚的人類，又添了一點(diǎn)刺激。
有metahuman領(lǐng)域的網(wǎng)友就說(shuō)“3D動(dòng)畫(huà)和游戲都要變天了”：
幾個(gè)月前用iPhone還只能捕捉到大致的面部肌肉控制。
不過(guò)，相比于各種“失業(yè)”現(xiàn)場(chǎng)，對(duì)于這項(xiàng)技術(shù)，更多人樂(lè)見(jiàn)其成。
有網(wǎng)友表示，有了這項(xiàng)技術(shù)之后，開(kāi)發(fā)人員直接效率翻倍，能夠節(jié)省太多時(shí)間，要做的就只有后期潤(rùn)色。
還有網(wǎng)友已經(jīng)在期待電影制作人使用這項(xiàng)技術(shù)了：
Epic自己則說(shuō)，新的MetaHuman Animator有利于“復(fù)雜角色技術(shù)的民主化”。并表示這項(xiàng)新技術(shù)有望在今年夏天更廣泛地推出。
那么，你期待嗎？
參考鏈接：
[1] https://www.unrealengine.com/en-US/blog/new-metahuman-animator-feature-set-to-bring-easy-high-fidelity-performance-capture-to-metahumans
[2] https://www.youtube.com/watch?v=pnaKyc3mQVk
[3]https://arstechnica.com/gaming/2023/03/epics-new-motion-capture-animation-tech-has-to-be-seen-to-be-believed/
— 完 —
量子位 QbitAI · 頭條號(hào)簽約
關(guān)注我們，第一時(shí)間獲知前沿科技動(dòng)態(tài)
熱門課程推薦
熱門資訊
-
探討游戲引擎的文章，介紹了10款游戲引擎及其代表作品，涵蓋了RAGE Engine、Naughty Dog Game Engine、The Dead Engine、Cry Engine、Avalanche Engine、Anvil Engine、IW Engine、Frostbite Engine、Creation引擎、Unreal Engine等引擎。借此分析引出了游戲設(shè)計(jì)領(lǐng)域和數(shù)字藝術(shù)教育的重要性，歡迎點(diǎn)擊咨詢報(bào)名。
-
2. 手機(jī)游戲如何開(kāi)發(fā)(如何制作傳奇手游，都需要準(zhǔn)備些什么？)
?如何制作傳奇手游，都需要準(zhǔn)備些什么？提到傳奇手游相信大家都不陌生，他是許多80、90后的回憶；從起初的端游到現(xiàn)在的手游，說(shuō)明時(shí)代在進(jìn)步游戲在更新，更趨于方便化移動(dòng)化。而如果我們想要制作一款傳奇手游的
-
3. B站視頻剪輯軟件「必剪」：免費(fèi)、炫酷特效，小白必備工具
B站視頻剪輯軟件「必剪」，完全免費(fèi)、一鍵制作炫酷特效，適合新手小白。快來(lái)試試！
-
4. Steam值得入手的武俠游戲盤(pán)點(diǎn)，各具特色的快意江湖
游戲中玩家將面臨武俠人生的掙扎抉擇,戰(zhàn)或降?殺或放?每個(gè)抉定都將觸發(fā)更多愛(ài)恨糾葛的精彩奇遇。《天命奇御》具有多線劇情多結(jié)局,不限主線發(fā)展,高自由...
-
5. Bigtime加密游戲經(jīng)濟(jì)體系揭秘，不同玩家角色的經(jīng)濟(jì)活動(dòng)
Bigtime加密游戲經(jīng)濟(jì)模型分析，探討游戲經(jīng)濟(jì)特點(diǎn)，幫助玩家更全面了解這款GameFi產(chǎn)品。
-
6. 3D動(dòng)畫(huà)軟件你知道幾個(gè)?3ds Max、Blender、Maya、Houdini大比拼
當(dāng)提到3D動(dòng)畫(huà)軟件或動(dòng)畫(huà)工具時(shí),指的是數(shù)字內(nèi)容創(chuàng)建工具。它是用于造型、建模以及繪制3D美術(shù)動(dòng)畫(huà)的軟件程序。但是,在3D動(dòng)畫(huà)軟件中還包含了其他類型的...
-
7. 3D動(dòng)漫建模全過(guò)程，不是一般人能學(xué)的會(huì)的，會(huì)的多不是人?
步驟01:面部,頸部,身體在一起這次我不準(zhǔn)備設(shè)計(jì)圖片,我從雕刻進(jìn)入。這一次,它將是一種純粹關(guān)注建模而非整體繪畫(huà)的形式。像往常一樣,我從Sphere創(chuàng)建它...
-
8. 如何自己開(kāi)發(fā)一款游戲(游戲開(kāi)發(fā)入門必看：五大獨(dú)立游戲開(kāi)發(fā)技巧)
?游戲開(kāi)發(fā)入門必看：五大獨(dú)立游戲開(kāi)發(fā)技巧無(wú)論您是剛剛起步開(kāi)發(fā)自己的第一款游戲，還是已經(jīng)制作了幾款游戲，本篇文章中的5大獨(dú)立游戲開(kāi)發(fā)技巧都可以幫助您更好地設(shè)計(jì)下一款游戲。無(wú)論你對(duì)游戲有著什么樣的概念，都
-
9. 開(kāi)發(fā)三昧游戲叫什么(三昧動(dòng)漫)
?三昧動(dòng)漫對(duì)于著名ARPG游戲《巫師》系列，最近CD Projekt 的高層回應(yīng)并不會(huì)推出《巫師4》。因?yàn)椤段讕煛废盗性诓邉澋臅r(shí)候一直定位在“三部曲”的故事框架，所以在游戲的出品上不可能出現(xiàn)《巫師4》
-
10. 3D打印技巧揭秘！Cura設(shè)置讓你的模型更堅(jiān)固
想讓你的3D打印模型更堅(jiān)固？不妨嘗試一下Cura參數(shù)設(shè)置和設(shè)計(jì)技巧，讓你輕松掌握！
最新文章
