作者:無心亦鋼筆
發(fā)布時間: 2025-05-11 19:22:14
瀏覽量:407次
虛擬現(xiàn)實制作技術(shù)作為當(dāng)下極具顛覆性的科技力量,正以強大的魔力重塑著廣播電視和網(wǎng)絡(luò)視聽等行業(yè)的版圖,打破了傳統(tǒng)視聽的邊界,讓觀眾得以踏入沉浸式、交互式的奇幻體驗空間。
2024年11月18日,國家廣播電視總局發(fā)布《廣播電視和網(wǎng)絡(luò)視聽虛擬現(xiàn)實制作技術(shù)應(yīng)用示范名單》,包含10個項目,這里針對10個示范項目的技術(shù)特色與亮點進行詳細(xì)梳理,剖析它們?nèi)绾吻擅钸\用虛擬現(xiàn)實制作技術(shù),在融媒創(chuàng)作、沉浸式體驗、虛擬拍攝等諸多方面實現(xiàn)創(chuàng)新突破。
這里仔仔發(fā)現(xiàn),所有應(yīng)用示范項目所用到的技術(shù),如虛擬展廳、虛擬拍攝、全景直播、4K+AI、數(shù)字人、空間計算等等,火星均有對應(yīng)專業(yè)!可以完全匹配相應(yīng)崗位的技術(shù)需求。甚至我們部分已經(jīng)畢業(yè)的同學(xué),早就在示范應(yīng)用名單的企業(yè)中工作了。
來具體看看都有哪些虛擬現(xiàn)實制作技術(shù)應(yīng)用上榜了吧:
一、杭州趣看科技有限公司-融媒創(chuàng)作空間
杭州趣看科技有限公司的融媒創(chuàng)作空間采用創(chuàng)新的“1+n”一體化模式,即一個空間能夠同時滿足多個內(nèi)容創(chuàng)作室的功能需求。(一)5G+4K+VR全時直播系統(tǒng)
全時直播系統(tǒng)作為云端專業(yè)慢直播“利器”,提供一體化服務(wù),VR全景直播系統(tǒng)功能強大,制播一體機可以實現(xiàn)4K超高清VR直播與短視頻制作;4K超高清直播系統(tǒng)又借助5G和采編錄播一體機傳輸高清畫面至云端;而移動直播+互動連線系統(tǒng)低門檻、低延時、高安全。
在珠峰5000小時直播中,4K超高清VR慢直播讓媒體制作出珠峰絕美畫面,珠峰、北京、拉薩三地嘉賓通過移動直播臺進入互動連線房間,延時在200ms以內(nèi),真正實現(xiàn)遠(yuǎn)程溝通無障礙。
(二)三維虛擬演播室
該虛擬演播室具備全身動捕、數(shù)字人主播和超現(xiàn)實實時渲染等多種功能,其中全身動捕技術(shù)通過在操作人員身上設(shè)置多個傳感器,實時捕捉人體的運動數(shù)據(jù),然后將這些數(shù)據(jù)映射到數(shù)字人主播身上,使數(shù)字人主播能突破時空限制模擬人類動作進行播報主持;超現(xiàn)實實時渲染引擎則可以根據(jù)主播的動作和場景需求,實時改變相應(yīng)的背景光影效果、物體材質(zhì)等。數(shù)字人主播可應(yīng)用于既定的、機械繁瑣的新聞播報中,解放主持人、記者至更深度的新聞報道中去。
二、北京當(dāng)紅齊天國際文化科技發(fā)展集團有限公司-5G+XR沉浸式交互體驗新場景應(yīng)用示范
北京當(dāng)紅齊天國際文化科技發(fā)展集團有限公司集“XR內(nèi)容制作+載具研發(fā)+數(shù)字運營整體解決方案及產(chǎn)品落地”于一體,以“soreal”為國際文化科技品牌,是2022年北京冬奧會和冬殘奧會XR體驗提供方。
(一)5G網(wǎng)絡(luò)及SoReal CloudXR邊緣計算
SoReal Cloud XR采用“云邊端”架構(gòu),能夠在靠近用戶端部署邊緣計算,最大限度降低延遲,在保持VR用戶端設(shè)備輕便的前提下,利用5G網(wǎng)絡(luò)將優(yōu)秀的虛擬現(xiàn)實內(nèi)容帶給用戶。在2023年服貿(mào)會期間,兩位總臺記者分別在首鋼一高爐·SoReal科幻樂園和四川成都青白江元宇宙數(shù)字文旅產(chǎn)業(yè)園,借助SoReal Cloud XR邊緣計算,現(xiàn)場的高清視頻數(shù)據(jù)通過5G網(wǎng)絡(luò)快速傳輸?shù)竭吘売嬎愎?jié)點進行處理,然后將處理后的虛擬場景數(shù)據(jù)實時反饋到記者頭戴的VR設(shè)備中,實現(xiàn)了跨省異地同屏互動,這種體驗被總臺稱贊為“天花板”級虛擬現(xiàn)實新體驗。
(二)大容量、低時延能力的5G-A解決方案
當(dāng)紅齊天集團攜手中國移動、中興通訊、高通完成的室內(nèi)超密集沉浸式場景下的XR競技游戲應(yīng)用試點中,在1千平米的空間內(nèi),用戶無需背負(fù)沉重的背包設(shè)備,僅佩戴輕便的VR頭顯即可參與游戲。基于5G-A網(wǎng)絡(luò)提供的數(shù)十個用戶的實時百兆體驗速率和低于10ms的平均空口傳輸時延,用戶在移動過程中,虛擬游戲場景能夠?qū)崟r跟隨用戶視角變化,畫面清晰度達到業(yè)界主流4K@90fps的高品質(zhì)畫質(zhì),且響應(yīng)迅速,無卡頓現(xiàn)象。
△室內(nèi)超密集沉浸式場景下的XR應(yīng)用試點現(xiàn)場
(三)多種前沿技術(shù)融合
在廣西柳州打造的大型5G XR樂園——祥云SoReal螺樂園,將5G XR技術(shù)與柳州的古建筑相結(jié)合,利用自動化建模生產(chǎn)方式對古建筑進行數(shù)字化建模,通過5G云渲染將精美逼真的古建筑虛擬場景呈現(xiàn)給游客。大空間定位技術(shù)和先進傳感器技術(shù)實時追蹤游客在樂園中的位置和動作,游客乘坐VR載具時,VR交互系統(tǒng)根據(jù)游客的操作和動作,與虛擬場景中的元素(如虛擬導(dǎo)游、歷史人物等)進行互動。AI+技術(shù)根據(jù)游客的行為習(xí)慣和偏好,為游客提供個性化的體驗推薦。樂園還將“螺螄粉”文化、“螺螄”IP進行跨界融合,試營業(yè)期間獲得原外交部發(fā)言人華春瑩的點贊和轉(zhuǎn)發(fā)。
三、湖南廣播影視集團有限公司-芒果沉浸式XR虛擬現(xiàn)實內(nèi)容服務(wù)平臺
芒果沉浸式XR虛擬現(xiàn)實內(nèi)容服務(wù)平臺由湖南廣播影視集團打造,覆蓋綜藝、電影、電視劇、廣告、虛擬拍攝等多個領(lǐng)域。
(一)先進完備的硬件配置
采用高精度XR屏幕,其主要拍攝區(qū)域呈半環(huán)形結(jié)構(gòu),由弧形立面屏和地屏架構(gòu)組成,立屏長12米,高5米,地屏近60平米,縱深達6米。還配備諾瓦MX40Pro處理器、英國disguise虛擬渲染系統(tǒng)、Mosys追蹤系統(tǒng)、Sony高清演播室攝像機等設(shè)備,實現(xiàn)從圖像采集、處理到渲染輸出的高效流程,這種設(shè)備組合既能滿足高質(zhì)量電視節(jié)目制作需求,又達到了電影攝制的專業(yè)標(biāo)準(zhǔn)。(二)虛擬場景構(gòu)建
利用虛擬場景構(gòu)建技術(shù),結(jié)合海量的數(shù)字資產(chǎn)庫,能夠快速、準(zhǔn)確地根據(jù)節(jié)目或影視作品的需求創(chuàng)建各種虛擬場景。建模過程中,對場景中的物體、環(huán)境、紋理等元素進行精細(xì)設(shè)計和優(yōu)化,同時運用數(shù)字資產(chǎn)庫中的預(yù)設(shè)模型和素材,快速搭建復(fù)雜場景。在《恐龍博物館》演示場景中,技術(shù)團隊根據(jù)恐龍化石的形態(tài)、紋理等特征,以及博物館的實際布局和氛圍,利用虛擬場景構(gòu)建技術(shù)進行精細(xì)建模。對恐龍骨骼的紋理進行高精度掃描和建模,使其表面細(xì)節(jié)清晰可見;《跟著環(huán)塔看新疆》將沙漠場景搬進虛擬棚,融合使用LED超高清、XR虛擬拍攝、AIGC等技術(shù),成為芒果XR虛擬棚首個成功“入駐”棚內(nèi)的項目;以及大型晚會《萬疆》中呈現(xiàn)敦煌紋樣圓環(huán)、竹簡、書卷等元素構(gòu)成的不同場景等。
(三)實時互動與光學(xué)跟蹤系統(tǒng)
依托高精度的光學(xué)捕捉設(shè)備和實時數(shù)據(jù)傳輸技術(shù),演員能夠在虛擬場景中與虛擬數(shù)字人和資產(chǎn)進行流暢的實時互動,演員的每一個動作、表情都能即時反饋到虛擬場景中,使虛擬元素做出相應(yīng)的互動反應(yīng)。光學(xué)跟蹤系統(tǒng)采用先進的傳感器和定位算法,實時監(jiān)測拍攝設(shè)備(如攝像機)的位置和姿態(tài)變化,同時精確識別演員身上的標(biāo)識點,快速計算出演員在三維空間中的位置和姿態(tài)變化。拍攝動作場景時,演員的奔跑、跳躍、打斗等動作都能被精準(zhǔn)追蹤,虛擬場景中的物體(如武器、道具等)會根據(jù)演員的動作實時改變位置和狀態(tài),實現(xiàn)真實與虛擬的無縫對接。
四、深圳市奧拓電子股份有限公司-虛擬拍攝關(guān)鍵技術(shù)應(yīng)用示范
奧拓電子的業(yè)務(wù)范圍涵蓋金融科技、廣告營銷、文旅夜游、體育賽事等多個領(lǐng)域,產(chǎn)品暢銷全球多個國家和地區(qū),是全球智能視訊解決方案領(lǐng)域的重要提供商。
(一)RGBW技術(shù)
在傳統(tǒng)RGB技術(shù)架構(gòu)基礎(chǔ)上,增加白色LED燈珠,優(yōu)化了光譜的連續(xù)性,使光線更加均勻和自然。通過精確控制RGBW四種顏色燈珠的發(fā)光強度和比例,實現(xiàn)更廣闊的色域覆蓋和更高的亮度提升,避免了傳統(tǒng)RGB模式下在某些光照條件下容易出現(xiàn)的偏色問題。在實際拍攝對比中,傳統(tǒng)RGB模式下,打光效果cri≤50時容易出現(xiàn)偏色現(xiàn)象,而奧拓電子的RGBW模式cri≥90,更接近自然光。
△RGBW自然光源膚色質(zhì)感更真實
(二)超高刷新率與幀率
奧拓電子支持高達251Hz的高幀率視頻輸入,成功解決了因視頻源限制導(dǎo)致的圖像重影問題。其信號源倍頻功能采用先進的插值算法,能夠?qū)⒌蛶室曨l源提升至240Hz,在提升幀率的同時,對相鄰幀之間的圖像進行智能分析和補充,消除了低幀率屏幕顯示的閃爍問題。在拍攝高速運動場景時,如職業(yè)足球賽事直播或動作片拍攝中的激烈打斗場景,運動員的快速奔跑、傳球動作以及演員的打斗動作都能清晰呈現(xiàn),畫面流暢無拖影和閃爍現(xiàn)象。其7680Hz的刷新率遠(yuǎn)超通用LED顯示屏的3840Hz,在拍攝汽車追逐場景時,車輪轉(zhuǎn)動、車輛行駛軌跡以及周圍環(huán)境的細(xì)節(jié)都能清晰可見。這一技術(shù)優(yōu)勢也體現(xiàn)在眾多商業(yè)項目中,為蘋果、微軟、奈飛、亞馬遜、Meta、日本東映等企業(yè)的影視拍攝提供了高質(zhì)量保障。
△奧托電子的超高刷新率與幀率示意圖
(三)PWM打散技術(shù)
為了實現(xiàn)超高刷新率,奧拓電子還采用了PWM打散技術(shù)。將影像導(dǎo)通時間分散成多個較短導(dǎo)通時間,同時確保每個打散的等份相加可維持原先未打散前的LED芯片導(dǎo)通比例。這種方式在不改變灰度等級的前提下,將刷新率提高到7680Hz,有效減少了畫面在顯示過程中的閃爍和噪點。在拍攝微觀場景或精細(xì)畫面時,如高端珠寶展示或珍貴文物拍攝,PWM打散技術(shù)能夠細(xì)膩地呈現(xiàn)珠寶的每一個細(xì)節(jié)。鉆石的切割面反射出的光芒、寶石內(nèi)部的紋理和雜質(zhì)等都能清晰可見,光影過渡自然平滑;在拍攝夜景中的古建筑時,光影對比強烈,該技術(shù)可以使建筑的輪廓、屋檐的雕花、墻壁的質(zhì)感等細(xì)節(jié)在黑暗中依然清晰可辨,月光灑在古建筑上的光影效果、建筑周圍樹木的陰影以及遠(yuǎn)處燈光的微弱光暈等都能自然呈現(xiàn)。
△LED顯示屏灰度等級
五、利亞德光電股份有限公司牽頭的-基于實時渲染的虛擬拍攝引擎應(yīng)用示范
△《獅子王》電影使用OptiTrack技術(shù)跟蹤虛擬攝像機
圖片來源:《美國電影攝影師雜志》專欄
利亞德光電股份有限公司以基于實時渲染的虛擬拍攝引擎為核心,整合LED顯示屏與動捕系統(tǒng),可提供符合“好萊塢電影VP、XR虛擬拍攝標(biāo)準(zhǔn)”的拍攝場地,以及從劇本、美術(shù)設(shè)計、數(shù)字資產(chǎn),到影視預(yù)演,虛擬拍攝以及影視評審(LED放映廳)的“虛擬制片數(shù)字化工業(yè)化生產(chǎn)全流程”解決方案。
(一)LED與動捕系統(tǒng)深度融合
利亞德通過自主研發(fā)的高速數(shù)據(jù)傳輸鏈路和精準(zhǔn)同步算法,將LED顯示屏與動捕系統(tǒng)緊密連接。其采用的OptiTrack高精度光學(xué)動作捕捉技術(shù),利用多個高分辨率光學(xué)傳感器,以極高的頻率捕捉演員身上的標(biāo)識點的位置和運動軌跡,這些數(shù)據(jù)經(jīng)由高速數(shù)據(jù)傳輸線路實時傳輸至虛擬拍攝引擎。虛擬拍攝引擎憑借強大的計算能力,將這些數(shù)據(jù)轉(zhuǎn)化為虛擬場景中相應(yīng)元素的動作指令,從而實現(xiàn)虛擬場景與真實拍攝對象在動作、表情等方面的精準(zhǔn)同步互動。在虛擬場景中,演員駕駛汽車前行,汽車車身會依據(jù)虛擬背景的光影變化實時映射出相應(yīng)效果,若虛擬背景是烏云密布的惡劣天氣,汽車車身則會被渲染上陰沉的色調(diào),實現(xiàn)了虛擬背景與汽車之間的高度逼真互動。
(二)高精度虛擬場景構(gòu)建
在建模過程中,運用高精度的幾何建模技術(shù)確保場景中物體的形狀、比例和結(jié)構(gòu)精準(zhǔn)無誤,采用了細(xì)分曲面建模,使模型表面更加光滑和細(xì)膩。同時結(jié)合實地采集、高清掃描和數(shù)字繪制等多種手段獲取真實材質(zhì)的細(xì)節(jié)信息,并運用先進的材質(zhì)編輯工具進行精細(xì)調(diào)整,使虛擬場景中的材質(zhì)質(zhì)感與真實世界中的材質(zhì)幾乎無法區(qū)分。比如對于金屬材質(zhì),通過調(diào)整材質(zhì)的反射率、粗糙度等參數(shù),模擬出真實金屬的光澤和質(zhì)感。光影效果模擬技術(shù)可以根據(jù)不同的時間、天氣和地理環(huán)境條件,精確計算光線在場景中的傳播路徑、強度變化和色彩偏移,營造出極為逼真的光影氛圍。采用大氣散射模型,可以模擬出不同天氣條件下的光線散射效果。
(三)空間計算技術(shù)
利亞德虛擬動點構(gòu)建的“一體三核”發(fā)展戰(zhàn)略中,空間計算技術(shù)作為核心之一,涵蓋了光學(xué)計算、慣性計算、無標(biāo)記點識別計算等多項算法技術(shù)。光學(xué)計算通過對光信號的處理和分析,實現(xiàn)對物體位置和姿態(tài)的精確測量;慣性計算則利用慣性傳感器獲取物體的加速度和角速度信息,進而推算其運動狀態(tài);無標(biāo)記點識別計算采用先進的計算機視覺算法,對物體的特征點進行識別和跟蹤,無需額外的標(biāo)記物即可實現(xiàn)精準(zhǔn)定位。這些技術(shù)相互協(xié)作,實現(xiàn)了包括肢體、手勢、表情以及體積面積、位置關(guān)系、形態(tài)大小等人體、物體空間計算場景應(yīng)用。在游戲領(lǐng)域,為全球知名的游戲《2K》《使命召喚》以及國產(chǎn)3A游戲《黑神話?悟空》提供動作捕捉技術(shù)加持。在文旅領(lǐng)域,用全息數(shù)字人解決方案實現(xiàn)包括生成、驅(qū)動、渲染、呈現(xiàn)、互動五大能力,實現(xiàn)數(shù)字人多模式展示交互,為文旅演出提供助力。
△“全息數(shù)字人“多模式交互
六、成都影視硅谷集團有限公司牽頭的沉浸式體驗增強現(xiàn)實場景互動應(yīng)用示范
成都影視硅谷集團有限公司以影視產(chǎn)業(yè)為核心,依托四川傳媒學(xué)院,致力于打造集內(nèi)容創(chuàng)作、拍攝制作、宣傳發(fā)行等多功能于一體的綜合性影視產(chǎn)業(yè)平臺。
(一)三維重建
利用專業(yè)的三維掃描設(shè)備(如高精度激光掃描儀)對現(xiàn)實場景進行全面掃描,獲取物體表面的點云數(shù)據(jù),然后通過復(fù)雜的算法將這些點云數(shù)據(jù)轉(zhuǎn)化為三維模型。在“和美鄉(xiāng)村·恩陽古鎮(zhèn)影視城”項目中,精準(zhǔn)還原了古鎮(zhèn)建筑外觀、內(nèi)部結(jié)構(gòu)、街道石板路及店鋪招牌等細(xì)節(jié)。
(二)多模態(tài)虛實交互
集成多種交互方式,如語音、手勢等,在與四川傳媒學(xué)院合作的川傳VR虛擬交互大空間劇場項目中,玩家在體驗虛擬表演或游戲時,可以通過語音指令控制角色行動、查詢劇情信息,也可以使用手勢與虛擬物體進行交互,抓取虛擬道具、觸摸虛擬角色等。玩家還可以語音呼喊隊友、下達戰(zhàn)術(shù)指令,如“隊友,向左前方包抄”,同時用手勢操作武器和工具,與虛擬敵人進行戰(zhàn)斗。(三)產(chǎn)業(yè)集群優(yōu)勢
憑借成都影視城已建成的影視硅谷超高清創(chuàng)新中心、虛擬現(xiàn)實視聽技術(shù)創(chuàng)新應(yīng)用國家廣電總局實驗室、“1+16”攝影棚群落等80余萬平米產(chǎn)業(yè)載體,整合區(qū)域內(nèi)的優(yōu)質(zhì)企業(yè)資源。這些企業(yè)涵蓋了從拍攝設(shè)備提供、后期制作特效到創(chuàng)意策劃等影視產(chǎn)業(yè)鏈的各個環(huán)節(jié),通過資源共享、技術(shù)交流與合作,形成協(xié)同效應(yīng)。在參與出品的《我的父親焦裕祿》《公訴》《故鄉(xiāng)別來無恙》等多部影視作品中,能夠充分利用產(chǎn)業(yè)集群內(nèi)的專業(yè)設(shè)備、技術(shù)人才和創(chuàng)意資源。還吸引了姜文、黃曉明等知名導(dǎo)演、演員聚集發(fā)展,助力打造“全國一流、世界知名”的影視文創(chuàng)高地。
七、廣東廣播電視臺-4K虛擬制作創(chuàng)新應(yīng)用中心
廣東廣播電視臺的4K虛擬制作創(chuàng)新應(yīng)用中心涵蓋虛擬現(xiàn)實沉浸式體驗、虛擬數(shù)字人、數(shù)字孿生技術(shù)等多個應(yīng)用示范領(lǐng)域。
(一)4K超高清虛擬演播室
該演播室配備了先進的4K超高清攝像設(shè)備與圖像處理系統(tǒng),運用實時圖像識別與跟蹤技術(shù),能夠精準(zhǔn)定位虛擬元素與真實場景的位置關(guān)系。在2024年廣東省省長王偉中的新春賀詞錄制中,虛擬演播室依據(jù)賀詞內(nèi)容,快速切換展示廣東各地特色地標(biāo)建筑(廣州塔、汕頭小公園等)的虛擬背景,將發(fā)展成果數(shù)據(jù)以動態(tài)圖表形式融入其中。觀眾在觀看時,能清晰看到省長身后建筑的細(xì)節(jié)紋理,圖表數(shù)據(jù)的變化一目了然。
(二)虛擬數(shù)字人
數(shù)字人形象設(shè)計貼合Z世代審美,結(jié)合VR、AI、實時動捕等技術(shù)手段,粵語虛擬主播“悅小滿”能與真人主持人同臺搭檔,還可以通過多種方式與觀眾進行“跨次元”互動,在綜藝、直播中表現(xiàn)出色,并拓展至公益宣傳等多場景。
△慣性動捕設(shè)備&AH面捕頭盔
△粵語虛擬主播“悅小滿”能與真人主持人同臺搭檔
(三)4K節(jié)目制作
采用專業(yè)的4K拍攝設(shè)備,搭配先進的圖像傳感器與鏡頭,確保拍攝畫面的高清晰度與色彩還原度。在后期制作中,運用專業(yè)的圖像處理軟件(如達芬奇調(diào)色系統(tǒng)),對畫面進行精細(xì)調(diào)色、降噪與銳化處理,同時嚴(yán)格把控音頻質(zhì)量,采用環(huán)繞聲錄制與混音技術(shù),提升節(jié)目整體視聽效果。原創(chuàng)音樂節(jié)目《國樂大典》中,在拍攝古箏演奏時,4K技術(shù)清晰呈現(xiàn)出琴弦的細(xì)微顫動和琴身的紋理;紀(jì)錄片《通海夷道》里,海上絲綢之路的壯麗海景、沿線古跡的精美雕刻以及不同地域的人文風(fēng)情都以細(xì)膩畫面展現(xiàn)。
△《國樂大典》
(四)5G+4K+AI云上融媒平臺
基于5G+4K+AI技術(shù)的云上融媒制作曾獲2022年第十五屆中國電影電視技術(shù)學(xué)會科技進步獎一等獎。該平臺整合了5G的高速傳輸、4K的超高清畫質(zhì)和AI的智能處理能力,實現(xiàn)了融媒制作與分發(fā)的高效協(xié)同。通過AI智能分析算法對素材進行快速識別與分類,為編輯推薦合適剪輯片段;5G網(wǎng)絡(luò)確保素材在拍攝現(xiàn)場與制作中心之間的快速傳輸,實現(xiàn)團隊實時協(xié)作;在分發(fā)環(huán)節(jié),基于用戶畫像與終端設(shè)備信息,智能推送適配4K內(nèi)容。
八、優(yōu)酷信息技術(shù)(北京)有限公司-優(yōu)酷虛擬拍攝核心算法突破與能力建設(shè)
優(yōu)酷提供DIT、現(xiàn)場剪輯、調(diào)色等全鏈路虛擬拍攝解決方案,從為《緊急公關(guān)》提供的LED數(shù)字背景拍攝服務(wù),發(fā)展到實現(xiàn)2D到3D全景實時拍攝,成功將虛擬拍攝合成畫面現(xiàn)場調(diào)試時間從2小時銳減至20分鐘。
(一)快速調(diào)試與場景切換
優(yōu)酷自主研發(fā)的算法系統(tǒng)具備高效場景解析與適配能力,通過深度分析虛擬場景元素及拍攝參數(shù),快速完成場景初始化調(diào)試。在場景切換時,運用預(yù)加載和智能緩存技術(shù)提前準(zhǔn)備新場景關(guān)鍵數(shù)據(jù),實時動態(tài)調(diào)整拍攝設(shè)備參數(shù)(焦距、光圈、白平衡等),確保與新場景光照和視覺效果完美匹配,保障場景過渡流暢自然。以在周莊數(shù)字夢工廠的幀享數(shù)字影棚拍攝《清明上河圖密碼》為例,影棚內(nèi)設(shè)有高10米、弧長52米的巨型LED屏幕,拍攝過程中需要切換不同場景,從熱鬧的市井街道場景切換到幽靜的樹下雪景場景時,優(yōu)酷的技術(shù)能夠快速解析新場景元素,預(yù)加載雪景相關(guān)數(shù)據(jù),調(diào)整拍攝設(shè)備參數(shù)以適應(yīng)雪景的光照特點,降低亮度、調(diào)整白平衡營造寒冷氛圍,僅半天時間就高效完成了包含樹下雪景、日落湖邊等八大特殊場景的拍攝。
(二)數(shù)字人應(yīng)用創(chuàng)新及效益
通過AI構(gòu)建數(shù)字人模型,數(shù)字人具備自然流暢的動作、表情和語言能力。在與真人演員互動場景中,根據(jù)劇情和真人演員表演,實時驅(qū)動數(shù)字人做出相應(yīng)反應(yīng)。《異人之下》中的AI數(shù)字人厘里扮演二壯角色,為讓厘里更貼近角色,開啟“真人膚質(zhì)”設(shè)定,在與真人演員對話、并肩行走時,厘里的動作、表情自然流暢,眼神交流真實。僅其出場篇幅,就節(jié)省80%制作成本,縮短40%制作周期,開創(chuàng)數(shù)字人參演電視劇先例。
△AI數(shù)字人厘里亮相《異人之下》
九、深圳廣播電影電視集團-深圳廣電集團虛擬現(xiàn)實制作技術(shù)應(yīng)用示范
深圳廣電集團的虛擬現(xiàn)實制作技術(shù)應(yīng)用示范包括虛擬現(xiàn)實全景直播、點播應(yīng)用示范、生成式人工智能技術(shù)(AIGC)應(yīng)用示范、虛擬拍攝關(guān)鍵技術(shù)應(yīng)用示范。
(一)XR虛擬演播室
利用LED屏幕搭建演播空間,三維渲染引擎實時生成虛擬場景,通過定位與跟蹤系統(tǒng),實現(xiàn)虛擬與現(xiàn)實元素精準(zhǔn)互動,而圖像合成算法讓二者無縫融合。在總臺春晚、國家寶藏、中國詩詞大會等近百檔節(jié)目中成功應(yīng)用。央視也利用XR虛擬演播室技術(shù)進行臺風(fēng)天氣預(yù)報:
△現(xiàn)場演示積水深度
△一棵樹被臺風(fēng)刮倒,差點砸到主持人
△展示臺風(fēng)極端天氣如何準(zhǔn)備自救用品
(二)8K超高清XR+VP攝影棚
粵港澳超高清數(shù)創(chuàng)園區(qū)打造華南首個XR+VP雙流程超8K虛擬攝影棚,配備12K*4.5K高分辨率、97%以上DCI-P3廣色域的小間距P1.95mm LED顯示屏,結(jié)合“AI+5G+8K”技術(shù),8K實時渲染系統(tǒng)實現(xiàn)VP與XR拍攝無縫對接,追蹤與動捕系統(tǒng)保障精準(zhǔn)同步,其157平方米大面積和200°大弧度設(shè)計提供沉浸式靈活創(chuàng)作空間。以國內(nèi)首款3A大作《黑神話:悟空》為例,當(dāng)玩家在這個攝影棚中體驗該游戲時,得益于高分辨率和廣色域顯示屏,玩家能清晰看到孫悟空身上威風(fēng)凜凜的毛發(fā)根根分明,山石云霧的紋理粗糙又自然逼真,使玩家仿若身臨其境。
十、安徽廣電傳媒產(chǎn)業(yè)集團有限責(zé)任公司牽頭-合肥包河虛擬現(xiàn)實制作應(yīng)用示范
合肥包河虛擬現(xiàn)實制作實驗區(qū)依托“合肥國家廣播影視科技創(chuàng)新實驗基地”設(shè)立,擬開展增強現(xiàn)實場景互動應(yīng)用示范、虛擬現(xiàn)實全景直播、點播應(yīng)用示范、生成式人工智能技術(shù)(AIGC)應(yīng)用示范,綜合應(yīng)用三維建模、全局動態(tài)光照、虛擬現(xiàn)實場景等技術(shù)。(一)三維建模與動態(tài)光照技術(shù)
該技術(shù)含兩大核心部分,一是高精度三維建模,運用專業(yè)掃描設(shè)備采集物體點云數(shù)據(jù),再借算法“加工”成模型,其中AI輔助依預(yù)設(shè)風(fēng)格要求,自動優(yōu)化、補充細(xì)節(jié),構(gòu)建歷史建筑模型,能貼合其年代與類型特征,“生成”適配裝飾紋理、結(jié)構(gòu)細(xì)節(jié),提效增質(zhì)。二是動態(tài)光照模擬,依托物理渲染引擎,細(xì)算光線反射、折射、散射等,“還原”真實傳播路徑與效果,借實時全局光照算法,隨場景物體、材質(zhì)變動靈活調(diào)光照,模擬晝夜、晴雨光影。在文化遺產(chǎn)保護傳承層面,諸多瀕危古建筑、文物可借這技術(shù)留存“數(shù)字分身”。
(二)虛擬現(xiàn)實全景直播
集全景拍攝、傳輸與實時交互于一體,其全景拍攝靠多攝像頭陣列與高精度傳感器配合,抓取全方位畫面,經(jīng)圖像拼接算法“無縫”合成全景圖;傳輸借助高效編碼技術(shù)與高速網(wǎng)絡(luò)協(xié)議,讓全景視頻流暢達電腦、手機、VR設(shè)備等終端。實時交互依托實時數(shù)據(jù)處理、云計算,觀眾用手機或VR設(shè)備操作,自如切換視角,還能借物聯(lián)網(wǎng)融入現(xiàn)場實時數(shù)據(jù)。在傳統(tǒng)戲曲演出直播中,觀眾能近賞演員神情、服飾細(xì)節(jié),又可覽舞臺全景,助傳統(tǒng)文化廣傳播;商業(yè)產(chǎn)品發(fā)布會直播里,觀眾可以360度細(xì)察新品外觀、內(nèi)部構(gòu)造,企業(yè)設(shè)虛擬抽獎、試用環(huán)節(jié),創(chuàng)新營銷,提升轉(zhuǎn)化率。
(三)安徽數(shù)字文化科技產(chǎn)業(yè)園虛擬影棚
該影棚集成虛擬攝影棚、實景影棚、電影后期制作和視效創(chuàng)作等功能,虛擬攝影棚采用高分辨率LED顯示屏作為背景,通過實時渲染技術(shù)與攝像機跟蹤系統(tǒng)配合,實現(xiàn)虛擬場景與實拍畫面的實時合成。虛擬影棚作為一個綜合性的影視制作平臺,吸引眾多影視制作企業(yè)和專業(yè)人才入駐,形成了產(chǎn)業(yè)集聚效應(yīng)。
結(jié)語
綜上,這10個示范項目充分展現(xiàn)了虛擬現(xiàn)實制作技術(shù)在廣電行業(yè)的多元應(yīng)用與創(chuàng)新實踐。它們在不同方面各有所長,共同推動著行業(yè)的技術(shù)進步。期望在未來虛擬現(xiàn)實制作技術(shù)能為廣電行業(yè)帶來更多積極改變,為廣大觀眾提供更優(yōu)質(zhì)、豐富的視聽內(nèi)容,助力廣電行業(yè)在新時代穩(wěn)步發(fā)展,逐步構(gòu)建起更加完善的虛擬現(xiàn)實制作生態(tài)體系。
一 END 一
優(yōu)秀作品賞析
作 者:李思庭
所學(xué)課程:2101期學(xué)員李思庭作品
作 者:林雪茹
所學(xué)課程:2104期學(xué)員林雪茹作品
作 者:趙凌
所學(xué)課程:2107期學(xué)員趙凌作品
作 者:趙燃
所學(xué)課程:2107期學(xué)員趙燃作品
同學(xué)您好!