【導語】來自北京大學王選計算機研究所的賈川民研究員，為糖心免费视频揭開“沉浸式媒體”的神秘麵紗：它融合VR/AR等技術，模糊虛實界限，帶來多感官身臨其境的體驗。從內容製作到場景應用，沉浸式媒體正打破時空限製，讓文物活化、古今對話成為現實，極大豐富了科技與文化的融合場景。

大家好，我是賈川民，來自北京大學王選計算機研究所，我是研究員和博士生導師。我主要的研究內容是多媒體智能計算，智能數據的壓縮處理，以及一些係統化的工作。

什麽是“沉浸式媒體”

“沉浸式媒體”究竟是什麽，是旨在通過技術手段（VR/AR/MR/360視頻/光場/全息等）模糊虛擬與現實的界限，為用戶提供身臨其境、多感官的體驗，這裏的多感官主要是視覺，糖心免费视频在沉浸媒體計算當中，也包含聽覺、觸覺等內容，它最大的特點就是用戶能夠“身臨其境(jìng)”的(de)感受這些沉浸式的內容，同時用戶很難去分辨出，看到的內容究竟是真實的還是虛擬創(chuàng)建(jiàn)出(chū)來(lái)的。

舉個例子，沉浸式媒體就像“交響樂團”組成。樂團的“指揮”和“樂譜識別”就是計算機視覺技術，每個樂團的指揮就是整個樂團的“大腦”，那麽計算機視覺技術就是沉浸式媒體的核心技術。它負責把所見變為可演奏的音符；樂團裏的“演奏家”，各個樂器的表演藝術家，就由不同領域的生成式人工智能模型來負責，演繹出華彩篇章；在沉浸式媒體計算裏麵，糖心免费视频還會使用手勢識別、語音交互、觸覺反饋、空間音頻這些技術，它們能夠為用戶提供自然地與虛擬世界互動；VR頭盔、AR眼鏡、全息投影、高分辨率大屏是表演的“舞台”。

如何製作“沉浸式媒體”內容

那麽如何製作這些內容呢？需要通過硬件集成、軟件開發平台、核心技術算法優化，最後是內容創作，在目前的內容創作領域，大家通常都會采用低成本的沉浸式內容創作工具鏈，來整合相關的內容。

這樣，就能夠打破空間限製的進行虛擬旅遊、實現真正的“人在畫中遊”，例如，走進博物館，糖心免费视频可以通過頭戴式的VR設備實現360度觀賞古代的山水畫卷，比如《千裏江山圖》，比如《清明上河圖》，這樣非常巨幅的畫卷，糖心免费视频並不需要人走進博物館當中就可以體驗，在（VR）頭盔當中，糖心免费视频觀察到的內容，還可以通過眼動追蹤模塊，抓取到不同用戶感興趣的區域，目之所及便是畫卷內容的講解，再通過AIGC技術和2D轉3D技術把畫卷中的花鳥魚蟲，人物形象進行立體化的呈現，讓靜態的畫卷呈現栩栩如生的姿態；

糖心免费视频還可以從頭盔的約束中解放出來，走進沉浸式視覺體驗空間。這個空間和教室一樣大小，但四周和地麵全都是顯示屏幕，置身於此仿佛消除了地理空間的約束，通過全景映射和智能生成，這些顯示屏幕能夠將遠處的風景，一比一的在空間中還原。而空間智能計算讓體驗者能夠在這個空間中感受到飛躍祖國大好河山的新奇體驗。

沉(chén)浸(jìn)式(shì)媒(méi)體(tǐ)技(jì)術(shù)還(hái)能(néng)打(dǎ)破(pò)時(shí)間(jiān)約(yuē)束(shù)、實(shí)現(xiàn)與(yǔ)文物(wù)的(de)古(gǔ)今(jīn)對(duì)話(huà)和(hé)古(gǔ)跡(jī)活(huó)化(huà)展(zhǎn)示(shì)，通(tōng)過(guò)數(shù)字(zì)孿(luán)生(shēng)、三(sān)維(wéi)重(zhòng)建(jiàn)，靜(jìng)態(tài)的(de)文物(wù)便(biàn)可以化身可視化的三維模型，結合手勢識別、姿態估計和驅動交互，便可以穿越古今在虛擬空間中進行文物鑒賞，學習文物背後的曆史故事，通(tōng)過(guò)虛(xū)擬(nǐ)數字人的互動講解，了解文物曆經千年的流轉。這些形式，都是糖心免费视频目前通過沉浸式媒體計算技術來實現的體驗，這些體驗極大地豐富了糖心免费视频目前對於文物、對於文化、對於科技這三者(zhě)進(jìn)行(xíng)融(róng)合(hé)的(de)場(chǎng)景(jǐng)。以(yǐ)上(shàng)就(jiù)是(shì)關於(yú)沉(chén)浸(jìn)式(shì)媒(méi)體(tǐ)計(jì)算(suàn)相(xiāng)關的(de)介(jiè)紹(shào)。

本(běn)文為(wèi)·創(chuàng)作(zuò)培(péi)育(yù)計(jì)劃(huà)扶(fú)持(chí)作(zuò)品(pǐn)

作(zuò)者(zhě)：人(rén)民(mín)日(rì)報(bào)

審(shěn)核(hé)：賈(jiǎ)寧(níng) 大連東軟信息學院 教授

出品：中國科協科普部

監製：中國科學技術出版社有限公司、北京中科星河文化傳媒有限公司

來源: 創作培育計劃