金逸樂

（上海廣播電視臺，上海，20000）

一、沉浸式體驗

沉浸式體驗是指當一個人的精神完全沉浸在某種行為或環(huán)境中給人帶來高度興奮感和充實感的體驗，心理學(xué)上稱之為心流。當今，虛擬現(xiàn)實技術(shù)可以根據(jù)需要創(chuàng)造出各種虛擬的環(huán)境，并通過佩戴設(shè)備讓人們沉浸在這種感官體驗之中。當受眾沉浸在這種體驗中時，他們與真實的世界將完全隔離，所產(chǎn)生的心流就會完全投入到構(gòu)建的虛擬環(huán)境中。沉浸式體驗產(chǎn)生的前提是需要佩戴VR設(shè)備，通過隔離體驗者現(xiàn)實感官，體驗由此時VR設(shè)備所帶來的虛擬視覺、聽覺、觸覺，這種虛擬體驗?zāi)軌蚪o受眾帶來愉悅和滿足，受眾也因此得到“沉浸式體驗” 。

二、沉浸式視覺體驗的特點

因為人們對外界信息的獲取主要是靠視覺來完成，所以沉浸式體驗主要以視覺體驗為主。由于這種沉浸式的視覺體驗會使人在虛擬的環(huán)境中產(chǎn)生強烈的滿足感，因此，沉浸式視覺體驗具有一些鮮明的辨識性特點。

1. 營造強烈的現(xiàn)實幻境

虛擬現(xiàn)實技術(shù)可以利用VR設(shè)備在人們面前展現(xiàn)出全方位的虛擬影像世界，并通過音效設(shè)備令人產(chǎn)生強烈的包圍感。在這種整體環(huán)境的營造下，參與者在幻境中會產(chǎn)生強烈的身份認同，達到身心深入其中的強烈效果。

2. 高度的真實性

虛擬現(xiàn)實技術(shù)所構(gòu)建出的虛擬環(huán)境對觀眾來說具有極強的真實性。這種真實性的感受不但在于內(nèi)容本身，還在于其他方面，例如，虛擬現(xiàn)實技術(shù)會在聽覺、觸覺、嗅覺等多方面讓觀眾產(chǎn)生真實感，讓觀眾的外在感知系統(tǒng)和內(nèi)在神經(jīng)系統(tǒng)都完全融入到VR設(shè)備所創(chuàng)建出的虛擬環(huán)境之中，形成沉浸式的視覺感受。

3. 突出的精神愉悅感

虛擬現(xiàn)實技術(shù)與AI技術(shù)融合所產(chǎn)生的沉浸式視覺體驗為體驗者帶來了獨特的視覺沖擊，產(chǎn)生的快感直接且猛烈，能夠使觀眾把全部的精神和感官毫無保留地投入到虛擬的世界中，進而產(chǎn)生其他藝術(shù)形式無法比擬的精神愉悅感。近年來，由于VR設(shè)備的使用日益廣泛和大眾化，這種視覺體驗的應(yīng)用范圍也更加廣泛，更多的人得以感受到虛擬現(xiàn)實技術(shù)帶來的美好體驗。例如，在觀看中國足球超級聯(lián)賽直播時，對我們來說視覺效果最好的位置是主席臺，而在虛擬現(xiàn)實的情況下，無論我們身在何處都可以清晰地看到比賽場景，也可以清晰地聽到賽場中的聲音，這就是沉浸式視覺體驗給我們帶來的獨特視覺效果。

三、三維融合技術(shù)打造沉浸式2.0視覺體驗的方式

這里所提出的運用三維融合（PQC+MR+AI）技術(shù)打造的沉浸式2.0視覺體驗是指在PQC質(zhì)量控制程序的管理模式下，應(yīng)用MR技術(shù)、輔以AI技術(shù)，專門為觀眾打造出的全方位、多角度的視覺體驗效果。它的應(yīng)用能夠提升新聞行業(yè)的播報水平，提高新聞內(nèi)容的表現(xiàn)力。三維融合（PQC+MR+AI）技術(shù)的具體內(nèi)容如下。

1. 制作質(zhì)量管理（Production Quality Control）

制作質(zhì)量管理是指在節(jié)目制作的基礎(chǔ)上，以觀眾的視覺需求為切入點，將主觀和客觀評價體系有機地結(jié)合起來，分析各個環(huán)節(jié)之間的影響要素（包括工作界面、優(yōu)化機制、流程等），對節(jié)目整體的質(zhì)量進行合理控制以達到最佳播出效果的管理模式。在傳媒業(yè)，制作質(zhì)量管理是一切質(zhì)量管理的中心，也是節(jié)目制作的基礎(chǔ)。在上海廣播電視臺制作的節(jié)目中，廣泛引入了PQC對播出節(jié)目的整體流程以及燈光、色調(diào)、調(diào)度等元素進行調(diào)控，節(jié)目也因此更受歡迎，取得了良好的收視效果。

具體來說，PQC的應(yīng)用方式就是對整個節(jié)目效果的實時控制和調(diào)整做出更加專業(yè)、及時的應(yīng)對。例如，在直播節(jié)目的制作中，人們一般會對環(huán)境的燈光進行視覺測試，而引入PQC后，其作為整個后臺的監(jiān)控中心，在節(jié)目的制作過程中會時時校色，以達到理想的播出效果。另外，在體育賽事的轉(zhuǎn)播中，PQC的應(yīng)用更為廣泛，如PQC對所有的中超賽場草地都會做出分光反射率的曲線，并通過燈光和分光反射曲線了解到反射率超過80%的波段，由于反射率超過80%的部分就是重點要表現(xiàn)的部分，需要通過PQC對直播畫面上的顏色、色調(diào)、飽和度的整體實時調(diào)整，由此觀眾才可以看到直播畫面上所呈現(xiàn)的精彩賽事。PQC可以通過對整個制作流程的控制來保證節(jié)目制作過程中對畫面質(zhì)量的精確還原。具體工作方法是利用攝像機使用分段分區(qū)的調(diào)色法，通過對亮度、色度和兩個段及高亮中灰三個區(qū)域分別進行調(diào)色，從而達到通透的目的。另外，PQC還可以對整個畫面進行調(diào)整，滿足我們對畫面的需求，也可以通過對現(xiàn)場的時時校準來對影調(diào)參數(shù)（即黑白參數(shù)和色彩參數(shù)）進行控制，以達到理想的畫面效果，從而使觀眾得到身臨其境的體驗。

2. 混合現(xiàn)實技術(shù)（Mixed Reality）

MR技術(shù)是合并現(xiàn)實和虛擬世界從而產(chǎn)生新的可視化環(huán)境的技術(shù)總稱。MR是虛擬現(xiàn)實技術(shù)的進一步發(fā)展，它通過在虛擬世界、現(xiàn)實世界和體驗者之間構(gòu)建相互反饋的平臺，增強用戶體驗效果，使其體驗到前所未有的真實感。

在現(xiàn)實生活中，MR技術(shù)的應(yīng)用范圍十分廣泛。例如，對于一場演唱會來說，觀看者的視覺與聽覺體驗是演出效果的核心所在。視覺方面，通過在直播中應(yīng)用MR技術(shù)，在舞臺表演區(qū)域內(nèi)，在多個角度架設(shè)VR攝像機進行攝錄，就能為觀眾全方位、多角度地展現(xiàn)演唱會現(xiàn)場的實時場景。同時，在直播期間也可以使用特種設(shè)備，通過更多的運動鏡頭和更全面的角度，來展現(xiàn)表演者精彩的運動姿態(tài)和不斷變化的舞臺效果。聽覺方面，通過在內(nèi)場布置多個收取觀眾音效的話筒，同時進行音樂縮混配比，能夠更好地還原出會場的音樂效果。

在2018年中央電視臺“五一”勞動節(jié)的晚會上，其中所展現(xiàn)的未來中國繁榮昌盛的美好圖景，就是通過混合現(xiàn)實技術(shù)來實現(xiàn)的。在播出過程中，節(jié)目組通過使用高清攝像機、電影級攝像頭捕捉畫面，使用多臺機器對畫面無縫拼接等方式形成沉浸式的視覺效果，為觀看者帶來了強烈的交互體驗，實現(xiàn)了觀眾與現(xiàn)場表演者的零距離接觸。這種虛擬現(xiàn)實技術(shù)的應(yīng)用讓晚會科技含量更高、更現(xiàn)代化，也讓觀眾獲得了完美的沉浸式視覺體驗。

3. 人工智能（Artificial Intelligence）

人工智能是研究、開發(fā)用于模擬、延伸和擴展人類智慧的理論、方法、技術(shù)及應(yīng)用系統(tǒng)的一門全新的技術(shù)科學(xué)。上海廣播電視臺在節(jié)目制作中通過現(xiàn)實技術(shù)與人工智能技術(shù)的綜合應(yīng)用使觀眾能夠在節(jié)目直播過程中達到身臨其境的感覺，實現(xiàn)最佳的直播效果，解決了許多以往節(jié)目直播過程中無法解決的問題。例如，在體育賽事的直播中，由于現(xiàn)場座位數(shù)量有限等原因，很多人不能前往現(xiàn)場觀看比賽。利用人工智能技術(shù)，我們可以通過無傳感器方式直接合成信號，通過圖像識別系統(tǒng)實現(xiàn)圖像引擎的跟蹤分析，這種轉(zhuǎn)播方式以沉浸式的感官體驗打破了虛擬與現(xiàn)實之間的界限，使所有的非現(xiàn)場觀眾達到了與現(xiàn)場觀眾同樣的觀看效果。

四、沉浸式2.0視覺體驗（PQC+MR+AI）個案分析

1. 音樂節(jié)目《東方風云榜》

《東方風云榜》是中國內(nèi)地第一個舉辦頒獎演唱會的流行音樂節(jié)目。隨著時代科技的發(fā)展，東方風云榜的電視轉(zhuǎn)播技術(shù)從模擬、標清走到數(shù)字高清，實現(xiàn)了從單一字幕到復(fù)雜包裝的跨躍式轉(zhuǎn)變。在頒獎演唱會的轉(zhuǎn)播方面，上海廣播電視臺從2015年開始就采用A R技術(shù)，通過在演出現(xiàn)場架設(shè)路由器的方式實現(xiàn)了現(xiàn)場信號的全覆蓋，由主機控制聲音，切換臺、舞美和燈光。在多年來的轉(zhuǎn)播實踐中，上海廣播電視臺已經(jīng)通過協(xié)同控制MR、AI等新技術(shù)的融合應(yīng)用，在轉(zhuǎn)播制作中達到了視覺控制PQC、MR、技術(shù)三位一體聯(lián)動的高效綜合制作水平。

2. 體育賽事直播

三維融合技術(shù)下的沉浸式視覺體驗在體育賽事的直播方面也有很好的應(yīng)用效果。例如，在中央電視臺轉(zhuǎn)播的幾次馬拉松賽事中，為了更好地展現(xiàn)賽事的進行情況，中央電視臺采用了MR技術(shù)和GP S跟蹤技術(shù)，使觀眾可以清晰地看到運動員的跑步軌跡，甚至可以捕捉到選手的細微表情，這些都給觀眾帶來了更好的代入感，使賽事轉(zhuǎn)播達到了觀眾與運動員同聲同氣的視覺體驗效果。這種轉(zhuǎn)播方式改變了過去只向觀眾簡單灌輸?shù)膯蜗蜣D(zhuǎn)播模式，整合了轉(zhuǎn)播過程中的視覺、聽覺等多種要素，達到了豐富的多屏聯(lián)動、連線采訪、跨屏互動效果，全面激活了媒體傳播新格局，使馬拉松比賽的直播效果更加生動和真實。在轉(zhuǎn)播的同時，中央電視臺還加入了很多無人機航拍環(huán)節(jié)，航拍直播信號采用4 G傳輸包，實時傳送到媒體服務(wù)器，之后轉(zhuǎn)換為S D I信號并接入轉(zhuǎn)播車進行切換播出，無人機航拍技術(shù)的應(yīng)用為觀眾呈現(xiàn)了全新的馬拉松轉(zhuǎn)播模式，提高了體育賽事的觀賞性和觀眾的參與度。

3. 上海迪士尼樂園開園盛典

上海迪士尼樂園開園盛典的轉(zhuǎn)播也是三維融合（PQC+MR+AI）技術(shù)協(xié)同制作的成功案例。在這次活動的轉(zhuǎn)播過程中，上海廣播電視臺對每個機位的控制都非常精確，通過精準的控制實現(xiàn)了對每一個細節(jié)的抓拍。同時，為了準確展現(xiàn)現(xiàn)場表演的精美效果，上海廣播電視臺利用超高清大型協(xié)同轉(zhuǎn)播制作平臺（UH D6）制作，輔以超高清拍攝、通話和協(xié)同等技術(shù)，使播出的節(jié)目超出了一般轉(zhuǎn)播的范圍，且更為精美。在此次轉(zhuǎn)播中，上海廣播電視臺通過超高清與高清同播系統(tǒng)、集中控制系統(tǒng)、PQC及節(jié)目質(zhì)量體系等媒體技術(shù)的應(yīng)用，很好地展示了迪士尼樂園的歡樂主題。在轉(zhuǎn)播過程中對每一個時間點精確的控制更完美地展現(xiàn)了迪士尼樂園的全景，為觀眾營造出了無與倫比的貼近感體驗。

五、結(jié)論

虛擬現(xiàn)實技術(shù)作為全新的視覺藝術(shù)表達形式，完全顛覆了傳統(tǒng)的傳受模式，同時，人工智能技術(shù)的應(yīng)用為直播的良好效果提供了絕佳的保障，制作質(zhì)量管理體系的引入又將虛擬現(xiàn)實技術(shù)與人工智能技術(shù)完美地結(jié)合起來，為觀眾帶來了前所未有的沉浸式視覺體驗效果。這種沉浸式的視覺體驗與傳統(tǒng)媒體給觀眾帶來的體驗相比，技術(shù)特性更強，觀眾的信息選擇與參與度也更高?？梢哉f，虛擬現(xiàn)實技術(shù)通過多維影像視界的構(gòu)建、人機交互性的體驗、用戶感官潛能的挖掘，為新聞行業(yè)打開了一扇嶄新的大門，也為人類提供了一個認識和感知世界各種可能的全新、多元化視角。