摘要：互動(dòng)媒體京劇《真假美猴王》實(shí)驗(yàn)短片集合了沉浸式虛擬場(chǎng)景、增強(qiáng)現(xiàn)實(shí)特效、同虛擬人物實(shí)時(shí)交互表演等綜合技術(shù)運(yùn)用場(chǎng)景，為了解、欣賞、體驗(yàn)戲曲提供了更多的可能?；诖?，本文探索傳統(tǒng)藝術(shù)與現(xiàn)代科技結(jié)合以增強(qiáng)藝術(shù)生命力的意義及其未來(lái)價(jià)值。

關(guān)鍵詞：互動(dòng)媒體技術(shù);AR技術(shù);京劇;《真假美猴王》

互動(dòng)媒體技術(shù)最早被應(yīng)用于游戲、軍事、醫(yī)學(xué)等實(shí)用領(lǐng)域，涉及演藝領(lǐng)域時(shí)，受人追捧的影視、歌舞類(lèi)大型表演首先受到影響，但這僅是一個(gè)開(kāi)始。近年來(lái)，互動(dòng)媒體技術(shù)更是在話劇、戲曲等傳統(tǒng)表演藝術(shù)形式中不斷拓展。然而，傳統(tǒng)表演形式極高的程式化、規(guī)范化的特點(diǎn)，反而成了與這些科技結(jié)合的限制，因此結(jié)合顯得尤為困難，甚至牽強(qiáng)，所以局部或小范圍的嘗試很有必要，而京劇《真假美猴王》實(shí)驗(yàn)短片正是基于這樣的思考產(chǎn)生的一部實(shí)驗(yàn)作品。

1 京劇《真假美猴王》實(shí)驗(yàn)短片的設(shè)計(jì)主旨

2020年可以說(shuō)是互動(dòng)媒體技術(shù)在舞臺(tái)演藝領(lǐng)域的應(yīng)用和嘗試最為廣泛的一年，并且在2021年的央視春節(jié)晚會(huì)上得到了集中的體現(xiàn)。例如，首次采用8K超高清視頻進(jìn)行演播，首次運(yùn)用AR（增強(qiáng)現(xiàn)實(shí)）、XR（擴(kuò)展現(xiàn)實(shí)）技術(shù)直播。千變?nèi)f化的全景虛擬場(chǎng)景讓演員可以根據(jù)屏幕畫(huà)面與身邊的虛擬元素互動(dòng)。有專(zhuān)業(yè)人士表示，2021年春晚是有史以來(lái)最重視科技的一屆，可稱為“科技春晚”。正如藝術(shù)家譚盾所說(shuō)，“今天已經(jīng)是一個(gè)科技的時(shí)代，涉及科技美學(xué)的問(wèn)題，這就是藝術(shù)甚至聽(tīng)覺(jué)和視覺(jué)（領(lǐng)域）要關(guān)注的問(wèn)題”[1]。

基于互動(dòng)媒體技術(shù)在舞臺(tái)藝術(shù)方面的全面展開(kāi)，我們將焦點(diǎn)聚集在如何將其應(yīng)用于傳統(tǒng)戲曲表演上，經(jīng)過(guò)調(diào)研和前期設(shè)計(jì)，最終決定制作京劇《真假美猴王》實(shí)驗(yàn)短片，以真假美猴王的對(duì)打?yàn)楹诵?，呈現(xiàn)一段基于互動(dòng)媒體技術(shù)的京劇表演。這段表演集合了沉浸式虛擬場(chǎng)景、增強(qiáng)現(xiàn)實(shí)特效以及同虛擬人物實(shí)時(shí)交互表演等綜合技術(shù)運(yùn)用場(chǎng)景。最終，通過(guò)戲曲藝術(shù)與互動(dòng)媒體技術(shù)的結(jié)合，拓展傳統(tǒng)舞臺(tái)表現(xiàn)的維度，進(jìn)而探索現(xiàn)代科技助力傳統(tǒng)藝術(shù)的新方式，增強(qiáng)傳統(tǒng)演藝形式的表現(xiàn)力，使其更加符合時(shí)代審美，煥發(fā)新的光彩。同時(shí)，為戲曲藝術(shù)的普及與推廣提供更加多元和便捷的平臺(tái)，為更多的受眾了解戲曲、體驗(yàn)和欣賞戲曲、熱愛(ài)戲曲提供更多新的可能。

2 京劇《真假美猴王》實(shí)驗(yàn)短片中互動(dòng)媒體技術(shù)的設(shè)計(jì)應(yīng)用

《真假美猴王》的故事在我國(guó)家喻戶曉，我國(guó)各傳統(tǒng)戲曲劇種都曾表演過(guò)這個(gè)故事。不同的是，我們并不滿足于傳統(tǒng)戲曲中對(duì)于兩個(gè)猴王的同度刻畫(huà)，而是在短劇中賦予了假猴王更加豐富的含義，他不僅是取經(jīng)路上的一個(gè)妖魔，還是對(duì)于取經(jīng)人意志的考驗(yàn)，他的樣貌與真猴王無(wú)二，與其說(shuō)他是妖魔，不如說(shuō)他就是孫悟空的鏡像，是他心中的心魔，在取經(jīng)路上不僅僅有“打怪升級(jí)”，更為艱難的是對(duì)信心的考驗(yàn)，悟空最終戰(zhàn)勝心魔，堅(jiān)定了取經(jīng)的決心。有了這個(gè)理由，我們就為此段亦真亦假、魔幻的AR特效表現(xiàn)找到了恰當(dāng)?shù)牧⒆泓c(diǎn)。

2.1 AR表現(xiàn)概念設(shè)計(jì)

此次研究的目標(biāo)不僅僅是要在舞臺(tái)上呈現(xiàn)沉浸的虛擬場(chǎng)景、增強(qiáng)現(xiàn)實(shí)特效，重要的是體現(xiàn)劇中真假兩個(gè)猴王對(duì)打和斗法的即時(shí)互動(dòng)感?；诖?，我們最終決定通過(guò)諾亦騰動(dòng)作捕捉技術(shù)達(dá)到這個(gè)目的，即用3D軟件制作一個(gè)虛擬的美猴王，覆蓋貼圖和綁定骨骼之后，一位穿戴動(dòng)作捕捉無(wú)限傳感器的京劇演員在表演場(chǎng)地外控制3D虛擬猴王（圖1），捕捉場(chǎng)外演員的動(dòng)作信息，其身體的運(yùn)動(dòng)和姿態(tài)數(shù)據(jù)可以實(shí)時(shí)傳輸?shù)絅otch渲染引擎中，數(shù)據(jù)再?gòu)腘otch傳輸?shù)絛isguise服務(wù)器，最終再由disguise將數(shù)據(jù)信息輸?shù)絃ED屏幕，此時(shí)舞臺(tái)上便會(huì)出現(xiàn)活動(dòng)的虛擬美猴王。該模型所有的動(dòng)作信息與場(chǎng)外京劇演員的表演動(dòng)作完全匹配，虛擬美猴王實(shí)時(shí)呈現(xiàn)在舞臺(tái)上，真猴王與虛擬假猴王就能實(shí)現(xiàn)實(shí)時(shí)互動(dòng)了。

2.2 AR特效路線設(shè)計(jì)

這出戲的核心是AR技術(shù)的表現(xiàn)。傳統(tǒng)京劇表演的動(dòng)作程式比較嚴(yán)謹(jǐn)規(guī)范，舞臺(tái)效果較為單一，當(dāng)融入了AR特效后，如美猴王在翻騰或者舞動(dòng)金箍棒時(shí)，會(huì)伴有各種炫酷奪目的特效，從而增強(qiáng)現(xiàn)場(chǎng)的美感和激烈程度。

我們現(xiàn)在看到的多數(shù)戲曲類(lèi)視覺(jué)特效以“傳統(tǒng)錄制+后期特效”的技術(shù)為主。例如，錄制好表演視頻后，用Adobe公司的After Effects和Premiere等軟件進(jìn)行后期剪輯和處理。這種方法雖能方便地將現(xiàn)場(chǎng)錄制和特效設(shè)計(jì)準(zhǔn)確結(jié)合，但無(wú)法呈現(xiàn)表演的臨場(chǎng)互動(dòng)感，并且大量使用特效極易導(dǎo)致人們的審美疲勞，這與AR技術(shù)所營(yíng)造的現(xiàn)場(chǎng)實(shí)時(shí)的直觀感受相差甚遠(yuǎn)。

我們的目標(biāo)是力求達(dá)到現(xiàn)場(chǎng)與虛擬人物表演和AR特效實(shí)時(shí)呈現(xiàn)的舞臺(tái)效果，這就一定要避免“錄制+特效”的方式。因此，實(shí)驗(yàn)采用Notch實(shí)時(shí)渲染引擎來(lái)制作完成AR部分的特效。Notch制作舞臺(tái)效果優(yōu)勢(shì)突出，具有實(shí)時(shí)渲染能力和復(fù)雜的粒子生成、高度的場(chǎng)域、程序化、燈光及材質(zhì)的設(shè)置和操控功能，并能將所有的AR效果向Disguise GX2播控設(shè)備進(jìn)行無(wú)障礙數(shù)據(jù)傳輸，最終達(dá)到現(xiàn)場(chǎng)表演時(shí)在攝像機(jī)前端實(shí)時(shí)疊加AR特效的目的，觀眾就能夠通過(guò)攝像機(jī)和輸出屏幕實(shí)時(shí)觀看有AR特效的京劇表演了。

2.3 實(shí)時(shí)動(dòng)作捕捉技術(shù)路線設(shè)計(jì)

動(dòng)作捕捉也是本實(shí)驗(yàn)劇的重要一環(huán)，如演員②配合演員①表演劇中的互動(dòng)情節(jié)（圖1）。雖然兩位演員仍依據(jù)傳統(tǒng)京劇動(dòng)作程式表演，但兩人的空間位置關(guān)系發(fā)生了根本上的改變。演員①扮演的真猴王在舞臺(tái)中表演，觀眾可見(jiàn);演員②則身著動(dòng)作捕捉裝備在舞臺(tái)一側(cè)表演，通過(guò)對(duì)他動(dòng)作的跟蹤采集，操控虛擬猴王模型在舞臺(tái)上表演。這最大限度地呈現(xiàn)了真猴王的現(xiàn)場(chǎng)表現(xiàn)力，同時(shí)增強(qiáng)了虛擬猴王的虛幻感，從而產(chǎn)生了不同于傳統(tǒng)京劇的表現(xiàn)形式（傳統(tǒng)京劇中真假猴王都由真實(shí)的演員直接裝扮表演），讓人立刻感受到戲中“真與假”的表演暗示和意想不到的視覺(jué)效果（見(jiàn)圖1）。

在動(dòng)作捕捉技術(shù)操控方面，目前較多使用光線追蹤技術(shù)實(shí)施，這要求在設(shè)有若干攝像機(jī)或布滿攝像頭的實(shí)體場(chǎng)域中進(jìn)行，攝像頭數(shù)量決定動(dòng)作捕捉的精確度，比較典型的設(shè)備是OptiTrack，現(xiàn)場(chǎng)需搭起腳手架支撐攝像機(jī)，演員需穿著專(zhuān)門(mén)的動(dòng)作捕捉服裝表演。這種做法成本較高，并且特制的動(dòng)作捕捉服限制了演員的臨場(chǎng)表現(xiàn)和發(fā)揮，所以我們選擇了采用無(wú)線數(shù)據(jù)傳輸模式的諾亦騰動(dòng)作捕捉設(shè)備。這個(gè)設(shè)備的好處是比較輕便、易于攜帶，且不受場(chǎng)地和服裝的限制，完全可以適應(yīng)大多數(shù)應(yīng)用場(chǎng)景[2]。在實(shí)驗(yàn)彩排時(shí)，采用了代級(jí)較低的Perception Neuron2.0系列，所以只能捕捉到演員大的肢體動(dòng)作，細(xì)微的手勢(shì)動(dòng)作就無(wú)法捕捉了，因此就出現(xiàn)了虛擬猴王手型僵直、無(wú)法彎曲的情況，這有違人體動(dòng)態(tài)規(guī)律，是預(yù)演中暴露出來(lái)的問(wèn)題。接下來(lái)我們擬采用代級(jí)更高的諾亦騰設(shè)備解決這一問(wèn)題，力圖達(dá)到精確捕捉人物動(dòng)態(tài)的目的。

相較而言，在預(yù)演階段采用的動(dòng)作捕捉設(shè)備是一款入門(mén)級(jí)有線動(dòng)作捕捉系統(tǒng)，雖輕便易操作，但由于沒(méi)有裝載無(wú)線傳輸信號(hào)感應(yīng)器，現(xiàn)場(chǎng)操作時(shí)常常會(huì)出現(xiàn)對(duì)演員動(dòng)作捕捉不精確的問(wèn)題。這就要求我們必須采用具有全身無(wú)線數(shù)據(jù)傳輸、低延遲高精度、高電磁耐受性等特性的高端設(shè)備。而諾亦騰專(zhuān)業(yè)級(jí)動(dòng)作捕捉設(shè)備Perception Neuron Studio系列憑借其專(zhuān)有的嵌入式數(shù)據(jù)融合系統(tǒng)和人體動(dòng)力學(xué)系統(tǒng)以及物理引擎算法，不僅可以使骨骼信息被精確捕捉到，也能為使用者提供平滑而準(zhǔn)確的動(dòng)作捕捉數(shù)據(jù)，完全滿足以上的需求。

3 京劇《真假美猴王》實(shí)驗(yàn)短片的最終呈現(xiàn)

最終，在2021年3月6日的匯報(bào)演出中使用了諾亦騰專(zhuān)業(yè)級(jí)動(dòng)作捕捉設(shè)備Perception Neuron Studio系列。此設(shè)備是諾亦騰公司的最新產(chǎn)品，比前幾代設(shè)備更加精準(zhǔn)，其在硬件、軟件、算法、易用性及環(huán)境適應(yīng)性等方面均有多項(xiàng)提升，并且增強(qiáng)了手部動(dòng)作捕捉能力，解決了預(yù)演時(shí)虛擬模型無(wú)法識(shí)別真人手部彎曲動(dòng)作的難題，這樣在表演時(shí)就可以捕捉更多的細(xì)微動(dòng)作，增強(qiáng)虛擬猴王的生動(dòng)性了。

在預(yù)演過(guò)程中，由于慣性動(dòng)作捕捉設(shè)備的特點(diǎn)，假猴王被真猴王棒擊后，總是出現(xiàn)卡頓、無(wú)法消失的問(wèn)題。因此我們?cè)诟聞?dòng)作捕捉設(shè)備的基礎(chǔ)上，最后又增加了一個(gè)AR粒子消散的特效，以表現(xiàn)虛擬猴王的“幻滅”效果，加強(qiáng)真猴王驅(qū)除心魔的寓意。

3.1 最終呈現(xiàn)中的VR特效設(shè)計(jì)

VR（虛擬現(xiàn)實(shí)）部分重點(diǎn)體現(xiàn)的是美猴王的內(nèi)心活動(dòng)及其跟場(chǎng)景、佛像的互動(dòng)，此環(huán)節(jié)的特效更加多元，比如真猴王對(duì)佛像下跪時(shí)，伴隨鐘聲佛像顯靈，顯現(xiàn)佛光效果，暗示佛祖對(duì)真猴王的內(nèi)心的感應(yīng)和指引。

再比如真假美猴王打斗環(huán)節(jié)的VR特效，在第一次棒擊假猴王時(shí)，假猴王變化出了一個(gè)“光盾”進(jìn)行抵擋，這實(shí)際上是做了一個(gè)VR多排圓圈特效，從視覺(jué)上看上去很像一個(gè)“光盾”，同時(shí)也是為了與最終棒擊假猴王湮滅的特效形成對(duì)比，特意區(qū)分兩次棒擊的效果，形成視覺(jué)反差，使打斗場(chǎng)面顯得更加激烈和精彩，同時(shí)調(diào)節(jié)觀眾的情緒。

3.2 最終呈現(xiàn)中的AR特效設(shè)計(jì)

真猴王在開(kāi)場(chǎng)時(shí)有一個(gè)翻跟斗的亮相動(dòng)作，在此特意設(shè)計(jì)了翻滾的AR前景粒子特效，以強(qiáng)化演員翻滾的方向感和動(dòng)勢(shì)，增強(qiáng)了高難度動(dòng)作表演的視覺(jué)效果。

為了體現(xiàn)美猴王高強(qiáng)的本領(lǐng)和調(diào)皮的性格，專(zhuān)門(mén)設(shè)計(jì)了多處跳躍和舞動(dòng)金箍棒的動(dòng)作，我們?cè)诖睡B加了兩層AR特效，一層是用Notch設(shè)計(jì)的旋轉(zhuǎn)的黃色粒子特效，一層是用AE設(shè)計(jì)的帶有通道的紫色電流特效。兩層AR特效疊加豐富了魔法的既視感，將打斗場(chǎng)面和視覺(jué)效果推向了高潮。

3.3 最終呈現(xiàn)中的MR特效設(shè)計(jì)

打斗場(chǎng)面是整部短片的高潮，我們使用了VR和AR結(jié)合的MR（混合現(xiàn)實(shí)）特效，即背景LED屏實(shí)時(shí)渲染的紅色旋渦粒子VR特效，混合疊加在前景層圍繞假猴王旋轉(zhuǎn)的AR利劍動(dòng)畫(huà)特效。兩種不同的視覺(jué)特效穿插在一起，給打斗場(chǎng)面增加了更多的即時(shí)互動(dòng)感和強(qiáng)烈的視覺(jué)感受（見(jiàn)圖2）。

可以說(shuō)，最終整部短劇的排演克服了預(yù)演中出現(xiàn)的大多問(wèn)題，最終達(dá)到了各種互動(dòng)媒體技術(shù)的一個(gè)極優(yōu)的呈現(xiàn)，這對(duì)于全體課題組成員來(lái)說(shuō)是最好的激勵(lì)。當(dāng)然，作為一部實(shí)驗(yàn)作品，其中還存在很多不足和缺點(diǎn)，比如視覺(jué)場(chǎng)景的優(yōu)化不夠、石頭和地面缺乏材質(zhì)和肌理感，虛擬美猴王造型的制作還顯粗糙，骨骼綁定和UV貼圖的真實(shí)性與精細(xì)度也有待提高，以及各種特效的進(jìn)一步優(yōu)化和處理，我們將會(huì)在接下來(lái)的工作中逐步解決和完善此類(lèi)問(wèn)題。

4 互動(dòng)媒體技術(shù)與戲曲藝術(shù)融合的展望

今天，隨著新媒體時(shí)代的來(lái)臨，現(xiàn)代舞臺(tái)迎來(lái)了大的變革和機(jī)遇，這給予了新科技與傳統(tǒng)藝術(shù)融合無(wú)限的發(fā)展前景。我們已經(jīng)可以看到，VR、AR、MR，乃至XR等技術(shù)在很多的現(xiàn)代舞臺(tái)藝術(shù)中被頻繁應(yīng)用，從其中優(yōu)秀者中不難看出它在未來(lái)的應(yīng)用價(jià)值。因此，我們應(yīng)該在傳統(tǒng)舞臺(tái)藝術(shù)中大膽地進(jìn)行此類(lèi)技術(shù)的嘗試與創(chuàng)新，用符合時(shí)代審美的新技術(shù)達(dá)到弘揚(yáng)傳統(tǒng)文化的目的，為傳統(tǒng)戲曲注入新的活力。

當(dāng)然，我們?cè)跓崆閲L試的同時(shí)還要時(shí)刻保持一種理智而冷靜的研究態(tài)度，避免在創(chuàng)作中對(duì)新科技的刻意而生硬的應(yīng)用，這樣只會(huì)破壞傳統(tǒng)藝術(shù)本來(lái)的美感，從而適得其反。正如京劇大師梅蘭芳曾提過(guò)的“移步而不換形”[3]，要使戲曲藝術(shù)隨著時(shí)代發(fā)展而不斷進(jìn)步，發(fā)揚(yáng)和升華其精神內(nèi)涵與意象之美。這就要求我們藝術(shù)科研人員要不斷地加深自己在傳統(tǒng)文化方面的底蘊(yùn)和修養(yǎng)，同時(shí)積極主動(dòng)地了解和學(xué)習(xí)當(dāng)代新的演藝科學(xué)技術(shù)，掌握這些新技術(shù)的應(yīng)用模式和表現(xiàn)特點(diǎn)，使其有效地融合于傳統(tǒng)文化。

5 結(jié)語(yǔ)

互動(dòng)媒體京劇《真假美猴王》實(shí)驗(yàn)短劇從開(kāi)始的創(chuàng)意、劇目的選擇與策劃，到前期排練、中期合練與修改，再到最終短劇演示攝錄完成歷時(shí)一年多，是創(chuàng)作團(tuán)隊(duì)共同努力的成果。期間，問(wèn)題不斷地出現(xiàn)和被解決，最終團(tuán)隊(duì)取得了較為理想的呈現(xiàn)結(jié)果。

這次小小的嘗試讓大家深刻地感受到了新的互動(dòng)媒體技術(shù)帶給傳統(tǒng)戲曲藝術(shù)不同于以往的觀看感受和體驗(yàn)。它極大地拓展了傳統(tǒng)舞臺(tái)的呈現(xiàn)形式，利用數(shù)字互動(dòng)媒體技術(shù)的數(shù)字化表現(xiàn)，構(gòu)建了炫酷的舞臺(tái)效果，強(qiáng)化了舞臺(tái)藝術(shù)形象，烘托了現(xiàn)場(chǎng)氛圍，使觀眾在觀演時(shí)獲得了更具有時(shí)代感的審美體驗(yàn)。因此，小到創(chuàng)作小品，大到創(chuàng)作劇目，與互動(dòng)媒體技術(shù)的結(jié)合都值得積極嘗試和探索，這非常有利于戲曲藝術(shù)在當(dāng)代的推廣和發(fā)展，也勢(shì)必會(huì)推動(dòng)一種全新的戲曲表現(xiàn)形式的發(fā)展。

參考文獻(xiàn)：

[1] 劉彤.春晚不好看了？牛年春晚借力科技煥發(fā)新機(jī)[J].人民郵電，2021（02）：1.

[2] 從動(dòng)作捕捉到虛擬現(xiàn)實(shí)——諾亦騰的成長(zhǎng)之路[J].互聯(lián)網(wǎng)經(jīng)濟(jì)，2016（12）：42-43.

[3] 程從梅.戲曲文化傳播中公共交互媒體藝術(shù)的設(shè)計(jì)研究[D].北京：中國(guó)戲曲學(xué)院，2018：1.

作者簡(jiǎn)介：張曉華（1978—），男，山西大同人，碩士，助理研究員，研究方向：數(shù)字藝術(shù)與設(shè)計(jì)。