鄭勇
2022年,黨的二十大報告提出“加快發(fā)展數(shù)字經(jīng)濟,促進數(shù)字經(jīng)濟和實體經(jīng)濟深度融合”。在過去幾年中,優(yōu)酷推動數(shù)字技術(shù)在影視行業(yè)的應(yīng)用,通過幀享數(shù)字化制作、影視資產(chǎn)數(shù)字管理平臺、云尚制片等行業(yè)解決方案,加速行業(yè)數(shù)實融合。
幀享數(shù)字化制作,通過整體解決方案為劇組拍攝降本增效
為了能夠通過技術(shù)創(chuàng)新幫助劇組提升拍攝制作能力,幀享從2019年開始布局數(shù)字化制作業(yè)務(wù),從產(chǎn)業(yè)發(fā)展和劇組的真實需求出發(fā),打磨出一套完善、先進、穩(wěn)定的數(shù)字化制作整體解決方案,通過LED屏幕作為數(shù)字背景的方式,提升了拍攝效率與效果。2022年末,幀享整體解決方案完成了從1.0到2.0的迭代。
在1.0時代,幀享重點攻克了遠景的拍攝,主要包括窗外景和車戲兩個場景,使用LED屏幕配合數(shù)字資產(chǎn),打造逼真的外景效果,替代傳統(tǒng)綠幕或?qū)嵕芭臄z方案,演員與導(dǎo)演等主創(chuàng)團隊能夠在更真實可見的場景中完成表演與拍攝,同時不受外景天氣、光線等客觀因素限制,提升拍攝效率。
在窗外景和車戲的拍攝中,對比綠幕拍攝,幀享方案能夠節(jié)約50%預(yù)算、提升30%拍攝效率,也是憑借這一亮眼的效果,幀享目前已經(jīng)服務(wù)上百項目,拿下國內(nèi)影視劇LED數(shù)字背景拍攝方案80%的市場占有率。
在2.0時代,幀享重點建設(shè)了兩個獨特能力——虛擬拍攝OS與數(shù)字資產(chǎn)平臺。這也是整體幀享方案中關(guān)乎穩(wěn)定性與可持續(xù)性的兩個基石:生態(tài)拓展與資產(chǎn)積累。幀享虛擬拍攝OS是一套基于自研算法與技術(shù)的軟硬件生態(tài)體系,以幀享主控系統(tǒng)為核心,打通周邊各類軟硬件合作與開發(fā),從影視級屏幕、播控和渲染服務(wù)器到現(xiàn)場資產(chǎn)呈現(xiàn)與實時調(diào)整等,幀享有能力做到端到端的全流程把控,為拍攝現(xiàn)場的效果與穩(wěn)定性負責。
數(shù)字資產(chǎn)作為整套方案中“降本與效果”的關(guān)鍵,幀享做了重點打磨。目前,幀享數(shù)字資產(chǎn)平臺上有超過5000條可復(fù)用的標準化資產(chǎn),覆蓋各類街景、標志性建筑、不同季節(jié)天氣等,都經(jīng)過了幀享實驗室獨家標準化流程,并且“一套資產(chǎn)”能夠同時滿足離線渲染要求和實時演算的“雙重需求”,極大提升內(nèi)容質(zhì)量和拍攝效果,構(gòu)建虛擬拍攝的落地可能。
在圍繞數(shù)字化制作的技術(shù)探索與建設(shè)過程中,幀享打造了通過iPad終端進行實時后處理的現(xiàn)場調(diào)整能力,考慮到LED數(shù)字背景通常會與現(xiàn)場實景與燈光進行配合,但數(shù)字資產(chǎn)制作環(huán)節(jié)在前,會出現(xiàn)部分資產(chǎn)與現(xiàn)場環(huán)境在亮度、色溫、色調(diào)等方面無法完美匹配,需要臨時調(diào)整與美化,為保障現(xiàn)場拍攝進度不受影響,幀享LED數(shù)字背景拍攝方案,通過提高硬件設(shè)備運算能力,優(yōu)化圖像處理算法,使播控服務(wù)器在播放數(shù)字資產(chǎn)的同時能夠進行實時后處理,實現(xiàn)根據(jù)現(xiàn)場環(huán)境對數(shù)字資產(chǎn)進行實時調(diào)整。通過iPad遠程控制終端,能夠?qū)ED屏幕陣列內(nèi)容進行智能的進行區(qū)域分割,針對每一塊區(qū)域,進行獨立的亮度,色溫,飽和度,色相,以及自定義Lut的調(diào)整,且這些調(diào)整都可以隨著時間的推進而漸變,通過以上調(diào)整,不僅能解決數(shù)字資產(chǎn)與現(xiàn)場環(huán)境不匹配的問題,還能給導(dǎo)演更多的創(chuàng)作空間。
另外,對于“如何保證更好的拍攝效果呈現(xiàn)”這一問題,幀享從技術(shù)層面對數(shù)字資產(chǎn)的色階、色偏、摩爾紋等業(yè)內(nèi)難題進行了深入研究,提供了一套行之有效的解決方案。
數(shù)字資產(chǎn)中一片顏色接近的區(qū)域,如天空,墻面等,當這些區(qū)域的顏色不能柔和漸變,而是出現(xiàn)了斷層時,就會出現(xiàn)一條條顏色漸變的色帶,即色階問題,這通常是由顏色位深不足或視頻過度壓縮引起的,幀享方案通過標準化的數(shù)字資產(chǎn)制作流程、深度定制的軟硬件,以及行業(yè)領(lǐng)先的轉(zhuǎn)碼算法和色階矯正算法,能保障整個視頻處理過程都支持10bit以上的色彩位深,從而完全解決色階問題。
LED屏幕陣列上呈現(xiàn)的畫面色彩與數(shù)字資產(chǎn)真實的色彩存在一定的偏差,既包括畫面整體的色彩偏差、局部色彩與整體不一致,也包括攝像機拍攝角度不同時的色彩差異。導(dǎo)致整體的色彩偏差的因素有很多,如LED屏幕色域覆蓋范圍限制,LED屏幕色域與數(shù)字資產(chǎn)色域不一致,數(shù)字資產(chǎn)與LED屏幕Gamma曲線不一致,LED屏幕的服役過程中正常的亮度衰減,LED屏幕溫度過高導(dǎo)致的光譜變化,播控軟件或顯卡驅(qū)動等軟件后處理引入的色彩偏差,發(fā)送卡、視頻處理服務(wù)器等硬件設(shè)備中內(nèi)置調(diào)色功能引入的色彩偏差,解決這類色彩問題,需要獲取到鏈路上各個節(jié)點輸出的色彩數(shù)據(jù),將色彩數(shù)據(jù)與數(shù)字資產(chǎn)原始數(shù)據(jù)進行比對,分析引入色差的模塊,再對相應(yīng)模塊進行針對性的調(diào)整。對于整體色偏和色彩不一致問題,幀享方案是通過軟硬件認證、全鏈路監(jiān)控系統(tǒng)、色彩矯正算法來解決。幀享方案中接入的播控軟件、顯卡、發(fā)送卡、視頻處理器,LED屏幕全部通過了幀享數(shù)字化制作認證,各節(jié)點支持的色域范圍,允許開啟的調(diào)色能力都有嚴格的限制,各節(jié)點對色彩的處理效果都經(jīng)過單元驗證;幀享數(shù)字化制作方案中接入的軟硬件設(shè)備都要求開放設(shè)備型號,規(guī)格參數(shù),輸入輸出兼容能力的查詢接口,幀享全鏈路監(jiān)控系統(tǒng)會收集這些信息,規(guī)避色域設(shè)置不匹配、型號差異過大等導(dǎo)致色偏的問題。對于LED屏幕批次差異引入的局部色偏,幀享數(shù)字化制作方案中提供了能夠進行局部色彩矯正的能力,在有限硬件條件下解決此類問題。對于拍攝角度不同導(dǎo)致的彩色差異,幀享案定制的LED屏幕在生產(chǎn)設(shè)計階段就考慮到了此問題,因此在屏幕設(shè)計時就增大了屏幕的有效可視范圍,為攝像機提供了更大的拍攝空間。對于外部燈光的影響,幀享數(shù)字化制作方案提供了實時的局部亮度、色溫調(diào)節(jié)的能力,能夠很好地適配現(xiàn)場燈光的變化。
當使用攝像機對著LED屏幕進行拍攝時,在攝像機拍攝的畫面中,有時會看到帶狀或水波紋一樣擴散的紋路,即摩爾紋。通過肉眼直接觀察LED屏幕不會觀察到摩爾紋,它只出現(xiàn)在攝像機拍攝的畫面中。摩爾紋是一種光學現(xiàn)象,光線從LED屏幕發(fā)出,經(jīng)過屏幕上涂抹的保護凝膠、空氣、其他可能的遮擋物,如玻璃、煙霧、攝像機透鏡,到達攝像機感光元件,所有這些光路通過的物體,都會對摩爾紋的產(chǎn)生有影響,除此之外,屏幕的像素密度,攝像機的拍攝角度,攝像機與屏幕的距離,攝像機的焦點,焦距也都能影響摩爾紋的產(chǎn)生。經(jīng)過實踐驗證,我們找到了一些方法能夠減弱摩爾紋的影響。減小現(xiàn)場攝像機的景深,將焦點盡量放在LED屏幕前面的物體上,虛化LED屏幕的內(nèi)容;調(diào)整攝像機的角度或攝像機到LED屏幕的位置,在某些角度和拍攝距離下,摩爾紋會更弱;減小LED屏幕的像素間距,也可以減弱摩爾紋現(xiàn)象。幀享方案采用特殊定制的LED屏幕,在LED屏幕的生產(chǎn)設(shè)計階段,就考慮到虛擬拍攝應(yīng)用場景下對LED屏幕的特殊要求,因此我們要求屏幕的像素間距在2.5mm以內(nèi),最大限度的減少了摩爾紋的出現(xiàn)。
基于對影視制作的研究與持續(xù)的應(yīng)用打磨,幀享才能夠挖掘到實拍中真正會遇到的問題,通過自研算法進行解決。而在這一過程中,幀享也有自己的“測試與拍攝基地”。早在2020年,幀享就建設(shè)起第一個數(shù)字影棚,2023年也對影棚進行了全面升級,配備影視級LED屏幕、多套業(yè)界領(lǐng)先的媒體服務(wù)器與媒體渲染器、專業(yè)動捕與光學追蹤方案,現(xiàn)場也有專業(yè)的技術(shù)服務(wù)支持團隊,幀享數(shù)字影棚是現(xiàn)在國內(nèi)領(lǐng)先的能實現(xiàn)LED數(shù)字背景拍攝、XR拍攝、綠幕拍攝、動捕面捕等全方位制作功能的數(shù)字化制作基地。目前,幀享影棚已經(jīng)在全國多個城市落地,包括北京、廈門、寧波,未來也會有更多的影棚建成,擴大輻射的服務(wù)范圍。
影視資產(chǎn)數(shù)字管理平臺,實現(xiàn)劇組道具的綠色可持續(xù)使用
傳統(tǒng)上,每個劇組在拍攝籌備階段都會根據(jù)劇情需要進行服裝、道具的采買與制作,大到戰(zhàn)爭片的坦克與現(xiàn)代戲的全套家具,小到古裝戲演員的發(fā)簪,道具的準備往往需要花費大量人力、預(yù)算與時間。而當拍攝結(jié)束后,服裝道具大多會當做廢品直接處理掉,這不僅是資源的浪費,也會造成環(huán)境污染。
關(guān)注到這一問題,2019年,優(yōu)酷著手搭建影視資產(chǎn)數(shù)字管理平臺,進行服裝、道具的回收與管理,通過分門別類的梳理與呈現(xiàn),劇組可以直接在小程序進行道具的瀏覽與租賃,讓道具能夠循環(huán)利用,為劇組節(jié)約了成本與大量制作時間。4年來,平臺累計回收服裝道具33萬余件,支持劇組超1000個,為行業(yè)節(jié)省成本超1億元。2023年春節(jié)檔電影《流浪地球2》和《滿江紅》中,部分道具就是出自這一平臺。
從中國劇組的現(xiàn)狀與需求出發(fā),云尚制片實現(xiàn)制片管理流程化與數(shù)字化
云尚制片立足影視制作行業(yè)現(xiàn)狀,利用優(yōu)酷前沿技術(shù)研發(fā)制片全流程數(shù)字化管理工具,涵蓋劇本管理、劇組財務(wù)管理、拍攝周期管理、現(xiàn)場數(shù)字化、在線看片、薪酬管理、文件管理等多種能力。自2019年7月上線至今,云尚制片穩(wěn)定、安全地幫助400余家制作公司的超過1000個劇組規(guī)范制作流程、提高工作效率、控制制作成本、把控項目品質(zhì)和風險,為《司藤》、《你好,火焰藍》等爆款作品保駕護航。
為了提升拍攝現(xiàn)場協(xié)同效率及品控,解決拍攝內(nèi)容監(jiān)看及回放難題,云尚制片經(jīng)過一年悉心打磨,正式推出云尚現(xiàn)場管理系統(tǒng)。通過電腦端、手機端、iPad等多端平臺,導(dǎo)演組可以隨時查看回放及粗剪,避免漏拍錯拍,判斷成片的大致影像觀感;無法親臨拍攝現(xiàn)場的管理層及投資人,可遠程同步監(jiān)看拍攝現(xiàn)場,在流暢穩(wěn)定的觀看體驗中把控拍攝品質(zhì);服化道等劇組主創(chuàng)則可根據(jù)監(jiān)看畫面完成現(xiàn)場協(xié)作,通過實時查閱已拍攝素材完成接戲,防止穿幫錯漏。云尚現(xiàn)場已在多個劇組測試跑通,目前正在劇集項目《孤鷹》拍攝現(xiàn)場全程投入使用,以“高性價比+本土化”的方式讓拍攝過程“有畫可依,高效品控”。
當前,AIGC的浪潮席卷各行各業(yè),尤其在影視制作領(lǐng)域,已經(jīng)能看到有越來越多的應(yīng)用可能與機會。
未來,優(yōu)酷將堅持數(shù)實融合與前沿領(lǐng)域的探索,加速技術(shù)在制片管理、現(xiàn)場拍攝等環(huán)節(jié)的應(yīng)用,助推文娛產(chǎn)業(yè)的升級。W