謝慧華
2020年上半年,搭載高通驍龍865等新旗艦平臺的智能手機接連發(fā)布,性能、Al算力、存儲速度都有了飛躍的提升。為了避免性能的浪費,不少旗艦手機還配備了高刷新率的屏幕,為用戶帶來更流暢的操作體驗。評測的過程中,我們通常會選擇支持高幀率版本的游戲來體驗行云流水般的畫面觀感,但這并不意味著高刷新率屏幕的應用僅局限在游戲中。
每秒24格的藝術
從60Hz到90Hz再到目前的120Hz,手機屏幕刷新率在不到一年的時間里就得到了翻倍的提升。與之對應的是,部分游戲也逐漸放開了幀數(shù)的限定,《王者榮耀》推出了60fps的高幀率模式,《QQ飛車>適配120Hz屏幕,《和平精英》通過一定的方法也能解鎖120fps模式。可見,硬件的提升,需要應用、內(nèi)容的同步支持,否則在120Hz刷新率的屏幕上玩30fps模式的游戲,依然無法感受到行如流水的流暢畫面,這就像在高速路上開拖拉機一樣,依然只有慢吞吞的速度。
除了游戲之外,高刷新率的屏幕還有什么用處?大家第一時間想到的肯定是視頻播放,但是在內(nèi)容上,高幀率的視頻資源可以說是少之又少。就拿手機拍攝視頻來說,iPhone 11 ProMax最高支持4K/60fps視頻拍攝,在這一規(guī)格下拍攝1分鐘就需要占用1GB左右的存儲空間。如果你購買的是64GB容量版本,即使什么應用也不裝,也只夠拍攝1小時。
在電影拍攝中,高幀率的畫面更是鳳毛麟角。法國電影大師讓·呂克-戈達爾將電影視為“每秒24個的真理”,和以30fps作為流暢及格線的游戲不同,電影只需要24幀就能獲得流暢的畫面感。究其原因,游戲制作中每一幀畫面都是靜止不連續(xù)的,但電影錄制的是動態(tài)的畫面。在每秒鐘的24張畫面中,部分畫面是清晰的,部分畫面是模糊的、有拖影的,這種模糊自帶方向性,與下一張畫面產(chǎn)生銜接,能夠讓人腦形成連貫流暢的畫面。電影是表達的藝術,手法和風格各有不同。從導演的角度來看,不同幀速的電影有不同的風格,24幀的電影擁有獨特的”電影感”,甚至有部分導演在部分片段拍攝中,特意抽去一些畫面,通過減幀的手段來豐富自己的表達手法。比如導演王家衛(wèi)就在《一代宗師》《重慶森林》和《旺角卡門》等電影鏡頭中適當?shù)剡\用了抽幀( Step Printing)手法,營造不連貫的迷幻感。
從場景的快速切換和動作表現(xiàn)上來講,24幀的電影會產(chǎn)生不夠流暢的拖影感,只是考慮到制作成本和觀眾習慣,沿用了多年的24幀標準依然是權衡利弊的最佳選擇。就拿大家都愛看的科幻片為例,基于24幀拍攝時,電影的后期特效成本已經(jīng)高得嚇人,如果以120幀拍攝,意味著增加了4倍的特效工作量,恐怕全部的票房都不夠填補這個窟窿。此外,這類影片還需要支持高幀率的電影播放的放映機才能放映。從《比利林恩的中場戰(zhàn)事》到《雙子殺手》,導演李安曾兩次采用120幀+4K+3D的拍攝技術,但大多數(shù)影院放映的依然是”縮水版”。
填補硬件和內(nèi)容的斷層
既占空間,又費成本,以電影、電視劇為主的視頻內(nèi)容天生自帶著幀率不足的缺憾,堪堪達到流暢的門檻。難道就沒有讓視頻變得更流暢的低成本方法嗎?有。在電視領域,早已出現(xiàn)了彌補內(nèi)容與技術斷層的MEMC技術。MEMC (Motion Estimateand Motion Compensation)意為運動估計和運動補償,是目前常見的視頻插幀技術。在電視領域的插幀補償中,曾出現(xiàn)過三種不同的插幀類型,分別是插復制幀、插黑幀和插計算幀。插復制幀只能提升原視頻的幀速,插黑幀能夠稍微減輕拖影感,但效果都不理想,逐漸被淘汰。而插計算幀則是通過運動估計預估畫面中運動物體的軌跡,然后在兩個相鄰幀中間插入_張中間幀,這樣原視頻的幀數(shù)就能翻倍,視覺上也會流暢平滑很多。
目前,MEMC動態(tài)補償技術在電視領域比較普及,但命名各有不同。索尼將其命名為MotionFlow,LG叫TruMotion,三:星叫Auto Motion Plus.東芝叫做ClearFrame.像華為的智慧屏和小米最新的小米電視5 Pro也都支持MEMC技術。以索尼電視上的MotionFlow技術舉例,視頻中的奔跑的馬從左側(cè)移動至右側(cè)僅有3個畫面,MotionFlow通過算法捕捉到了馬蹄、馬尾以及人的運動軌跡,根據(jù)畫面背景自動生成了中間幀,稍微改變了馬尾、馬蹄的位置和人的坐姿,從而增加了畫面的整體流暢感。從技術上看,MEMC對算法的依賴程度極高,如何準確識別移動物體,如何計算生成準確的新幀,取決于算法的智能程度。
對于如此復雜的運算,還需要強悍的硬件支持,所以高端電視通常會配備一個集成MEMC功能的獨立圖像處理芯片,以達到更自然、流暢的插幀效果?,F(xiàn)在高端電視的顯示芯片不僅支持倍速驅(qū)動,甚至能把視頻插幀達到200幀速率,同時結(jié)合插黑幀等方式提高畫面的流暢度,減小拖影現(xiàn)象。在實際應用中,MEMC的效果主要體現(xiàn)在體育賽事類節(jié)目中。由于物體運動速度較快以及鏡頭擺動幅度較大,這類節(jié)目的畫面又糊又晃,而通過MEMC補償之后,畫面的流暢度會得到質(zhì)的提升,晃動感也會有所減弱。
MEMC在移動端的新生
盡管MEMC技術在電視領域比較普及,但是智能手機上卻鮮少出現(xiàn)。一方面,高刷新率屏幕的手機面世相對電視來說較晚,機型并不多。另—方面,用戶的需求還未充分得到挖掘,為了實現(xiàn)MEMC而在手機上搭載獨立的顯示計算芯片徒增成本。即便這樣,依然有部分廠商敢于人先,嘗試著在手機上加入MEMC技術。
黑鯊是較早支持MEMC補償?shù)氖謾C品牌,2018年發(fā)布的黑鯊游戲手機就搭載Pixelworks Iris顯示處理芯片,集成了PixeIWorks獨家的MotionEngine技術,該技術的原理是通過運動預估算法,給顯示的畫面插幀,不光可以消除抖動和運動模糊,而且能夠使手機渲染的畫面更加流暢,匹配現(xiàn)在高刷新率的手機屏幕。通過這一技術,黑鯊打造了超級影院模式,有效改善了游戲、電影及用戶自拍視頻的視覺體驗。
近期發(fā)售的OPPO Find X2 Pro屏幕配置非常奢華,分辨率達到3168x1440,屏幕刷新率提升至120Hz,觸控采樣率高達240Hz。為了充分利用120Hz屏幕的優(yōu)勢,OPPO特別為Find X2 Pro加入獨立的顯示優(yōu)化芯片,帶來”01超感畫質(zhì)引擎”。借助其中的Motion Clear視頻動態(tài)插幀技術,可以將普通30fps視頻優(yōu)化為60fps以上,從而帶來更順暢的視頻畫面。這項技術目前已經(jīng)支持騰訊視頻、愛奇藝和優(yōu)酷三大平臺。在上一期的評測中,我們選擇擁有大量手持攝影鏡頭的《美國隊長2》作為觀看樣片,通過Motion Clear自適應優(yōu)化,影片中原本眼花繚亂難以辨別的搏斗場面變得順暢清晰。觀看足球或者賽車競速等體育賽事類節(jié)目時,OPPO Find X2Pro也帶來了別開生面的體驗,畫面的流暢度會得到質(zhì)的提升,晃動感也會有所減弱。
4月2日,—加手機官方公布了一加8系列屏幕的更多信息。除此前公布的同時支持2K分辨率和120Hz等特點外,一加8系列還加入了最高120幀的MEMC視頻插幀技術。在應用方面,—加8將支持Bilibili、騰訊視頻、騰訊體育、優(yōu)酷、愛奇藝、MX Player等國內(nèi)外主流在線視頻平臺與應用。
寫在最后
高刷新率屏幕逐漸成為旗艦手機的標準配置,甚至會很快在中端手機上普及,在目前高幀率視頻內(nèi)容缺乏的情況下,MEMC技術將會是拉開手機觀影體驗差異的有效手段,更好地發(fā)揮了高刷新率屏幕應有的作用。不過完全照搬電視領域的經(jīng)驗顯然不合適,無論是MEMC技術還是高幀率屏幕的應用,都對手機性能、續(xù)航、散熱提出了更高的要求,可以說牽—發(fā)而動全身,廠商還需要具體機型具體分析,解決其中的能耗平衡問題。