張平
作為全球最負盛名的攝影器材評測機構(gòu),DXOMark的測試結(jié)果—直以來都被各大廠商和媒體看做攝影的“金標(biāo)準(zhǔn)”,尤其是在手機拍照時代興起之后,DXOMark開始介入手機攝影評價,推出了一系列的評測和排行榜。那么,DXOMark的測試分?jǐn)?shù)代表了什么?這些分?jǐn)?shù)又是如何得來的呢?今天本文就來向你展示DXOMark測試成績背后的秘密。
多聲道耳機登場,更棒的影音體驗
DXOMark是業(yè)內(nèi)老牌評測機構(gòu)。通過多年的發(fā)展,DXOMark建立了相對齊全、完整和客觀的攝影圖像質(zhì)量評價體系,其對鏡頭、相機的成像質(zhì)量評價也得到了業(yè)內(nèi)的高度認可。從2012年開始,DXOMark建立了全新的針對移動設(shè)備的評價標(biāo)準(zhǔn),利用其在傳統(tǒng)攝影器材圖像質(zhì)量評價上的優(yōu)勢,建立了新的移動攝影評價體系,并經(jīng)歷過數(shù)次調(diào)整和優(yōu)化,從而形成了我們今天看到的DXOMark Moblie。
DXOMark Moblie首次評價的移動攝影產(chǎn)品包括蘋果史上最經(jīng)典的手機iPhone 4、三星Galaxy S2和S3、諾基亞Pureview 808以及HTC 8X。在十多年的發(fā)展過程中,DXOMark Moblie評測了超過100款移動設(shè)備,積累了大量數(shù)據(jù),形成了一套完整而獨特的評價體系。不僅如此,借助其在影像評測上的優(yōu)勢,DXOMark Moblie還開設(shè)了面向廠商和專業(yè)人士的影像咨詢業(yè)務(wù),為廠商提供鏡頭、攝像頭、畫質(zhì)優(yōu)化等方面的咨詢和技術(shù)支持服務(wù)。今天,DXOMark Moblie依靠其在移動攝影領(lǐng)域的口碑和影響力,已經(jīng)成為影像業(yè)界非常重要的評價參考資料。在面向普通用戶的方面,DXOMark Moblie的最終評測成績和分?jǐn)?shù),就是人們初窺攝影攝像技術(shù)發(fā)展的—扇窗。這扇“窗”,并不像它表面上的數(shù)字那么簡單,其背后還隱藏了更多更為深邃的內(nèi)容。
DXOMark Moblie測試成績的計算方法
要了解DXOMark Moblie(下文簡稱DX0M)的相關(guān)測試情況,不妨從其最終呈現(xiàn)的結(jié)果開始入手。
對于一般用戶而言,最先接觸到的內(nèi)容就是DXOM的總成績。比如某手機宣傳其DXOM的成績?yōu)?02分,這就是其圖片拍攝和視頻拍攝的總成績。值得注意的是,總成績高并不代表子項成績高。DXOM在計算總成績、分總成績、測試類成績時,均使用自有的算法完成成績統(tǒng)計。人們可能會看到某項分總成績較低,而總成績較高的情況。DXOM也明確表示,總分并不是子分?jǐn)?shù)的加權(quán)和,DXOM采用的是保密算法進行統(tǒng)計,整體得分沒有上限,最高分就表示設(shè)備拍攝品質(zhì)相對最出色。因此,人們除了關(guān)注總分外,還需要額外查看子分?jǐn)?shù),比如喜歡照片的用戶,就應(yīng)該更為關(guān)注DXOM的圖片拍攝的子項分?jǐn)?shù),反之,視頻用戶應(yīng)該更多去了解DXOM的影像拍攝內(nèi)容。
繼續(xù)細分的話,DXOM的圖片拍攝和視頻拍攝兩個子項目是分別由數(shù)十個更底層的子分?jǐn)?shù)綜合計算而來。子分?jǐn)?shù)又由每一個單獨的測試成績綜合而來。舉例而言,以“color”子項目為例,DXOM測試了目標(biāo)不同的光照水平、亮度等級下的成像質(zhì)量,包含了客觀和主觀不同的測試方案,最終可以得到數(shù)十個評分,這些評分經(jīng)過DxOM的算法,變成一個子項成績。在面向公眾的免費內(nèi)容中,DxOM不會公布最底層的單次測試的具體數(shù)值,公布分?jǐn)?shù)的層級僅包含最終總成績、視頻和照片分總成績以及視頻和照片所包含的單項測試成績,數(shù)據(jù)比較C>o但是,DXOM會向付費用戶提供詳細的、多達上百頁的所有單次測試測試數(shù)據(jù)和評分方法,以供付費用戶進行有針對性的改進。
DXOM宣稱自己的測試是可重復(fù)、穩(wěn)定的。DXOM在每次測試中將拍攝近1500張照片和數(shù)十個、總計超過2個小時的視頻。測試在實驗室和自然環(huán)境中同時進行,包含了諸多特定的主題。DXOM的測試分?jǐn)?shù)更偏向于客觀測試,其結(jié)果是由測試設(shè)備直接計算的。這一點和DXOM在相機評測上所使用的方法相同,通過采集相機的RAW格式的照片,DXOM能夠獲得直接經(jīng)過相機鏡頭和CMOS的原始數(shù)據(jù),而不是再經(jīng)過圖像處理單元處理、壓縮過的成片數(shù)據(jù),能夠最直觀地反映出相機本身的物理素質(zhì)。在手機拍攝方面,DXOM采用這樣的方法也是無可厚非的,唯一的問題在于,可能有部分手機無法獲得RAW圖像,因此對這部分手機的測試,DXOM尚未說明如何進行客觀化平測。也有一種可能是DXOM能夠聯(lián)系廠商,采集到最原始的數(shù)據(jù)。
在客觀測試之外,DXOM還進行了一些主觀測試,其中包括一些復(fù)雜的照片和指標(biāo),交由一組圖像專家比較需要人類判斷的圖像質(zhì)量的各個方面,然后給出測試結(jié)果。每一款設(shè)備測試耗時大約需要一周時間。
DXOMark Moblie測試子項目解讀
DXOM的測試中圖片拍攝和視頻拍攝是次級子項目,這兩級之下還有不少更細節(jié)的內(nèi)容。根據(jù)DXOMM的說明,圖片拍攝項目有9個三級子項目,視頻拍攝則包含7個三級子項目。下面我們先簡單了解一下圖片拍攝的9個三級子項目具體測試些什么內(nèi)容。
●曝光和對比度測試,包括動態(tài)范圍、曝光重復(fù)性和對比度測試。
這個部分測試用于衡量相機是否能夠正確調(diào)整并捕捉主體和背景的亮度。其中,動態(tài)范圍測試將考察相機對場景中最暗到最亮部分細節(jié)的捕捉能力。這是最重要的分?jǐn)?shù),它將嚴(yán)重影響到所有類型的攝影。實際測試中,DXOM會考察不同光照水平和不同照明類型下的目標(biāo)曝光和對比度,并且計算每個圖像的最大比值,這個場景測試還會加入部分室外場景。
●顏色測試,包括飽和度、色調(diào)、白平衡、白平衡重復(fù)性和顏色陰影測試。
顏色測試主要用于確認相機在各種條件下的色彩準(zhǔn)確程度和色彩呈現(xiàn)效果。色彩對照片和視頻來說都很重要,DXOM在客觀測試中會使用完全一樣的光照和色溫場景來進行色彩測試,并考察在不同光照條件和光線類型下的色彩呈現(xiàn)效果,以及相機如何準(zhǔn)確的渲染色彩、重復(fù)性如何等,此外還需要測試顏色的均勻性。注意,這里并不會由于不同廠商對色彩調(diào)校的取向不同而進行扣分,合理范圍內(nèi)的不同的色彩風(fēng)格都是允許的。
●紋理和噪點測試(在分項分?jǐn)?shù)中被分成2個部分列出)
紋理測試用于衡量相機保留細節(jié)的能力,尤其是在很多手機廠商引入多幀合成、長曝光等降噪技術(shù)后。噪點測試則用于衡量照片中的噪點量,噪點的來源多樣,但較高的噪點會對畫面質(zhì)量造成很大的影響。更進一步來看的話,紋理細節(jié)和噪點實際上是一體兩面,去除噪點意味著會減少細節(jié)并使得紋理更為平滑,因此如何衡量這兩者就顯得非常重要。DXOM的測試包含了從10000Lux到1Lux的不同照度,此外,還加入了包括移動物體的定制場景,用于測試快門速度較慢或者多幀合成這樣的處理帶來的副作用。紋理測試采用的是一張包含符合各種行業(yè)標(biāo)準(zhǔn)的圖表,包括CPIQ,拍攝完成后圖像會打印出來進行分析。
●自動對焦測試,包括自動對焦的速度和可重復(fù)性。
這項測試主要用于測量相機在不同光照條件下拍攝對象的聚焦速度和準(zhǔn)確度。在每次測試前,測試人員都需要進行散焦,然后準(zhǔn)確記錄快門按下到聚焦完成之間的時間,以及陜門本身的時間。測試場景方面,DXOM提供了一個人衛(wèi)陜門觸發(fā)器以及多光束系統(tǒng),確保對焦測試的準(zhǔn)確性。
●偽像測試,包括取景框中的畫面柔和度、失真、漸暈、色差、振鈴、閃光、重影、鋸齒、摩爾紋等內(nèi)容。
偽像測試用于評估相機鏡頭或者CMOS在處理圖像中引入的失真和其他缺陷時的嚴(yán)重程度。這個測試包含的數(shù)據(jù)和內(nèi)容很多,包括清晰度對比、特殊場景測試以及比較重要的運動場景測試等。偽像測試重要的原因依舊是由于手機拍攝往往使用圖像合成技術(shù)降低噪點并提高畫質(zhì),這可能帶來一些錯誤的畫面呈現(xiàn),需要準(zhǔn)確的進行評估。
●閃光燈測試
閃光燈效果測試主要用于評估閃光燈是否能夠有效照亮物體。目前手機上使用的閃光燈非常復(fù)雜,有些手機會使用多色LED將閃光燈的顏色和環(huán)境光進行匹配。閃光燈測試包括閃光燈作為獨立光源、以及閃光燈和其他光源包括自然光源一起使用的效果,測試的數(shù)據(jù)考慮了顏色保留程度、白平衡以及光線衰減情況等。
●變焦測試
變焦測試是新加入的測試項目。這項測試已經(jīng)變得更為重要,因為很多手機廠商都會使用擁有多個不同焦距的相機來實現(xiàn)多焦段和變焦拍攝。DXOM新的測試包含從2倍到10倍的不同變焦方案下的圖像質(zhì)量的評價標(biāo)準(zhǔn)。實際測試中,手機往往使用不同的方案來實現(xiàn)變焦,比如遠攝鏡頭、混合變焦、裁剪照片、簡單縮放等,因此需要進行不同焦段的測試以突出每個方案的優(yōu)缺點。另外,長焦鏡頭往往不如主鏡頭那么明亮(光圈更?。糠窒鄼C在低光照下會用主鏡頭進行裁剪變焦,因此測試中還會包含不同光照條件下的變焦測試。
●背景虛化測試
背景虛化測試用于評估景深效果的平滑度、模糊程度?,F(xiàn)在有很多手機加入“肖像模式”用于模擬傳統(tǒng)相機的光學(xué)背景虛化效果,因此這部分也需要獨立的測試。DxOM在這個測試中采用了全新的場景,用于衡量相機是否能夠?qū)⑴臄z對象和背景準(zhǔn)確分離,以及相機所采用的距離檢測方法是否足夠有效等。
上述9項內(nèi)容(紋理和噪點測試被放在一項中介紹了,在評分時是分開的)是DXOM在照片評價上的所有部分。實際上,本文只是對這些測試內(nèi)容進行了簡單解讀,真正的測試過程根據(jù)DXOM的描述要復(fù)雜很多,包括大量的標(biāo)準(zhǔn)條件下的實驗室測試和大量的室外測試,其嚴(yán)謹(jǐn)程度和復(fù)雜程度令人咋舌。除了照片拍攝外,DXOM還給出了視頻拍攝的測試內(nèi)容簡述,其中除了最后—項穩(wěn)定性測試外,主要內(nèi)容都和照片拍攝相同,因此下面本文只介紹穩(wěn)定性測試的內(nèi)容,其他部分可參考上文照片拍攝。
視頻測試部分子項目包括:曝光、顏色、紋理和噪點測試、自動對焦測試、偽像和穩(wěn)定性測試。穩(wěn)定性測試僅存在于視頻測試中,用于衡量相機在拍攝視頻時消除抖動的能力。一般來說目前智能手機的攝像頭都包含了光學(xué)穩(wěn)定和電子穩(wěn)定設(shè)計,或者兩者皆有,每種類型都有自己的優(yōu)缺點,取決于手機攝像頭的性能。DXOM的測試包含不同類型的運動模擬以及拍攝期間可能發(fā)生的相機抖動,可以檢驗相機穩(wěn)定系統(tǒng)能夠在何種程度上進行畫面防抖補償。
在上述內(nèi)容之外,值得一提的是,本文所敘述的內(nèi)容是DXOM測試2017年新版本調(diào)整后的內(nèi)容。而2017年9月11日新版本發(fā)布之前的設(shè)備,使用的是2012年的測試標(biāo)準(zhǔn)。相比老的測試標(biāo)準(zhǔn),新的測試標(biāo)準(zhǔn)主要是加入了變焦測試和背景虛化測試,此外,自動對焦和清晰度測試也被加強了加入了運動場景和圖像捕捉速度等內(nèi)容,新的更低光照度測試的加入,使得測試范圍大幅度擴展,包括1Lux和20Lux這樣的極低光照水平的靜態(tài)圖像和動態(tài)視頻分析等。視頻分析方面,2017版本加入了一些客觀測試,包括視頻錄制期間光照變化對視頻平滑度帶來的影響等。DXOM特別說明,新的2017標(biāo)準(zhǔn)和舊的2012標(biāo)準(zhǔn)是完全不同的,因此前者的成績不可以和后者直接比較,DXOM目前只展示了2017標(biāo)準(zhǔn)下的測試成績。
另外,DXOM還提示不同的用戶應(yīng)該如何閱讀測試結(jié)果。比如對旅游和度假而言,曝光、色彩和變焦能力應(yīng)該被重點考察;家庭拍攝方面,閃光燈、噪點、自動對焦、視頻穩(wěn)定性、背景虛化等功能可能更為有用;運動視頻錄制方面,曝光、自動對焦、視頻穩(wěn)定性、變焦的能力更為重要;攝影愛好者則應(yīng)該著重考慮噪點、紋理、對比度、偽像等內(nèi)容,當(dāng)然,優(yōu)秀的背景虛化能力也不可少。
專業(yè)的測試標(biāo)準(zhǔn)和一些質(zhì)疑的聲音
在測試標(biāo)準(zhǔn)之外,DXOM和DX0組織還介紹了大量有關(guān)測試的場景、設(shè)備以及他們專利設(shè)計的一些測試方法等。從這些內(nèi)容來看,DXO在圖像質(zhì)量測試方面還是頗有建樹的。比如引入了大量的自動化測試場景、標(biāo)準(zhǔn)的測試方案以及特別設(shè)計的設(shè)備(比如LED萬能定時器),另外,DXO還定義了大量的圖像質(zhì)量標(biāo)準(zhǔn),可重復(fù)的測試場景和大量的圖表、標(biāo)準(zhǔn)畫面等。這些標(biāo)準(zhǔn)化、自動化又不失科學(xué)性的場景和設(shè)計的加入,使得DXO以及DXOM迅速成長為業(yè)內(nèi)測試的標(biāo)桿之_,其測試內(nèi)容也被各大廠商廣泛應(yīng)用,形成了今天的態(tài)勢。
雖然DXO在標(biāo)準(zhǔn)化和測試流程上下了很多功夫,但還是有一些質(zhì)疑的聲音存在。其中比較典型的就是面向公眾的保密算法和不公開的測試流程,除了廠商可以獲得數(shù)據(jù)外,公眾無法得到更多的測試信息,自然也對測試內(nèi)容表示懷疑。在一些標(biāo)準(zhǔn)設(shè)立和質(zhì)量評估傾向上,DXO的選擇可能遭到部分用戶的反對。另外,DXO的一些測試并不都是客觀性測試,在加入了一些主觀內(nèi)容后,尤其是在一些需要人工操作的評估的內(nèi)容方面,DXOM還做得不夠完善,比如拍攝時鏡頭是否擦拭干凈、人工自然拍攝場景是否嚴(yán)格保持一致等,都在部分評測中收到了一些來自用戶的疑問。甚至還有一些用戶發(fā)現(xiàn)DXO為幾乎完全相同的相機模塊軟硬件打出了差距較大的分?jǐn)?shù),甚至新老不同代次的產(chǎn)品分?jǐn)?shù)分布并不合理,這些都影響了DXO的準(zhǔn)確性和可信度。目前還有部分廠商拒絕自己的產(chǎn)品列入DXO的評測中,不得不說這是DXO在標(biāo)準(zhǔn)和測試上需要進一步考慮的地方。
總的來看,作為全球領(lǐng)先的測試機構(gòu),DXO和DXOM在測試標(biāo)準(zhǔn)化和測試內(nèi)容設(shè)計上,的確足夠全面而優(yōu)秀。希望DXO未來能夠進一步優(yōu)化標(biāo)準(zhǔn),減少人工誤差,以更客觀和更穩(wěn)定的測試成績來回報客戶,進一步鞏固自己的業(yè)界地位。