陳柱銘 郭磊 黃振興

摘? 要：在“地?cái)偨?jīng)濟(jì)”下的城市環(huán)境智能監(jiān)測系統(tǒng)的搭建過程中，文章針對戶外攝像頭在霧天、雪天、雨天或霧霾等影響下，獲取的圖像會(huì)出現(xiàn)模糊、過暗或細(xì)節(jié)丟失等現(xiàn)象進(jìn)行了研究。對比了基于圖像增強(qiáng)的全局直方圖均衡化、局部直方圖均衡化、單尺度Retinex算法、多尺度加權(quán)平均Retinex算法以及帶色彩恢復(fù)的多尺度Retinex算法的圖像去霧原理和仿真結(jié)果。引入多種客觀評估指標(biāo)，構(gòu)建了主客觀評價(jià)和客觀評估相結(jié)合的圖像去霧效果評價(jià)方法。

關(guān)鍵詞：圖像去霧評估;直方圖均衡化;Retinex算法

中圖分類號：TP391.4;TP301.6? ? ? ?文獻(xiàn)標(biāo)識碼：A 文章編號：2096-4706（2021）01-0095-04

Research on the Defogging Algorithm Based on Image Enhancement

CHEN Zhuming，GUO Lei，HUANG Zhenxing

（Guangdong Ocean University，Zhanjiang? 524088，China）

Abstract：In the process of building an intelligent monitoring system for urban environment under the “stall economy”，this paper studies the phenomenon that the images obtained by outdoor cameras will appear blurred，too dark or details lost under the influence of fog，snow，rain or haze. The principles and simulation results of global histogram equalization，local histogram equalization，single scale Retinex algorithm，multi-scale weighted average Retinex algorithm and multi-scale Retinex algorithm with color restoration are compared. By introducing a variety of objective evaluation indexes，an image defogging effect evaluation method combining subjective and objective evaluation is constructed.

Keywords：image defogging evaluation;histogram equalization;Retinex algorithm

0? 引? 言

新冠肺炎疫情沖擊過后，“地?cái)偨?jīng)濟(jì)”火爆全國，但其經(jīng)營后的垃圾殘留也對城市環(huán)境造成很大影響，因此“地?cái)偨?jīng)濟(jì)”下城市環(huán)境的智能監(jiān)測就成為亟須解決的問題。在監(jiān)測過程中，由于霧、雪、雨或霧霾等不良?xì)庀蟓h(huán)境的存在，戶外成像系統(tǒng)所成圖像的清晰度受到了極大的影響，因此用圖像增強(qiáng)的方法來實(shí)現(xiàn)圖像去霧的效果就成為了一種流行的處理思路[1]。

目前，基于圖像增強(qiáng)的去霧算法研究較為常見的方法有：基于直方圖均衡化算法的去霧，和基于Retinex算法的去霧，其中直方圖均衡化算法可細(xì)分為全局直方圖均衡化和局部直方圖均衡化;Retinex算法可分為單尺度Retinex（SSR），多尺度加權(quán)平均Retinex（MSR）和帶色彩恢復(fù)的多尺度Retinex（MSRCR）。本文通過對上述算法進(jìn)行原理解讀和仿真并引入多種客觀評估指標(biāo)，實(shí)現(xiàn)了主客觀評價(jià)和客觀評估相結(jié)合的圖像去霧效果評價(jià)體系。

1? 基于直方圖均衡化的去霧算法

基于直方圖均衡化的去霧算法主要思想就是對原圖像的直方圖進(jìn)行均衡處理。由于霧天降質(zhì)圖像相比原圖像，其灰度直方圖的灰度級分布較為集中，進(jìn)而導(dǎo)致降質(zhì)圖像的亮度比原圖暗。因此，可以通過對霧天降質(zhì)圖的直方圖的對比度進(jìn)行拉伸處理，讓降質(zhì)圖中較為集中的灰度級能夠相對均勻地分布在灰度空間中，進(jìn)而達(dá)到拉伸圖像對比度，突出圖像細(xì)節(jié)，提高質(zhì)量的效果[2]。霧天降質(zhì)圖的變換函數(shù)可表示為：

（1）

其中，sk為變換后的圖像灰度級;T（）為灰度變換函數(shù);rk為霧天降質(zhì)圖的灰度級，rk∈[0，1];pr（r）為霧天降質(zhì)圖的概率密度函數(shù)，k=0，1，2，…，255。

1.1? 全局直方圖均衡化

全局直方圖均衡化處理的基本思想就是通過對彩色圖像的R、G、B三層通道分別進(jìn)行直方圖均衡化處理，然后合并形成新的圖像。霧天氣象下的城鎮(zhèn)圖像原圖和進(jìn)行全局直方圖均衡化去霧處理后的圖像的對比圖如圖1所示。

通過圖1中的對比，可以發(fā)現(xiàn)均衡化處理后的降質(zhì)圖，視覺可見比原來的降質(zhì)圖更加清晰，細(xì)節(jié)更加的突出;通過比較變換前后城鎮(zhèn)圖的直方圖，也可發(fā)現(xiàn)處理后圖像的直方圖，灰度的分布也比原圖直方圖的分布更加均勻。

1.2? 局部直方圖均衡化

局部直方圖均衡化是在全局直方圖均衡化的基礎(chǔ)上，將原圖像單個(gè)顏色通道的信息劃分為數(shù)個(gè)非重疊的子塊，并對每個(gè)子塊進(jìn)行獨(dú)立的直方圖均衡化處理，疊加經(jīng)處理后的子塊，就可得到新圖像[3]。霧天氣象下的衛(wèi)星圖原圖和局部直方圖均衡化處理后的圖像的對比圖如圖2所示。

通過圖2直觀對比，可以發(fā)現(xiàn)均衡化處理后的降質(zhì)圖，視覺可見比原來的降質(zhì)圖更加的突出細(xì)節(jié);處理后圖像的直方圖，灰度的分布也確實(shí)比原圖直方圖的分布更加均勻。

2? 基于Retinex的去霧算法

Retinex理論是根據(jù)人類視覺系統(tǒng)提出的一種圖像增強(qiáng)理論，是在色感一致性（顏色恒常性）基礎(chǔ)上提出的。色感一致性是指反射物體其本體的顏色不是受反射光強(qiáng)度大小和受光照非均勻性所影響，而是由物體本體對不同光波（長波（紅色）、中波（綠色）、短波（藍(lán)色））的反射能力所決定[4]。根據(jù)該理論，圖像的形成可以拆分為入射圖像和反射圖像，其中反射圖像可表示為：

S（x，y）=R（x，y）·L（x，y）? ? ? ? ? ? ? （2）

其中，S（x，y）為觀察者所接收的反射物體圖像，R（x，y）為物體的反射率，L（x，y）為入射光。

2.1? 單尺度Retinex算法

單尺度Retinex算法是三種Retinex算法中較為簡單的一種增強(qiáng)算法，其計(jì)算公式為：

r（x，y）=logS（x，y）-log[F（x，y）*S（x，y）] （3）

其中，r（x，y）為輸出圖像;F（x，y）為中心環(huán)繞函數(shù);*為卷積運(yùn)算[4]。

2.2? 多尺度加權(quán)平均Retinex算法

MSR是以SSR為基礎(chǔ)而發(fā)展過來的，它相對SSR而言，優(yōu)點(diǎn)在于處理后的圖像能夠同時(shí)保持圖像的動(dòng)態(tài)范圍壓縮和色調(diào)再現(xiàn)[5]。因?yàn)镸SR的原理和SSR相似，所以多尺度Retinex算法會(huì)分為大、中、小三個(gè)尺度，多尺度Retinex算法的基本公式如式（5）所示：

Ri（x，y）={logS（x，y）-log[F（x，y）*S（x，y）]}

（4）

其中，i∈{R，G，B}代表三個(gè)顏色通道;Ri（x，y）為第i個(gè)顏色通道中被處理后的圖像;Wn為尺度的權(quán)重系數(shù);N為尺度的個(gè)數(shù)，當(dāng)N=1時(shí)，表示圖像為灰度圖像，N=3時(shí)，表示圖像為彩色圖像。

2.3? 帶色彩恢復(fù)的多尺度Retinex算法

J.J.McCann和Jobsond等科學(xué)家又在MSR的基礎(chǔ)上，提出了具有顏色恢復(fù)因子的多尺度Retinex算法——MSRCR[6]。該算法通過引入一個(gè)色彩恢復(fù)因子C來補(bǔ)償由于圖像對比度的過度增強(qiáng)而導(dǎo)致的顏色失真，通常情況下所引入的色彩恢復(fù)因子可表示為：

RMSRCRi（x，y）=Ci（x，y）·RMSRi（x，y）? ? ? ?（5）

（6）

f [Ii（x，y）]=β{log[αIi（x，y）]-log[（x，y）] （7）

其中，Ii（x，y）表示第i個(gè)顏色通道的圖像信息;β是增益常數(shù);α是受控制的非線性強(qiáng)度;Ci表示第i個(gè)通道的色彩恢復(fù)系數(shù)，用來盡可能恢復(fù)到原圖的三通道顏色分量比例;f（ ）表示的是色彩空間的映射函數(shù)。

2.4? 改進(jìn)的MSRCR算法

無論是SSR算法，還是MSR算法或者M(jìn)SRCR算法，對圖像進(jìn)行處理后，可以達(dá)到一定的除霧效果，但是圖像的某些細(xì)節(jié)仍然不夠突出，圖像仍然模糊，或者是色彩失真，根本原因在于圖像的最大動(dòng)態(tài)范圍未能被充分利用。為了更好地利用到圖像的最大動(dòng)態(tài)范圍，可以對由Retinex算法處理后的圖像進(jìn)行線性拉伸和CLAHE，以此來進(jìn)一步增強(qiáng)處理后圖像的對比度，使原圖像的灰度范圍從其本身的[Rmin，Rmax]拉伸到我們設(shè)定的[0，255]，線性拉伸的公式為：

（8）

然后通過限制對比度自適應(yīng)直方圖均衡，即對直方圖均衡化進(jìn)行對比度限幅，通過在計(jì)算累積直方圖函數(shù)之前預(yù)定義的閾值來切割原始圖像的直方圖以達(dá)到限制幅度的目的。

2.5? 仿真結(jié)果分析

本節(jié)將上文提到的三種Retinex算法和改進(jìn)的MSRCR算法進(jìn)行仿真實(shí)現(xiàn)，所得結(jié)果如圖3所示。

可以看出，經(jīng)過三種Retinex算法處理后的各個(gè)圖像都一定程度上實(shí)現(xiàn)了去霧的效果，而改進(jìn)后的MSRCR算法則在MSRCR基礎(chǔ)上降低了亮度，說明改進(jìn)是有效的，效果也更好。

3? 圖像質(zhì)量評估指標(biāo)

正常來說，評價(jià)一張圖像的好壞可分為主觀評價(jià)和客觀評價(jià)兩種。下文將結(jié)合本文的霧天降質(zhì)圖內(nèi)容來構(gòu)建主觀評價(jià)和客觀評價(jià)相結(jié)合的評價(jià)體系。

3.1? 主觀評價(jià)

主觀評價(jià)是由參評員從個(gè)人角度出發(fā)，帶有一定的個(gè)人感情色彩，按照一定的標(biāo)準(zhǔn)去主觀地評價(jià)圖像質(zhì)量的好壞。其要符合兩個(gè)要求：

（1）參評員應(yīng)該具備隨機(jī)性，即來自四面八方，各自的評價(jià)要求不同;

（2）參評員應(yīng)該基數(shù)較大，即數(shù)目越多，結(jié)果就越具備代表性。

其標(biāo)準(zhǔn)可參照表1給出的數(shù)據(jù)。

3.2? 客觀評價(jià)

本節(jié)將對文中出現(xiàn)過的衛(wèi)星圖和城鎮(zhèn)圖進(jìn)行仿真計(jì)算，通過比較它們的均值μ、標(biāo)準(zhǔn)差std、峰值信噪比PSNR來客觀地評價(jià)文中提到的各算法的圖像去霧效果。

表2給出圖像處理前后各算法所得均值?？梢?，經(jīng)全局均衡化算法處理的圖像均值最為接近理想數(shù)值。但全局均衡化處理出現(xiàn)了顏色失真，即僅靠均值無法正確地表達(dá)感受。而其他算法得出的均值有偏差，是因?yàn)殪F天條件下光照放射不均勻，導(dǎo)致圖像光照分布不均勻，進(jìn)而導(dǎo)致圖像存在偏差。

表3給出圖像處理前后各算法所得標(biāo)準(zhǔn)差?？梢姡?jīng)算法增強(qiáng)后各圖像都高于霧天降質(zhì)圖的標(biāo)準(zhǔn)差，表明這些增強(qiáng)后的圖片更加清晰，細(xì)節(jié)更加的突出，與我們之前對圖像的主觀評價(jià)結(jié)果一致。

結(jié)合表4，我們可以看到經(jīng)過算法處理后的圖像，其信噪比都有正向增加。單獨(dú)對比各算法，我們發(fā)現(xiàn)對于全局直方圖均衡化和局部均衡化處理的圖像，其信噪比均高于Retinex算法，與人的主觀評價(jià)不一致。這是由于PSNR和MSE兩指標(biāo)固有的缺陷，這也進(jìn)一步證明評價(jià)圖像要全面。

4? 結(jié)? 論

本文在對不同去霧算法實(shí)際去霧效果分析的基礎(chǔ)上，構(gòu)建了主客觀相結(jié)合的圖像去霧效果評價(jià)體系。該體系能有效避免主觀評價(jià)的個(gè)體因素影響，能更有效客觀的對去霧效果進(jìn)行評價(jià)。但由于客觀評價(jià)指標(biāo)的多樣性以及不同去霧算法的差異性，未來還需對更多客觀評價(jià)指標(biāo)的深度和廣度進(jìn)行更有效的評估和篩選。

參考文獻(xiàn)：

[1] 馬文君，劉金虎，王小鵬，等.結(jié)合Lab空間和單尺度Retinex的自適應(yīng)圖像去霧算法 [J].應(yīng)用光學(xué)，2020，41（1）：100-106.

[2] 謝娜.基于圖像增強(qiáng)的圖像去霧算法研究 [J].機(jī)械設(shè)計(jì)與制造工程，2017，46（12）：31-33.

[3] 汪秦峰.基于直方圖均衡化和Retinex的圖像去霧算法研究 [D].西安：西北大學(xué)，2016.

[4] 王超.基于圖像增強(qiáng)的幾種霧天圖像去霧算法 [J].自動(dòng)化應(yīng)用，2018（2）：70+80.

[5] 黃楙森.霧天退化圖像的去霧算法研究 [D].西安：西安電子科技大學(xué)，2019.

[6] 劉雪峰，劉學(xué)遠(yuǎn)，付民.基于圖像增強(qiáng)和復(fù)原的圖像去霧方法研究 [J].現(xiàn)代電子技術(shù)，2018，41（6）：18-22.

作者簡介：陳柱銘（1997—），男，漢族，廣東佛山人，本科，研究方向：圖像處理;通訊作者：郭磊（1982—），男，漢族，黑龍江哈爾濱人，講師，博士，研究方向：圖像處理與機(jī)器視覺;黃振興（1998—），男，漢族，廣東廉江人，本科在讀;研究方向：機(jī)器視覺。