李亞蘭,邱永生,彭紅光,李志揚(yáng)
(1.華中師范大學(xué)物理科學(xué)與技術(shù)學(xué)院,湖北武漢430079;2.湘南學(xué)院電子信息與電氣工程學(xué)院,湖南郴州423000;3.湘潭大學(xué)物理與光電工程學(xué)院,湖南湘潭411105)
一種不同光照條件下的變動(dòng)物體檢測(cè)方法
李亞蘭1,2,邱永生1,彭紅光3,李志揚(yáng)1
(1.華中師范大學(xué)物理科學(xué)與技術(shù)學(xué)院,湖北武漢430079;2.湘南學(xué)院電子信息與電氣工程學(xué)院,湖南郴州423000;3.湘潭大學(xué)物理與光電工程學(xué)院,湖南湘潭411105)
在場(chǎng)景中添加與覆蓋區(qū)域顏色相近的物體,改變光照方向和強(qiáng)度,構(gòu)成1幅新的圖像。為從新圖像中檢測(cè)出新添加的物體(變動(dòng)物體),且不受光照改變的影響,采用多尺度結(jié)構(gòu)張量的方法提取圖像紋理特征,采用歸一化RGB色彩模型提取圖像色彩特征,2種特征通過自適應(yīng)權(quán)重系數(shù)結(jié)合,由此檢測(cè)變動(dòng)物體。采用光照變化條件下顏色紋理特征不同的圖像進(jìn)行對(duì)比實(shí)驗(yàn),結(jié)果表明:在光照緩慢變化時(shí),采用多尺度結(jié)構(gòu)張量的方法和歸一化RGB色彩模型可抑制光照變化的影響;兩者結(jié)合能有效檢測(cè)出變動(dòng)物體。
變動(dòng)物體檢測(cè);光照條件;多尺度小波
分析和檢測(cè)圖像之間的差異是圖像應(yīng)用領(lǐng)域的基礎(chǔ)步驟,如遙感圖像分析[1]、產(chǎn)品缺陷檢測(cè)[2]、動(dòng)態(tài)目標(biāo)跟蹤[3]等。變動(dòng)物體檢測(cè)方法主要有:基于圖像相減的方法[4],由于景物的變動(dòng)、噪聲和光照條件的改變都會(huì)影響圖像相減的結(jié)果,從而采用此方法很難準(zhǔn)確判斷圖像變化是物體變動(dòng)造成的還是光照或噪聲造成的;基于概率的方法[4],以圖像中變動(dòng)和不動(dòng)區(qū)域的概率密度為依據(jù),結(jié)合一定的準(zhǔn)則進(jìn)行判斷,該方法對(duì)噪聲不敏感但對(duì)光照的變化仍很敏感;基于預(yù)測(cè)模型的方法[4],建立圖像的時(shí)空預(yù)測(cè)模型,結(jié)合實(shí)際值和預(yù)測(cè)值來判斷結(jié)果,該方法需要大量視頻信息,計(jì)算過程復(fù)雜。
通常紋理受光照影響不大,可將其作為變動(dòng)物體的檢測(cè)依據(jù)。多尺度結(jié)構(gòu)張量最早由Scheunders[5]提出,主要用于彩色圖像的增強(qiáng)和濾噪,可精確表征圖像紋理。本文采用多尺度結(jié)構(gòu)張量方法提取物體表面紋理信息,同時(shí)采用對(duì)光照變化具有抑制作用的歸一化RGB色彩模型提取物體色彩信息,二者通過自適權(quán)重系數(shù)相結(jié)合,以此來檢測(cè)變動(dòng)的物體。
1.1 紋理特征的提取
紋理的2個(gè)主要特征是方向和頻率,前者為紋理延伸的方向,后者為紋理變化的快慢。表示圖像紋理的結(jié)構(gòu)張量T(Tensor)如
式中σx,σy分別為高斯函數(shù)沿x軸和y軸標(biāo)準(zhǔn)差。構(gòu)造小波函數(shù)
將式(2),(3)進(jìn)行尺度變換得到多尺度的小波變換函數(shù)和平滑函數(shù)
式中:L為零時(shí),QL為原始數(shù)字圖像灰度;D為狄拉克濾波器[1,0,0]T;B為有限中心差分濾波器[0.5,-0.5]T;G為高斯濾波器[0.125,0.375,0.375,0.125]T;BL為在B中任意相鄰系數(shù)間安插 aL-1個(gè)零后的濾波器[0.125,0,…,0,0.375,0,…,0,0.375,0,…,0,0.125]T;GL為在G中任意相鄰系數(shù)間安插aL-1個(gè)零后的濾波器[0.5,0,…,0,-0.5]T。結(jié)合式(1)~(6),得L尺度張量TL如
相比式(1),式(7)還可表達(dá)紋理頻率特征,不同尺度L對(duì)應(yīng)不同的頻率。TL易受噪聲的影響,因此要對(duì)TL濾波。傳統(tǒng)的高斯濾波器在濾除噪聲時(shí),因其平滑作用使圖像紋理變得模糊。針對(duì)該問題,采用非線性的各向同性擴(kuò)散濾波器[7],其擴(kuò)散方程為
式中:i表分量數(shù),取值范圍為1~3;vL,i對(duì)應(yīng)vL.1=TLx,vL,2=TLy,vL,3=TLxy;p2為使分母不為零的參數(shù);p1為紋理清晰度控制參數(shù);t為擴(kuò)散時(shí)間。式(8)源于熱擴(kuò)散方程,右邊的分母反比于熱擴(kuò)散系數(shù),正比于圖像紋理。無紋理部分?jǐn)U散系數(shù)大,濾波程度大,因平滑作用趨于平坦;而紋理部分濾波程度小,擴(kuò)散系數(shù)小,不會(huì)因平滑而變模糊。TL濾波后記為,稱為多尺度結(jié)構(gòu)張量。
1.2 色彩特征的提取
根據(jù)雙色反射模型[8],物體反射由體反射和面反射組成。體反射時(shí),光線透過物體表面入射到物體內(nèi)部再折回物體表面,光線色彩受物體色彩調(diào)制;面反射時(shí),光線沒有穿透物體表面,直接在物體表面進(jìn)行反射,光線色彩與物體色彩無光。設(shè)物體表面粗糙,此時(shí)可以只考慮體反射。體反射光線色彩分量如
式中r,g,b僅與物體反射率有關(guān),因此,在光照變化時(shí)近似保持不變。
1.3 目標(biāo)檢測(cè)
求取第1,2幅圖像RGB歸一化后的值分別為r1,g1,b1,r2,g2,b2,兩圖像色彩距離如
將drgb歸一化后記為drgbn。綜合紋理與色彩距離如
其中wrgb,wtext分別為色彩與紋理的自適應(yīng)權(quán)重系數(shù),當(dāng)時(shí),wrgb=0。將d二值化后進(jìn)行二值形態(tài)學(xué)開啟和閉合操作,得到變動(dòng)物體的檢測(cè)結(jié)果。
實(shí)驗(yàn)中圖像采用柯達(dá)相機(jī)DX7590拍攝,圖像分辨率為640×480,光源為40 W白熾燈。相關(guān)參數(shù)取值:L=3,p1=0.6,p2=0.000 1,C=3,t=20 s,G=[0.125,0.375,0.375,0.125]T,B=[0.5,-0.5]T,D=[1,0,0]T。檢測(cè)程序運(yùn)行于Matlab2014,在安裝Window7操作系統(tǒng)和4核Intel Core Q8300 CPU臺(tái)式PC機(jī)上,平均檢測(cè)時(shí)間為7 s。
第1組實(shí)驗(yàn)圖像如圖1。比較圖1(a),(b)可知:兩圖光照強(qiáng)度和方向均有改變,圖1(a)中膠水瓶的影子位于膠水瓶右后側(cè)且其光照強(qiáng)度較弱;圖1(b)中膠水瓶的影子位于膠水瓶左后側(cè)且其光照強(qiáng)度較強(qiáng),且增加了1本書籍,其他各處不變。用多尺度結(jié)構(gòu)張量的方法分別求取圖1(a),(b)的3個(gè)尺度紋理和兩圖紋理距離,結(jié)果如圖2。
比較圖2(a),(d),(g)及圖2(b),(e),(h)可見,L由小變大,紋理尺度逐步增大。比較圖2(c),(f),(i)可見,L由小變大,小尺度紋理距離逐步減弱。
為對(duì)比多尺度結(jié)構(gòu)張量方法提取紋理特征的效果,采用多尺度結(jié)構(gòu)張量方法,sobel和canny 3種方法檢測(cè)圖1(a)和(b)的紋理距離,結(jié)果如圖3。圖3(a)中不動(dòng)物體區(qū)域紋理未發(fā)生變化,紋理距離本該較小,但計(jì)算出sobel紋理距離較大,這可能是光照變化引起的;圖3(b)中變動(dòng)物體區(qū)域紋理距離稍稍增大,仍不夠明顯;圖3(c)中不動(dòng)物體區(qū)域紋理距離較小,在變動(dòng)物體區(qū)域紋理距離較大,變動(dòng)物體上的字跡輪廓均清晰可見,說明該方法真實(shí)反應(yīng)了紋理的變化,受光照變化影響較小。綜合比較可得出,采用多尺度結(jié)構(gòu)張量方法檢測(cè)圖像的紋理距離更準(zhǔn)確。
除歸一化RGB色彩模型,采用l1l2l3[9]、HSY[10]、RGB等色彩模型也能提取圖像色彩特征。為對(duì)比歸一化RGB色彩模型提取變動(dòng)物體區(qū)域和不動(dòng)物體區(qū)域的色彩距離的效果,采用上述4種色彩模型計(jì)算圖1(a)和(b)的色彩距離,結(jié)果如圖4。比較圖4(a),(b),(c),(d)可知,歸一化RGB色彩距離對(duì)光照變化最不敏感。
將多尺度結(jié)構(gòu)張量方法的紋理距離和歸一化RGB色彩模型的色彩距離按照式(14)結(jié)合,檢測(cè)第1組圖像的綜合紋理距離與色彩距離,結(jié)果如圖5。對(duì)比圖4(d),圖3(c),圖5(a)可見:變動(dòng)區(qū)域文字部分的色彩距離較小,但綜合距離較大;變動(dòng)區(qū)域非文字部分的紋理距離較小,但綜合距離也較大。圖5(b)為將圖5(a)二值化(域值0.1)并進(jìn)行二值形態(tài)學(xué)開啟和閉合操作后的圖形,圖5(c)為對(duì)應(yīng)圖1(b)中檢測(cè)出的變動(dòng)物體,可見變動(dòng)物體被檢測(cè)出來。表明多尺度結(jié)構(gòu)張量方法和歸一化RGB色彩模型更能抑制光照強(qiáng)度,檢測(cè)出變動(dòng)物體。
第2組實(shí)驗(yàn)圖像如圖6。圖6(b)增加了與背景色彩相近的毛巾,其余各處不變。圖6(a),(b)的3種不同紋理距離如圖7。對(duì)比圖7(a),(b),(c)可知,變動(dòng)物體的紋理距離在圖7(c)中非常明顯,而在圖7(a)中不太明顯,圖7(b)中原本紋理距離較小的位置也出現(xiàn)了較大的紋理距離。
第2組圖像檢測(cè)結(jié)果如圖8。對(duì)比圖8(a),(b)與圖7(c),變動(dòng)區(qū)域色彩距離小但綜合距離大。圖8(c),(d)分別為二值化檢測(cè)結(jié)果與對(duì)應(yīng)圖6(b)的檢測(cè)結(jié)果,可見,變動(dòng)物體被檢測(cè)出來。進(jìn)一步表明,多尺度結(jié)構(gòu)張量的方法和歸一化RGB色彩模型更能抑制光照的影響,檢測(cè)出變動(dòng)的物體。
光照條件的改變?cè)趯?shí)際圖像應(yīng)用領(lǐng)域中普遍存在,為了抑制光照變化對(duì)變動(dòng)物體檢測(cè)的影響,使用多尺度結(jié)構(gòu)張量的方法提取物體表面紋理信息,采用對(duì)光照變化具有抑制作用的色彩模型提取物體色彩信息,進(jìn)一步以自適應(yīng)權(quán)重系數(shù),綜合紋理信息和色彩信息,來檢測(cè)變動(dòng)的物體。采用歸一化RGB色彩模型,l1l2l3, HSY和RGB 4種顏色模型和多尺度結(jié)構(gòu)張量方法,sobel和canny 3種紋理提取方法對(duì)光照變化條件下的兩組圖像進(jìn)行對(duì)比實(shí)驗(yàn),結(jié)果表明多尺度結(jié)構(gòu)張量和歸一化RGB色彩模型相對(duì)其他方法更能抑制光照的影響,有效檢測(cè)出變動(dòng)物體,且計(jì)算簡(jiǎn)便快速。
[1]陳勁松,黃健熙,林琿,等.基于遙感信息和作物生長(zhǎng)模型同化的水稻估產(chǎn)方法研究[J].中國(guó)科學(xué):信息科學(xué),2010,40(增刊): 173-183.
[2]王培珍,高尚義,程健.一種基于局部二進(jìn)制模式的帶鋼表面缺陷初級(jí)檢測(cè)方法[J].中國(guó)圖象圖形學(xué)報(bào),2009,14(6):1156-1161.
[3]駱力,諶小躒,井夢(mèng)曦.基于線陣CCD的電子白板技術(shù)研究[J].安徽工業(yè)大學(xué)學(xué)報(bào)(自然科學(xué)版),2014,31(2):183-187.
[4]Radke R J,Andra S,Alkofahi O,et al.Image change detection algorithms:A systematic survey[J].Image Processing,IEEE Transactions on,2005,14(3):294-307.
[5]Scheunders P.A multivalued image wavelet representation based on multiscale fundamental forms[J].IEEE Transactions on Image Processing,2002,11(5):568-575.
[6]Manjunath B S,Ma W Y.Texture features for browsing and retrieval of image data[J].IEEE Transactions on Pattern Analysis and Machine Intelligence,1996,18(8):837-842.
[7]Gerig G,Kubler O,Kikinis R,et al.Nonlinear anisotropic filtering of MRI data[J].IEEE Transactions on Medical Imaging,1992, 11(2):221-232.
[8]湯一平,宗明理,吳立娟.基于雙色反射模型的彩色結(jié)構(gòu)光色彩識(shí)別的研究[J].計(jì)算機(jī)學(xué)報(bào),2013,36(9):1908-1916.
[9]Gevers T,SmeuldersAW M.Color-based object recognition[J].Pattern Recognition,1999,32(3):453-464.
[10]Tan Y,Shi Y H,Tan K C,et al.Advances in Swarm Intelligence[M].Germany:Springer Berlin Heidelberg,2010:680-687.
責(zé)任編輯:何莉
AMethod for Change Object Detection under Different Illumination
LI Yalan1,2,QIU Yongsheng1,PENG Hongguang3,LI Zhiyang1
(1.College of Physical Science and Technology,Central China Normal University,Wuhan 430079,China;2.College of Electronic Information and Electrical Engineering,Xiangnan University,Chenzhou 423000,China;3.School of Physics and Optoelectronics,Xiangtan University,Xiangtan 411105,China)
Add a new object with similar color of the covered area to a scene,built another picture with changed intensity and direction of illumination light.In order to detect the added object under the interference of changed light,firstly the textures of the pictures were extracted using multi-scale structure tensor method,secondly the colors of the pictures were transformed by normalized RGB model,and finally the changing of textures and colors were integrated with self-adapted weighting coefficients.Using pictures captured under varying illuminate light with different color and texture for experiments,it is found that the multi-scale structure tensor method and normalized RGB model are least influenced by slow varying light,when incorporated they provide an efficient means for change object detection.
change object detection;illumination conditions;multi-scale wavelet
TP301.6
A
10.3969/j.issn.1671-7872.2015.04.014
2015-01-14
湖南省高??萍紕?chuàng)新團(tuán)隊(duì)資助項(xiàng)目(湘教通2014207);湖南省自然科學(xué)基金項(xiàng)目(13JJ3121);湖南省教育廳資助項(xiàng)目(13C879)
李亞蘭(1980-),女,湖南郴州人,講師,博士生,主要研究方向?yàn)閳D像處理。
李志揚(yáng)(1964-),男,湖北荊州人,教授,主要研究方向?yàn)閿?shù)字圖像處理、光電子等。
1671-7872(2015)-04-0372-06