劉怡光,孫顯,趙啟軍,魏秀參,王琦,陳秀妍
1.四川大學(xué)計(jì)算機(jī)學(xué)院、空天科學(xué)與工程學(xué)院,成都 610065;2.中國(guó)科學(xué)院空天信息創(chuàng)新研究院,北京 100190;3.四川大學(xué)計(jì)算機(jī)學(xué)院,成都 610065; 4.南京理工大學(xué)計(jì)算機(jī)科學(xué)與工程學(xué)院, 南京 210094; 5.西北工業(yè)大學(xué)光電與智能研究院,西安 710072;6.《中國(guó)圖象圖形學(xué)報(bào)》編輯部, 北京 100190
圖像處理與分析是軍事國(guó)防、公共安全、醫(yī)學(xué)健康、智慧城市和生態(tài)環(huán)保等眾多領(lǐng)域的關(guān)鍵技術(shù)。深度學(xué)習(xí)的發(fā)展推動(dòng)了圖像處理與分析技術(shù)在這些領(lǐng)域的應(yīng)用,但深度學(xué)習(xí)方法的性能極大程度依賴于圖像信號(hào)的質(zhì)量及數(shù)據(jù)規(guī)模。關(guān)鍵應(yīng)用中優(yōu)質(zhì)海量數(shù)據(jù)常難以獲取、特殊場(chǎng)景下數(shù)據(jù)標(biāo)記成本高昂、樣本不完備性及非確定性漸成常態(tài)等,上述障礙和挑戰(zhàn)極大影響了深度學(xué)習(xí)在這些方面應(yīng)用的有效性,桎梏著深度學(xué)習(xí)向更多更廣領(lǐng)域的推廣。因此,在深度學(xué)習(xí)基礎(chǔ)上探索數(shù)據(jù)受限下的圖像處理分析理論與方法,以應(yīng)對(duì)未來面臨的數(shù)據(jù)維度潛在挑戰(zhàn),已成為圖像處理與分析領(lǐng)域各國(guó)競(jìng)爭(zhēng)的下一步熱點(diǎn)和焦點(diǎn)。
為進(jìn)一步促進(jìn)我國(guó)關(guān)鍵行業(yè)中圖像處理與分析理論技術(shù)的發(fā)展,及時(shí)反映我國(guó)學(xué)者在相關(guān)領(lǐng)域的最新研究進(jìn)展,《中國(guó)圖象圖形學(xué)報(bào)》邀請(qǐng)國(guó)內(nèi)多位一線專家共同策劃推出“圖像數(shù)據(jù)受限”專欄,以期為圖像數(shù)據(jù)小樣本、弱標(biāo)記、不完備、非確定等相關(guān)問題的研究人員提供參考。
經(jīng)過嚴(yán)格評(píng)審,“圖像數(shù)據(jù)受限”專欄共收錄學(xué)術(shù)論文4篇,其中:
《數(shù)據(jù)受限條件下的多模態(tài)處理技術(shù)綜述》立足于數(shù)據(jù)受限條件下的多模態(tài)學(xué)習(xí)方法,根據(jù)樣本數(shù)量、標(biāo)注信息、樣本質(zhì)量等不同維度,將計(jì)算機(jī)視覺領(lǐng)域中的多模態(tài)數(shù)據(jù)受限方法分為小樣本學(xué)習(xí)、缺乏強(qiáng)監(jiān)督標(biāo)注信息、主動(dòng)學(xué)習(xí)、數(shù)據(jù)去噪和數(shù)據(jù)增強(qiáng)5個(gè)方向,詳細(xì)闡述了各類方法的樣本特點(diǎn)和模型方法的最新進(jìn)展。并介紹了數(shù)據(jù)受限前提下的多模態(tài)學(xué)習(xí)方法使用的數(shù)據(jù)集及其應(yīng)用方向(包括人體姿態(tài)估計(jì)、行人重識(shí)別等),比對(duì)分析了現(xiàn)有算法的優(yōu)缺點(diǎn)以及未來的發(fā)展方向,對(duì)該領(lǐng)域的發(fā)展具有積極的意義。
《圖像數(shù)據(jù)受限下的處理與分析》指出,對(duì)受限圖像數(shù)據(jù)進(jìn)行處理和分析存在以下挑戰(zhàn):受限下的圖像數(shù)據(jù)統(tǒng)計(jì)一致性弱,難以體現(xiàn)可信且魯棒的集中優(yōu)勢(shì);遮擋、偽裝等情況導(dǎo)致樣本信息乃至維度都具有不完整性或非確定性,以模糊數(shù)學(xué)為基礎(chǔ)的系列處理方法導(dǎo)致計(jì)算量劇增;受限圖像數(shù)據(jù)的處理和分析基本屬于不可逆的逆問題,其解空間一般為高維子空間,如何可信魯棒地確定空間中的解,目前尚無有效可行的通用理論和方法;采用隸屬度為測(cè)度的系列方法需緊密依賴融入先驗(yàn)知識(shí)構(gòu)造的代價(jià)函數(shù)。為促進(jìn)受限圖像數(shù)據(jù)的研究,論文梳理了對(duì)其處理和分析的機(jī)理、方法、手段以及遇到的困難,提出了可能的突破方法,以及催生的研究范式改變,以期吸引更多學(xué)者從事該研究。
《面向跨模態(tài)行人重識(shí)別的單模態(tài)自監(jiān)督信息挖掘》研究如何利用易于獲得的有標(biāo)注可見光圖像輔助數(shù)據(jù)進(jìn)行單模態(tài)自監(jiān)督信息的挖掘,從而提供先驗(yàn)知識(shí)引導(dǎo)跨模態(tài)匹配模型的學(xué)習(xí)。提出的單模態(tài)跨光譜自監(jiān)督信息挖掘方法在SYSU-MM01、RGBNT201和RegDB數(shù)據(jù)集上取得了有競(jìng)爭(zhēng)力的結(jié)果。
《小樣本條件下的RGB-D顯著性物體檢測(cè)》嘗試將小樣本學(xué)習(xí)方法用于RGB-D顯著性物體檢測(cè),探究并利用兩種不同小樣本學(xué)習(xí)方法遷移額外的RGB圖像知識(shí),通過大量實(shí)驗(yàn)驗(yàn)證了引入小樣本學(xué)習(xí)來提升RGB-D顯著性物體檢測(cè)性能的可行性和有效性,對(duì)后續(xù)將小樣本學(xué)習(xí)引入其他多模態(tài)檢測(cè)任務(wù)也提供了一定啟示。
我們期待廣大讀者和科技人員通過“圖像數(shù)據(jù)受限”專欄,能夠更深入、更全面地了解該領(lǐng)域的最新方法和應(yīng)用,吸引更多學(xué)者從事相關(guān)研究并產(chǎn)生具有國(guó)際影響力的優(yōu)秀成果,為本領(lǐng)域的發(fā)展做出新的貢獻(xiàn)。
??幬瘯?huì):
劉怡光,四川大學(xué)教授,主要研究方向?yàn)樾畔⑻綔y(cè)與智能感知。
孫顯,中國(guó)科學(xué)院空天信息創(chuàng)新研究院研究員,主要研究方向?yàn)橛?jì)算機(jī)視覺與遙感圖像理解。
趙啟軍,四川大學(xué)教授,主要研究方向?yàn)槟J阶R(shí)別、機(jī)器視覺。
魏秀參,南京理工大學(xué)教授,主要研究方向?yàn)橛?jì)算機(jī)視覺和機(jī)器學(xué)習(xí)。
王琦,西北工業(yè)大學(xué)教授,主要研究方向?yàn)橛?jì)算機(jī)視覺與模式識(shí)別。
???zé)編:
陳秀妍,編輯,主要研究方向?yàn)閷W(xué)術(shù)出版和媒體傳播。E-mail:chenxy@aircas.ac.cn