張 擎, 劉淑美

(山東大學(xué) 藝術(shù)學(xué)院, 山東 濟(jì)南 250100)

實(shí)驗(yàn)室資源安全管理關(guān)系到實(shí)驗(yàn)教學(xué)和科學(xué)研究能否順利進(jìn)行,國家財(cái)產(chǎn)能否免受損失,實(shí)驗(yàn)室使用人員的人身安全能否得到保障,對高校、研究機(jī)構(gòu)乃至整個社會的安全和穩(wěn)定都至關(guān)重要[1]。目前,實(shí)驗(yàn)室開放力度加大,實(shí)驗(yàn)室資源已成為教學(xué)、實(shí)踐、科研的重要軟、硬件依托,資源競爭激烈。同時,實(shí)驗(yàn)室資源也呈現(xiàn)多樣性,包含種類繁多的化學(xué)藥品、易燃易爆物品和劇毒物品,有的實(shí)驗(yàn)要在高溫度、高壓力或者超低溫、真空、強(qiáng)磁、微波、輻射、高電壓和高轉(zhuǎn)速等特殊環(huán)境下或條件下進(jìn)行,有的實(shí)驗(yàn)會排放有毒物質(zhì)[2-3]。此外,大量貴重儀器設(shè)備和重要技術(shù)資料存放在實(shí)驗(yàn)室,實(shí)驗(yàn)資源存在被誤操作、毀壞和惡意篡改的風(fēng)險(xiǎn)。加之實(shí)驗(yàn)室資源的使用頻繁、使用人員流動性大,實(shí)驗(yàn)室資源的安全管理工作面臨前所未有的挑戰(zhàn)。

在實(shí)驗(yàn)資源的安全管理中,防止非法獲取資源是保障實(shí)驗(yàn)室資源安全使用的關(guān)鍵,而合法身份認(rèn)證是核心技術(shù)。生物特征識別技術(shù)作為一種身份認(rèn)證技術(shù),在各安全領(lǐng)域發(fā)揮著越來越重要的作用。不同于傳統(tǒng)的密碼和IC卡等認(rèn)證和識別手段,生物特征識別是利用一種或多種人類的生理特征(如指紋、人臉、虹膜、靜脈等)或行為特征(如步態(tài)、簽名等)進(jìn)行身份識別的技術(shù)[4]。其中,利用兩種或兩種以上生理或者行為特征進(jìn)行身份識別,被稱為多生物特征識別。生物特征識別技術(shù)具有不會忘記、不會丟失、安全性高等諸多優(yōu)勢,得到了國內(nèi)外學(xué)術(shù)界和企業(yè)界的高度關(guān)注。

深入分析實(shí)驗(yàn)資源管理工作的特殊性,從而有針對性地挖掘利用生物特征識別技術(shù)的獨(dú)特優(yōu)勢,提高實(shí)驗(yàn)資源使用和管理的安全性,是一個值得探索的問題。

1 問題分析

實(shí)驗(yàn)室資源安全管理對身份認(rèn)證系統(tǒng)有以下幾點(diǎn)要求：

1.1 要求身份認(rèn)證技術(shù)具有高準(zhǔn)確度

隨著實(shí)驗(yàn)教學(xué)重要性的不斷凸顯,實(shí)驗(yàn)室開放力度的不斷加大,實(shí)驗(yàn)資源使用的安全性需求也在不斷提升。加之許多實(shí)驗(yàn)資源具有一定危險(xiǎn)性或涉及重要技術(shù)或資料,非法使用和誤操作造成的后果極為嚴(yán)重。因此,身份認(rèn)證技術(shù)具有高準(zhǔn)確度是實(shí)驗(yàn)資源安全管理的首要要求。

1.2 要求身份認(rèn)證響應(yīng)具有實(shí)時性

目前依托實(shí)驗(yàn)室開展的教學(xué)、實(shí)踐、科研等活動較為頻繁,實(shí)驗(yàn)室利用率較高,為確保安全使用,身份認(rèn)證工作需頻繁進(jìn)行,系統(tǒng)響應(yīng)的實(shí)時性是必要條件。例如對于一門有幾十名學(xué)生參與的實(shí)驗(yàn)課程,每次上課前需要對所有學(xué)生進(jìn)行身份認(rèn)證。這就要求每次身份認(rèn)證過程的響應(yīng)時間要控制在能夠接受的范圍內(nèi)。

1.3 身份認(rèn)證系統(tǒng)的使用過程具有良好的用戶體驗(yàn)

身份認(rèn)證工作頻繁進(jìn)行,從而要求系統(tǒng)有良好的用戶體驗(yàn),也就是系統(tǒng)具有較高的使用方便性。如果需要頻繁的用戶交互,且用戶交互過程繁瑣,例如要求用戶一次認(rèn)證過程中幾次擺出固定姿勢,則認(rèn)為是不可接受的。較低的用戶體驗(yàn)會對實(shí)驗(yàn)資源的使用帶來麻煩,甚至造成實(shí)驗(yàn)資源不可用。

目前生物特征識別技術(shù)一般均可以達(dá)到實(shí)時響應(yīng)的要求,因此在系統(tǒng)框架設(shè)計(jì)上,不再將實(shí)時性作為主要的考慮因素。單一生物特征識別技術(shù),如指紋識別、人臉識別等,雖在使用方便性上具有優(yōu)勢,但目前在技術(shù)上,其可用性和安全性具有一定限制[5]。由于多種生物特征之間存在較好的獨(dú)立性和互補(bǔ)性,結(jié)合多種生物特征的多生物特征識別系統(tǒng)具有更高的識別準(zhǔn)確性和可靠性,更加能夠符合具有高安全要求的實(shí)驗(yàn)室資源管理工作。然而,目前所提出的多生物特征識別系統(tǒng)在使用方便性和識別性能方面還具有缺陷。本文提出一種結(jié)合并行融合的序列化融合框架,同時提高系統(tǒng)的用戶體驗(yàn)和識別性能,使其更加符合實(shí)驗(yàn)室資源安全管理的需求。

2 序列化多生物特征識別系統(tǒng)框架的提出

在多生物特征識別系統(tǒng)的研究中,目前主流的融合方法是并行融合,即同時采集和使用多種生物特征實(shí)現(xiàn)識別[4-5]。并行融合系統(tǒng)的用戶交互負(fù)擔(dān)重,使用體驗(yàn)較差。另一種融合方法是序列化融合,用戶逐個使用生物特征進(jìn)行識別,如首先使用的生物特征可以準(zhǔn)確識別用戶,則不再需要后續(xù)特征的參與[6-9]。這種方式在使用方便性上逼近于單一生物特征識別,卻能提供更高的安全性,因此更符合實(shí)驗(yàn)室資源安全管理的需求。

目前,針對序列化多生物特征識別的研究較少。2007年,G.L. Marcialis等人研究了結(jié)合指紋識別和人臉識別的序列化融合方法,并結(jié)合識別性能和識別響應(yīng)時間等指標(biāo)研究了兩個特征的使用順序問題[6],此后,該工作被擴(kuò)展到兩個以上生物特征的情況[7]。另外,AmitKale等人研究了步態(tài)和人臉識別的序列化融合[8]。以上研究主要以識別精度、識別效率等指標(biāo)為依據(jù),研究對生物特征的使用順序的設(shè)置。最新研究指出,不同生物特征的使用方便程度不同,如步態(tài)識別中用戶走過一段通道即可被識別,而人臉識別中,用戶需要停下來提取人臉圖像,使用方便性更低。指紋識別則需要接觸式的樣本采集,方便性最差[9]。文獻(xiàn)[9]認(rèn)為,應(yīng)將生物特征按照使用方便性從大到小的順序進(jìn)行排序,盡量避免使用方便性差的特征。

文獻(xiàn)[9]提出的序列化多生物特征識別框架充分考慮了系統(tǒng)的用戶體驗(yàn),能夠充分滿足實(shí)驗(yàn)室安全管理的需求。然而該框架中,信息利用并不充分,識別準(zhǔn)確度和使用方便性均有待提高。在序列化融合中,如果首先使用的特征無法成功識別用戶,則在使用后續(xù)特征時已經(jīng)獲取了至少兩種生物特征的樣本,可以在不增加額外用戶交互負(fù)擔(dān)的前提下并行融合已采集的多種生物特征進(jìn)行識別。結(jié)合使用多種生物特征,增強(qiáng)了系統(tǒng)后續(xù)步驟中的識別成功率和可靠性。本質(zhì)上,這是一種結(jié)合并行和序列化融合的混合型融合方式。此系統(tǒng)框架中特征的使用方便性和識別準(zhǔn)確率之間仍存在矛盾[9],因此,本文利用半監(jiān)督學(xué)習(xí)技術(shù)[10]同時提升系統(tǒng)識別準(zhǔn)確性和使用方便性。

3 序列化多生物特征識別系統(tǒng)框架的實(shí)現(xiàn)

本文以結(jié)合指紋、人臉、步態(tài)三種生物特征的多模態(tài)生物特征識別系統(tǒng)為例進(jìn)行研究。依據(jù)第2節(jié)中分析,此三種生物特征的使用方便性從高到低的順序應(yīng)為步態(tài)、人臉、指紋。因此,依據(jù)本文所提系統(tǒng)框架,系統(tǒng)應(yīng)如圖1中所示進(jìn)行部署：

圖1 系統(tǒng)部署示意圖

圖2展示了在本文所提框架下,系統(tǒng)的運(yùn)行過程。其中,A表示將標(biāo)記后的步態(tài)樣本存入模板庫；B 表示將標(biāo)記后的步態(tài)、人臉樣本存入模板庫；C表示將標(biāo)記后的步態(tài)、人臉和指紋樣本存入模板庫；D代表再訓(xùn)練過程；S1、S2、S3分別為各分類器的識別閾值；Smax1、Smax2、Smax3分別為輸入樣本與模板樣本匹配的最高得分。對于系統(tǒng)的運(yùn)行過程,可以分為識別過程和再訓(xùn)練過程兩部分進(jìn)行介紹。

圖2 結(jié)合并行融合的序列化多生物特征識別系統(tǒng)框架

、

3.1 識別過程

注冊階段,采集合法用戶的步態(tài)、人臉和指紋樣本,組成模板庫。識別階段,系統(tǒng)的識別過程如下：

步驟1：用戶首先進(jìn)入步態(tài)通道,采集步態(tài)序列,進(jìn)行步態(tài)識別。若識別成功,則系統(tǒng)提供所申請服務(wù),將新采集樣本進(jìn)行標(biāo)記并存入模板庫中。由于將誤識的樣本用于擴(kuò)展模板庫會造成模板庫摻雜進(jìn)錯誤模板,因此各分類器閾值設(shè)置為在模板庫上的零誤識閾值。若識別失敗,則進(jìn)行步驟2。

步驟2：采集人臉樣本,與人臉的模板樣本進(jìn)行匹配,結(jié)合步驟1中步態(tài)的匹配得分,使用并行融合方式得到最終匹配得分,進(jìn)行識別。若識別成功,則將新采集到的步態(tài)和人臉樣本置為標(biāo)記樣本存到模板庫,系統(tǒng)提供所申請服務(wù)。若不能成功識別,則進(jìn)行步驟3。

步驟3：采集指紋,與指紋的模板樣本進(jìn)行匹配,結(jié)合步驟1和步驟2中步態(tài)和人臉的匹配得分,使用并行融合方式得到最終匹配得分,進(jìn)行識別。若識別成功,則將新采集到的步態(tài)、人臉和指紋樣本置為標(biāo)記樣本保存到模板庫,系統(tǒng)提供所申請服務(wù)。若仍不能成功識別,則系統(tǒng)最終拒識,向用戶提出認(rèn)證失敗。

在步驟2和步驟3中的并行融合采用得分級線性相加的融合方法。假設(shè)sm是第m,m∈{1,2,3}個模態(tài)中某待識別樣本與模板的匹配得分,采用公式(1)將sm歸一化：

μm)/δm

(1)

其中,μm和δm分為m模態(tài)上所有匹配得分的均值和標(biāo)準(zhǔn)差。將匹配得分歸一化后,用線性相加的方法得到最終匹配得分fs：

(2)

公式(2)中,wi∈[0,1],i∈{1,2,3}為權(quán)重,且∑wi=1,i∈{1,2,3}。利用模板庫上樣本的交叉驗(yàn)證方法對各特征的識別準(zhǔn)確率進(jìn)行估計(jì),根據(jù)各特征的識別準(zhǔn)確率設(shè)定權(quán)重。

3.2 再訓(xùn)練過程

注冊階段,注冊標(biāo)記樣本需要較高的用戶交互,因此,一般只采集少量標(biāo)記樣本。而隨著系統(tǒng)的使用,可以獲取大量未標(biāo)記樣本?；诖?在系統(tǒng)運(yùn)行過程中,利用半監(jiān)督學(xué)習(xí)方法擴(kuò)充模板庫,重新訓(xùn)練各特征分類器,從而提升各階段分類器的識別準(zhǔn)確率。

具體的再訓(xùn)練過程包括：

(1) 步態(tài)識別利用更新模板重新計(jì)算特征空間,提取步態(tài)特征。

(2) 人臉識別利用更新模板更新特征空間,重新提取人臉特征。

(3) 指紋識別中重新選擇匹配模板。

(4) 為各分類器重新計(jì)算識別控制閾值。

4 實(shí)驗(yàn)和分析

4.1 實(shí)驗(yàn)設(shè)計(jì)

實(shí)驗(yàn)主要包括兩方面內(nèi)容：

(1) 驗(yàn)證系統(tǒng)在使用方便性方面,也就是用戶體驗(yàn)方面的優(yōu)勢。根據(jù)第3節(jié)中的分析,需要驗(yàn)證本文所提框架與文獻(xiàn)[9]提出的系統(tǒng)框架相比在滿足用戶通過較少分類器而得到成功識別方面是否有所提高。實(shí)驗(yàn)中將本文提出的框架簡稱結(jié)合并行融合的框架,將文獻(xiàn)[9]所提框架簡稱結(jié)合單生物特征的框架。

(2) 驗(yàn)證系統(tǒng)在識別準(zhǔn)確度方面的優(yōu)勢。首先,驗(yàn)證隨系統(tǒng)的使用,系統(tǒng)中弱分類器的識別準(zhǔn)確性是否有所提升；再次,將本文所提出的框架與單一生物特征識別系統(tǒng),以及結(jié)合單生物特征的框架進(jìn)行比較,驗(yàn)證本框架在識別準(zhǔn)確率上是否具有優(yōu)勢。實(shí)驗(yàn)中,為跟蹤系統(tǒng)的性能變化,模擬歷經(jīng)一個月(30天)的時間,25個用戶每人每天利用系統(tǒng)進(jìn)行一次識別的情況。

在本文所提框架下,理論上步態(tài)、人臉和指紋識別可采用現(xiàn)有任意算法。實(shí)驗(yàn)中,步態(tài)識別采用基于外層輪廓的識別方法[11],人臉識別采用基于稀疏相似度序列的方法[12],指紋識別采用基于細(xì)節(jié)點(diǎn)的方法[13]。

4.2 實(shí)驗(yàn)數(shù)據(jù)

為滿足實(shí)驗(yàn)需求,采集包括步態(tài)、人臉和指紋三種生物特征的同源多生物特征數(shù)據(jù)庫。采集25個用戶的步態(tài)、人臉和指紋數(shù)據(jù)。其中,每個用戶采集80個步態(tài)序列、60張人臉圖像及400幅指紋圖像。人臉圖像分為正面、左側(cè)面和右側(cè)面三個角度,每個角度各采集圖像20幅。采集右手五個手指的指紋,每個手指采集80幅圖像。圖3中顯示了本實(shí)驗(yàn)所采用的指紋、人臉及步態(tài)樣本的樣例。

圖3 實(shí)驗(yàn)用指紋、人臉及步態(tài)樣本的樣例

實(shí)驗(yàn)中將數(shù)據(jù)庫分為兩個部分：(1)初始模板庫,針對每個模態(tài),為每個用戶隨機(jī)抽取3個樣本作為初始模板；(2)測試數(shù)據(jù),針對每個模態(tài),為每個用戶隨機(jī)抽取30個樣本,模擬對系統(tǒng)的30次使用,獲取系統(tǒng)狀態(tài)和識別準(zhǔn)確性。

4.3 實(shí)驗(yàn)結(jié)果

圖4中給出了經(jīng)過30次系統(tǒng)使用,所有用戶通過驗(yàn)證所使用的生物特征個數(shù)之和。這一指標(biāo)可以體現(xiàn)用戶使用系統(tǒng)時的交互負(fù)擔(dān),從而直觀地反映系統(tǒng)使用方便性方面的性能。通過圖4可以看出,本文所提框架中,用戶可以使用更少的生物特征得到成功識別,該框架較結(jié)合單生物特征的框架在使用方便性上具有優(yōu)勢。系統(tǒng)使用方便性的提高是通過在序列化融合的基礎(chǔ)上利用并行融合提高各階段分類器的識別性能實(shí)現(xiàn)的。

圖4 所有用戶通過驗(yàn)證使用生物特征的個數(shù)之和

圖5中比較了兩種框架下,步態(tài)識別中成功識別的用戶數(shù)量?？梢钥闯?兩種框架下步態(tài)識別的性能逐步提高,且在前5輪性能提高較為明顯。兩種框架下,步態(tài)識別的性能差別不大。這是因?yàn)椴徽撛谀囊徊降玫匠晒ψR別,最終所有用戶基本都通過了系統(tǒng)驗(yàn)證,因此,兩種框架中步態(tài)的模板庫更新基本一致。

圖6顯示兩個框架中在第2步成功識別的用戶占所有需要進(jìn)行第2步識別的用戶的比例。由于需要進(jìn)行第2步識別的用戶數(shù)量難以確定,因此,這里用成功識別用戶比例比較第2步識別的準(zhǔn)確性?？梢钥闯?在第2步識別中,分類器性能也有逐步提升的趨勢,且本文所提框架較結(jié)合單生物特征的框架提升速度更快?？傮w來說,結(jié)合人臉與步態(tài)的并行識別算法識別性能優(yōu)于單一人臉識別。這驗(yàn)證了本文框架在識別準(zhǔn)確性和適應(yīng)性上均優(yōu)于對比框架。

圖5 步態(tài)識別中成功識別的用戶數(shù)量

圖6 第2步中成功識別的用戶比例

圖7顯示兩個框架中在第3步成功識別的用戶占所有需要進(jìn)行第3步識別的用戶的比例?？梢钥闯?第3步中的分類器性能較高。步態(tài)、人臉與指紋的融合算法的識別正確率是100%,而單一指紋識別出現(xiàn)了錯誤。再一次證明本文所提框架識別準(zhǔn)確率優(yōu)于結(jié)合單生物特征的框架。

圖7 第3步中成功識別的用戶比例

圖8給出各系統(tǒng)識別準(zhǔn)確率,包括單一步態(tài)識別、人臉識別和指紋識別系統(tǒng)、結(jié)合單生物特征的框架以及本文所提框架的識別準(zhǔn)確率。識別準(zhǔn)確率通過利用各系統(tǒng)對25個用戶的30個樣本進(jìn)行識別獲得?？梢钥闯?如第3節(jié)中的分析,單一生物特征識別的準(zhǔn)確率均低于多生物特征識別,且步態(tài)識別準(zhǔn)確率最低,人臉識別其次,指紋識別準(zhǔn)確率最高。本文所提框架在識別準(zhǔn)確率上高于單一生物識別系統(tǒng)以及結(jié)合單生物特征的框架。

圖8 各系統(tǒng)的識別準(zhǔn)確率

5 結(jié)語

本文分析實(shí)驗(yàn)室資源安全管理的特殊要求,在此基礎(chǔ)上,提出結(jié)合并行融合和序列化融合的多生物特征識別框架這一新的安全認(rèn)證策略。該框架在不增加用戶交互的前提下,將系統(tǒng)中所獲取的信息更加充分、合理地利用,進(jìn)一步提高用戶體驗(yàn)和系統(tǒng)的識別準(zhǔn)確性。實(shí)驗(yàn)驗(yàn)證了該框架在用戶體驗(yàn)及安全性上皆具有優(yōu)勢,更加符合實(shí)驗(yàn)室資源安全管理需求。