何佳雯,王莉菲,張如如,譚 玲,劉 毓,王晴川,陳正宇,范家偉,鄂海紅,宋美娜*
(1.北京郵電大學(xué)計(jì)算機(jī)學(xué)院,北京 100876;2.教育部信息網(wǎng)絡(luò)工程研究中心,北京 100876;3.河北省眼科醫(yī)院眼底外科,河北 邢臺(tái) 054001)
光學(xué)相干斷層掃描(optical coherence tomography, OCT)是無接觸、無創(chuàng)成像技術(shù),以較高分辨率快速對(duì)眼部結(jié)構(gòu)進(jìn)行可視化,提供清晰的橫軸位成像[1],現(xiàn)已成為診斷老年性黃斑變性(age-related macular degeneration, AMD)和糖尿病黃斑水腫(diabetic macular edema, DME)等眼底疾病的金標(biāo)準(zhǔn)[2];但圖像中病變區(qū)域與正常區(qū)域之間的對(duì)比度較低,且成像過程受儀器噪聲及其他生物組織的干擾,分析圖像較為耗時(shí),結(jié)果難以避免主觀性。近年來,深度學(xué)習(xí)(deep learning,DL)技術(shù)發(fā)展迅速,用于醫(yī)學(xué)圖像處理可快速、準(zhǔn)確地捕捉病變特征并判斷疾病類型,提高工作效率和診斷精度及穩(wěn)定性[3]。本文對(duì)基于DL的OCT輔助診斷常見眼底疾病研究進(jìn)展進(jìn)行綜述。
基于干涉儀原理,不同深度的生物組織對(duì)于OCT設(shè)備發(fā)出光波的后向反射能力不同。以近紅外弱相干光照射待測組織,檢測不同深度層面生物組織的背向反射或數(shù)次散射信號(hào),可得到眼部組織的二維或三維結(jié)構(gòu)圖像(圖1)。OCT具有出色的光學(xué)切片能力,能利用寬帶光源的低相干性實(shí)現(xiàn)對(duì)次表面的高分辨率層析成像而捕捉病變的精確信息[4],其探測深度遠(yuǎn)超過傳統(tǒng)共焦顯微鏡。
圖1 視網(wǎng)膜黃斑區(qū)OCT INL為內(nèi)核層,IPL為內(nèi)部網(wǎng)狀層,ILM為內(nèi)限膜,GCL為神經(jīng)節(jié)細(xì)胞層,NFL為神經(jīng)纖維層,OPL為外叢狀層,ONL為外核層,ELM為外部限制膜,IS/OS為內(nèi)部和外部感光段的連接,RPE為視網(wǎng)膜色素上皮+布魯赫膜,OPR為光感受器外節(jié)/RPE復(fù)合體,Choroid為脈絡(luò)膜,Bruchs Membrane為布魯赫膜
2.1 DL概述 DL是機(jī)器學(xué)習(xí)最重要的分支之一,通過大量訓(xùn)練樣本而學(xué)習(xí)樣本的內(nèi)在規(guī)律和表示層次,具有預(yù)測、分類及分割能力?;贒L的OCT輔助診斷眼底疾病主要包括OCT預(yù)處理、OCT分割和OCT分類各環(huán)節(jié)。預(yù)處理指對(duì)OCT圖像進(jìn)行去噪、圖像增強(qiáng)及形態(tài)學(xué)處理,以去除散點(diǎn)噪聲、提高對(duì)比度,清晰顯示特征區(qū)域;提取ROI,后續(xù)僅針對(duì)其進(jìn)行分割或分類。OCT分割可量化圖像中不同組織層的厚度及病變區(qū)域范圍,幫助臨床醫(yī)生或輔助診斷系統(tǒng)根據(jù)病變類型、位置、區(qū)域及數(shù)量判斷疾病嚴(yán)重程度。在分割基礎(chǔ)上進(jìn)行分類,通過DL技術(shù)分析OCT圖像中病變區(qū)域特征與眼底疾病的關(guān)系,實(shí)現(xiàn)自動(dòng)篩查眼底疾病,輔助眼科醫(yī)師提出進(jìn)一步診療計(jì)劃及轉(zhuǎn)診建議等。
對(duì)于DL模型而言,足量訓(xùn)練樣本非常重要。目前主要OCT開源數(shù)據(jù)集見表1,可根據(jù)不同需求適當(dāng)選用。
表1 現(xiàn)有主要可用 OCT開源數(shù)據(jù)集
2.2 基于DL的OCT輔助診斷常見眼底疾病研究進(jìn)展 視網(wǎng)膜內(nèi)液(intraretinal fluid, IRF)、視網(wǎng)膜下液(subretinal fluid, SRF)及色素上皮脫離(pigment epithelium detachment, PED)等是OCT診斷常見眼底疾病的重要依據(jù)。目前針對(duì)OCT的DL模型已可分割多種病變區(qū)域及對(duì)眼底病變進(jìn)行分類,主要包括AMD、DME及青光眼等。
2.2.1 AMD AMD為黃斑區(qū)結(jié)構(gòu)衰老性改變,分為干性AMD和濕性AMD。干性AMD表現(xiàn)為黃斑區(qū)存在玻璃疣等;濕性AMD表現(xiàn)為CNV異常生長。2018年,SEEB?CK等[11]以正常人眼部OCT圖像訓(xùn)練多尺度深度去噪自編碼器(deep denoising autoencoder, DDAE)用于提取正常OCT圖像中的特征,并訓(xùn)練單類支持向量機(jī)模型用于識(shí)別OCT圖像中的AMD區(qū)域,根據(jù)聚類結(jié)果將OCT圖像分為正常及早期、晚期AMD,預(yù)測分類準(zhǔn)確率達(dá)81.40%,使模型可解釋性趨于更好。2019年,HWANG等[12]以InceptionV3模型將583例AMD和174名正常人的35 900幅OCT圖像分類為正常、干性AMD、活躍性濕性AMD及非活躍性濕性AMD,降低了任務(wù)復(fù)雜度,準(zhǔn)確率達(dá)92.67%。ASLAM等[13]基于OCT訓(xùn)練前饋神經(jīng)網(wǎng)絡(luò)模型,以預(yù)測滲出性AMD患眼的視力,與實(shí)際視力相比,其均方根誤差為8.20個(gè)字母,并可用于監(jiān)測AMD患眼視力,有助于及時(shí)診斷和治療ADM復(fù)發(fā)?;贒L智能診斷AMD現(xiàn)已達(dá)到較高精度,有待進(jìn)一步研究驗(yàn)證并付諸臨床應(yīng)用。
2.2.2 DME DME是糖尿病眼部主要并發(fā)癥,為四大致盲眼病之一,在OCT圖像中主要表現(xiàn)為高反射點(diǎn)、視網(wǎng)膜內(nèi)囊樣積液及中心凹下脈絡(luò)膜厚度改變等。2018年,PERDOMO等[14]提出端到端的OCT-NET DL模型,實(shí)現(xiàn)DME與正常二分類,通過網(wǎng)格搜索方法篩選最優(yōu)的批量大小和學(xué)習(xí)率,其準(zhǔn)確率、敏感度和特異度均達(dá)93.75%。VAHADANE等[15]提出兩階段DL網(wǎng)絡(luò)篩查DME,第一步使用圖像處理技術(shù)檢測硬滲出物和積液區(qū)域的候選補(bǔ)??;第二步以卷積神經(jīng)網(wǎng)絡(luò)(convolutional neural network, CNN)對(duì)候選補(bǔ)丁進(jìn)行分類,判斷是否存在DME病理特征,以篩查DME;補(bǔ)丁可有效提高模型的聚焦特性、降低模型規(guī)模,使其精確率達(dá)96.43%。2019年,HASSAN等[16]提出基于雙模態(tài)數(shù)據(jù)的DL框架,通過CNN自彩色眼底圖像和OCT圖像中提取特征并加以融合,之后通過人工神經(jīng)網(wǎng)絡(luò)、支持向量機(jī)和樸素貝葉斯進(jìn)行集成,以分類DME與正常,其準(zhǔn)確率達(dá)94.33%。上述研究表明,OCT圖像中DME的病變特征相對(duì)明顯,對(duì)經(jīng)典DL模型進(jìn)行遷移即可獲得較高的診斷精度。
2.2.3 青光眼 青光眼是視神經(jīng)受損所致,因早期癥狀不明顯而診斷困難,需綜合考慮眼壓、眼底形態(tài)、視野及視網(wǎng)膜神經(jīng)纖維層(retinal nerve fiber layer, RNFL)等多個(gè)因素。2018年,WANG等[17]提出了分割檢測聯(lián)合網(wǎng)絡(luò)(joint segmentation and diagnosis network, S-D Net),以模擬臨床醫(yī)師診斷青光眼:首先應(yīng)用分割網(wǎng)絡(luò)(segmentation network, S-Net)對(duì)OCT圖像進(jìn)行視網(wǎng)膜層分割,之后以診斷網(wǎng)絡(luò)(diagnosis network, D-Net)依據(jù)RNFL厚度診斷青光眼,由于存在正常人RNFL變薄、而青光眼RNFL無變化的現(xiàn)象,該網(wǎng)絡(luò)的診斷準(zhǔn)確率為85.40%。2019年,AN等[18]基于OCT和彩色眼底圖像開發(fā)了一種智能輔助診斷開角型青光眼的算法,通過OCT圖像分別獲取黃斑區(qū)、視盤區(qū)、RNFL和神經(jīng)節(jié)細(xì)胞覆蓋合體(ganglion cell complex, GCC)的厚度,結(jié)合視盤區(qū)域的彩色眼底圖像,使用5個(gè)基于VGG模型的預(yù)模型,并采用隨機(jī)森林算法分類青光眼與正常,其曲線下面積(area under the curve,AUC)達(dá)0.963;但該研究樣本量較少,且部分患者合并近視,導(dǎo)致結(jié)果可能存在偏差。RAN等[19]基于譜域OCT(spectral-domain OCT, SD-OCT)數(shù)據(jù)開發(fā)一種3D DL系統(tǒng),通過檢測RNFL厚度自動(dòng)診斷青光眼視神經(jīng)病變,基于深度殘差網(wǎng)絡(luò)(deep residual network, ResNet)生成熱圖,顯示青光眼視神經(jīng)病變相關(guān)組織結(jié)構(gòu);經(jīng)香港中文大學(xué)眼科中心和香港眼科醫(yī)院收集的數(shù)據(jù)初步驗(yàn)證其診斷效能優(yōu)于2D DL系統(tǒng),并基于香港威爾斯親王醫(yī)院、屯門眼科中心及美國斯坦福大學(xué)拜爾斯眼科研究數(shù)據(jù)進(jìn)行了外部驗(yàn)證,其表現(xiàn)良好,但仍需進(jìn)一步研究評(píng)估其增量成本效益?,F(xiàn)有多數(shù)DL模型基于RNFL及GCC厚度診斷青光眼,總體診療精度相對(duì)較低,結(jié)合視盤和黃斑區(qū)血管密度、黃斑全層厚度、視野及眼壓等綜合數(shù)據(jù)進(jìn)行多模態(tài)[20-21]分析有助于準(zhǔn)確診斷青光眼。
2.2.4 其他眼底疾病 隨著技術(shù)的迅速發(fā)展,現(xiàn)已實(shí)現(xiàn)同時(shí)分割多種病灶區(qū)域或同時(shí)分類多種眼底疾病。2018年,谷歌DeepMind團(tuán)隊(duì)[22]提出一種兩階段DL模型,先以3D U-Net分割模型分割OCT圖像中眼部15種不同組織和病變區(qū)域,再利用CNN進(jìn)行診斷和轉(zhuǎn)診推薦分類,可準(zhǔn)確檢測50余種眼部疾病,且其遷移性在不同設(shè)備上均較好,準(zhǔn)確率達(dá)94.5%,符合醫(yī)師診療流程,適用于臨床。KERMANY等[7]以Inception V3模型為基礎(chǔ)進(jìn)行遷移學(xué)習(xí),以篩查CNV、DME和玻璃疣,并根據(jù)檢測到的疾病類型提出轉(zhuǎn)診建議,分類準(zhǔn)確率為96.60%,敏感度為97.80%,特異度為97.40%。FANG等[23]提出的病變感知CNN模型可用于分類玻璃疣、CNV、DME與正常,該模型模擬醫(yī)師診療習(xí)慣,首先以注意力機(jī)制生成病灶檢測軟注意力圖,并將之合并到分類模型中,根據(jù)注意力程度對(duì)局部卷積表示進(jìn)行加權(quán),分類玻璃疣、CNV、DME與正常的準(zhǔn)確率分別為94.9%、94.5%、97.1%及97.5%。2020年,ZHANG等[24]提出BMM-Net模型分割OCT圖像中的視網(wǎng)膜水腫、SRF和PED病變區(qū)域,以U-Net為基礎(chǔ),集成邊界提取模塊、多尺度信息感知模塊,以捕捉準(zhǔn)確位置和語義特征,解決病變區(qū)域?qū)Ρ榷鹊图安≡畛叽绮痪獾膯栴},并在AI Challenger挑戰(zhàn)賽數(shù)據(jù)集上進(jìn)行驗(yàn)證,平均Dice系數(shù)達(dá)82.22%,性能佳。目前基于DL的OCT圖像已在分割多種病變區(qū)域及分類多種眼底疾病方面取得突出成果,且正朝向可解釋、多分類及泛化方向發(fā)展。
基于DL的OCT輔助診斷眼底疾病具有廣闊應(yīng)用前景,但仍面臨挑戰(zhàn):①由于隱私問題,可用于訓(xùn)練模型的高質(zhì)量、標(biāo)準(zhǔn)化OCT圖像數(shù)據(jù)仍甚匱乏;②DL模型的機(jī)制缺乏可解釋性[25],這在很大程度影響輔助診斷系統(tǒng)用于臨床實(shí)踐。相信未來將會(huì)克服上述不足,獲得優(yōu)秀成果,推動(dòng)該領(lǐng)域的發(fā)展。