999精品在线视频,手机成人午夜在线视频,久久不卡国产精品无码,中日无码在线观看,成人av手机在线观看,日韩精品亚洲一区中文字幕,亚洲av无码人妻,四虎国产在线观看 ?

基于棧式稀疏自編碼器的青光眼眼底圖像識別研究?

2019-02-27 08:32:10曹桂銘丁香乾高政緒
計算機與數字工程 2019年2期
關鍵詞:模型

曹桂銘 丁香乾 高政緒

(中國海洋大學 青島 266100)

1 引言

青光眼是眼科一種常見的疑難病,癥狀為眼壓升高使得眼部功能發生障礙,并伴有瞳孔發青綠色這一視網膜形態的變化[1]。其具有危害大,高隱蔽性,發病率高等特點。青光眼嚴重危害患者的身體健康,眼內壓力長時間過高,會損害視神經,患者就會出現視力逐漸減退或失明[2]。同時由于其發病初期很難被發現,一旦出現視力下滑,則進入了晚期,已經造成不可恢復的損傷[3]。據統計,全球人群中,青光眼的患病率為3.54%,約有6426萬人;預計到2020年和2040年分別將達7602萬人和11182萬人[4]。

盡管青光眼嚴重威脅著我們的身心健康,但目前對于青光眼疾病的研究還處于初級階段,遠遠不能滿足人們的需求。因此對青光眼的研究是很有必要的,只有對其早診斷早治療才能減少它對視力的損害。眼底圖像是青光眼判別的最重要標準,由于眼底圖像的復雜性高,因此在實際操作中有很大的困難[5]。相關研究者取得了一定的成就:干能強[6]提出了基于主成分分析法(PCA)的青光眼識別方法;黃元康[7]提出一種基于圖像分割的馬爾科夫隨即場青光眼眼底圖像識別技術;德國研究者研制了一種Zeiss青光眼診斷分析儀,具有方便快捷的特點,但是識別精度不高。

本文提出了一種基于棧式稀疏自編碼器的青光眼眼底圖像特征提取及圖像識別模型。只需將眼底圖像做簡單的預處理即可作為模型的輸入,相比于需要進行眼底圖像分割的方法更為簡單。采用逐層貪婪訓練法從無標簽的數據集中學習到數據的內部特征,將學習到的特征作為Softmax分類器的輸入進行分類,判斷是否患有青光眼。并通過仿真實驗,證明了該方法是有效可行的。

2 算法描述

2.1 棧式自編碼神經網絡

自編碼器(Auto-encoder)是一種盡可能使輸出數據等于輸入數據的無監督學習的神經網絡[8],是一個只有一個隱含層的單層自編碼器,如圖1所示。單層自編碼器包括一個輸入層,一個隱含層和一個輸出層,其中+1是偏置項系數。)

圖1 單層自編碼器

自編碼器的訓練分為編碼和解碼兩個過程。編碼過程是使輸入數據x通過線性運算以及激活函數,再映射到隱含層得到編碼結果的過程[9],有

其中f(z)=1∕[1 +exp(-z)]是激活函數,h(x)是隱含層神經元的激活值,W1是權值矩陣,B1是偏置值矩陣。

解碼階段是將編碼階段得到的數據特征表達,即隱含層的輸出,作為輸出層的輸入,對其進行重構,得到與原始數據盡可能相等的輸出。

棧式自編碼器是將多個稀疏自編碼器堆疊而成。棧式自編碼器可以逐層提取數據的特征。將棧式自編碼器的輸出作為Softmax分類器的輸入,即是本文所采用的模型[10]。其結構如圖2所示。

圖2 棧式自編碼器網絡結構

具體來說,首先進行此分類器的逐層預訓練。利用不帶標簽的數據樣本通過逐層貪婪訓練法,最小化重構誤∑s[xi-h(xi)]2,訓練第一層隱含層L2,i=1得到其參數W1,B1。這樣就用一組基的線性組合來表示了輸入數據。再將這一組向量作為第二層隱含層L3的輸入,對L3進行訓練,得到參數W2,B2。在逐層訓練每一層的時候,其他各層的參數保持不變。在預訓練完成后,通過反向傳播算法對所有層的參數進行微調,使分類結果更加準確。如果在預訓練的過程中就對參數進行微調,可以使參數達到局部最優,但不會達到全局最優[11]。

假設wlji代表神經網絡中第l層第j個神經元和第l+1層第i個神經元之間的權重系數,bil代表神經網絡中第l+1層的第i個神經元的偏置項,zil+1表示第l+1層第i個神經元所有輸入神經元的加權和,sl代表神經網絡中第l層中神經元的總個數,則有

定義神經元的激活函數為f(z),h(il)表示第l層神經元i的激活值,則有:h(il)=f(zi(l))。

用m表示輸入樣本個數,x表示輸入,y表示輸出(x=y),λ表示權值衰減系數,本文所定義的代價函數為[12]

其中,第一項為誤差平方和項;第二項為規則化項,是為了減小權值,防止過度擬合。

2.2 棧式稀疏自編碼神經網絡

研究表明,人的大腦在感應外界刺激時,只有一部分神經元處于活躍狀態,因此稀疏的表達更符合我們人類的神經系統。本文假設神經元的激活函數是Sigmoid函數。稀疏性可以被簡單地理解為:當神經元的輸出接近于1時,則它被激活,而輸出接近于0時,其被抑制。因此使神經元大部分被抑制的限制條件稱為稀疏性限制[13]。

用a(j2)(x)表示在輸入為x的情況下,隱藏神經元j的激活度。并把隱藏神經元j的平均活躍度表示為。在此,稀疏性限制可以表示為ρ?j=ρ,其中ρ是稀疏性參數。ρ通常是一個接近于0的較小的值。為實現稀疏性限制,在原來的損失函數中加入一項懲罰因子。使用相對熵作為懲罰因子,可表示為

因此棧式稀疏自編碼器的損失函數為

在根據損失函數進行微調的過程中,為了計算公式中KL(ρ?j||ρ)的導數,通常采用迭代的方法,像梯度下降發。根據BP算法,從后一層到前一層反向計算誤差項,每一層的誤差項為

根據公式,需要知道平均激活度ρ?j的計算,因此先需要對所有訓練樣本進行一次向前的傳播計算,得到平均激活度ρ?j。此神經網絡最終的偏導數計算為

通常式(8)、(9)用矩陣矢量符號重寫,該神經網絡的權值項和偏置項的梯度下降方法為[14]:

2.3 Softmax回歸

本文采用Softmax分類器對學習到的特征進行分類。Softmax模型如下:

其代價采用最大熵模型,代價函數為

其中k表示類別數目,1{y(i)=j}為示性函數。為了避免過擬合,在代價函數中加入正則化項,新的代價函數為凸函數,存在唯一的極小值,因此可以保證得到唯一的最優解,最終的代價函數為[15]

3 仿真實驗結果

3.1 實驗數據

實驗數據采用來自某醫院提供的青光眼患者和正常人的眼底圖像共10000幅,其中青光眼眼底圖像為5500幅,正常的眼底圖像為4500幅,將圖像樣本分為3個子數據集。樣本具體信息如表1所示。

表1 數據集

其中無標簽訓練集用于網絡模型的特征學習,學習眼底圖像的特征。有標簽訓練集用于最終分類器的訓練。有標簽測試集用于測試模型分類的準確性。

3.2 眼底圖像處理

將原始眼底圖像進行歸一化,轉化為灰度圖,圖像增強和去噪處理,轉化為150×150的灰度圖像,如圖3所示。

圖3 眼底預處理

3.3 建立分類模型

由于目前對于棧式自編碼器構建過程中參數的確定并沒有足夠的理論方法,因此本文通過反復對數據集進行實驗來確定。最終確定的幾個主要的參數:稀疏參數ρ取0.005。學習速率為0.01,精神元激活函數為Sigmoid,迭代次數200次。本文采用Matlab R2014a作為編碼工具,設定網絡結構為150×150-10000-2500-500-100-1。最后一層使用Softmax回歸對樣本進行分類。

將預處理后的眼底圖像輸入稀疏自編碼器。采用逐層貪婪訓練法從無標簽的數據集中學習到數據的內部特征,將學習到的特征作為Softmax分類器的輸入。然后利用帶標簽的數據通過反向傳播算法對稀疏自編碼器進行調優。

3.4 對比分析

本文使用眼底圖像測試集數據對神經網絡模型的分類精確度進行測試,并與傳統PCA和BP神經網絡方法進行比較,測試結果如表2所示。

表2 測試結果

由表2可以發現,在對1000個測試集樣本進行處理過程中,稀疏自編碼器模型特征提取的準確率最高。相對于其它方法,本文提出的稀疏自編碼器模型能夠明顯的提高特征提取能力,進而提高識別的準確率。

4 結語

因此本文提出了一種基于棧式稀疏自編碼器的青光眼眼底圖像識別模型。只需將眼底圖像做簡單的預處理即可作為模型的輸入,無需對圖像進行分割。采用逐層貪婪訓練法從無標簽的數據集中學習到數據的內部特征,將學習到的特征作為Softmax分類器的輸入。然后利用帶標簽的數據通過反向傳播算法對稀疏自編碼器進行調優。最后使用測試集數據對整個模型進行測試。本文以正常的眼底圖像和青光眼眼底圖像為實驗對象,并與PCA,BP方法進行實驗對比。結果表明,本文提出的稀疏自編碼器模型提取眼底圖像特征的能力更好,識別準確率高于其他兩種方法,對青光眼的識別具有一定的實用價值。

猜你喜歡
模型
一半模型
一種去中心化的域名服務本地化模型
適用于BDS-3 PPP的隨機模型
提煉模型 突破難點
函數模型及應用
p150Glued在帕金森病模型中的表達及分布
函數模型及應用
重要模型『一線三等角』
重尾非線性自回歸模型自加權M-估計的漸近分布
3D打印中的模型分割與打包
主站蜘蛛池模板: 97青青青国产在线播放| 红杏AV在线无码| 在线免费看黄的网站| 国产免费一级精品视频| 久久精品无码一区二区国产区 | 九九免费观看全部免费视频| 在线观看国产黄色| 天天综合网站| 国产精品毛片一区视频播| 漂亮人妻被中出中文字幕久久| 亚洲一区二区无码视频| 欧美一区二区啪啪| 色综合天天视频在线观看| 九月婷婷亚洲综合在线| 国产乱子伦一区二区=| 久久伊伊香蕉综合精品| 午夜日韩久久影院| 内射人妻无码色AV天堂| 欧美www在线观看| 91麻豆国产在线| 小说 亚洲 无码 精品| 最新国产麻豆aⅴ精品无| AV老司机AV天堂| 九色综合伊人久久富二代| 一级全黄毛片| 91国内在线视频| 国产无码高清视频不卡| 国产精选小视频在线观看| 天天摸夜夜操| 亚洲第一香蕉视频| 久久久久国产精品熟女影院| 特级做a爰片毛片免费69| 国产高清在线丝袜精品一区| 亚洲成肉网| 亚洲欧美日本国产综合在线| 精品无码国产自产野外拍在线| 福利视频久久| 久久semm亚洲国产| 久久免费视频6| 激情视频综合网| 国产欧美日韩在线在线不卡视频| 亚洲成年人网| 免费一看一级毛片| 四虎永久在线视频| 中国一级特黄视频| 欧美午夜精品| 午夜天堂视频| 婷婷成人综合| 精品久久人人爽人人玩人人妻| 久久综合九色综合97婷婷| 国产精品99久久久| 54pao国产成人免费视频| 国产视频你懂得| 国产欧美精品一区二区| 福利一区三区| 精品视频第一页| 亚洲三级a| 中文字幕精品一区二区三区视频| 国产麻豆精品手机在线观看| 日韩精品无码免费专网站| 狼友av永久网站免费观看| 国产成人成人一区二区| 在线a视频免费观看| 欧美亚洲另类在线观看| 免费人成黄页在线观看国产| 欧美视频免费一区二区三区| 无码人妻热线精品视频| 美女被操黄色视频网站| 日本高清免费不卡视频| 精品偷拍一区二区| 欧美va亚洲va香蕉在线| 91美女视频在线| 国产xx在线观看| 亚洲精品福利视频| 日韩欧美91| 亚洲最大综合网| 色悠久久久久久久综合网伊人| 亚洲男人的天堂久久香蕉网| 97视频免费看| 久久人妻系列无码一区| 欧美久久网| 色一情一乱一伦一区二区三区小说|