雷建坤 鐘銘華 張凱歌 王鑫 蔣慕蓉
Lei Jiankun,Zhong Minghua,Zhang Kaige,Wang Xin,Jiang Murong1
云南大學 信息學院計算機科學與工程系 昆明 650091
School of Information Science and Engineering,Yunnan University,Kunming 650091,China
圖像在傳輸與使用的過程中極易受到外界的干擾,對圖像進行放大后,將無法保持原有的視覺效果和清晰度。所以提高放大圖像的清晰度是目前迫切需要解決的問題。圖像清晰化方法大致可以分為兩類:第一類是通過對原圖像進行內插值的方法來提高放大圖像的清晰度;另一類是對放大后的圖像做進一步的優化處理,如增強圖像的邊緣和細節。第一類方法主要是指經典的線性插值方法和相關的改進插值算法,R.G.Keys[1]通過對平滑內插值放大圖像進行分析,針對其高頻信息丟失嚴重的問題,提出基于三次樣條的不均勻插值圖像放大方法,有效地改善對圖像高頻信息的處理; Chang[2]等人針對放大圖像后在圖像邊緣出現的塊狀邊緣結構問題,運用近似矢量化逼近的方法對圖像進行插值放大,有效地改進了 S.Battiato[3]等人提出的邊緣像素自適應圖像放大方法。第二類方法主要是指小波插值、分形插值與偏微分方程插值方法。A.Belahmidi和 F.Guichard[4]提出了一種非線性偏微分方程模型,朱長青等[5]先將待放大的圖像用內插值方法放大,之后進行小波分解,取其高頻系數與原圖像一起作小波逆變換得到超分辨圖像。袁建軍和朱寧[6]對插值放大后的圖像,提出了一種基于偏微分方程和三次樣條的后處理技術。這些方法都取得了一定效果,但是偏微分模型在計算過程中不可避免地受到迭代次數過多的,使得處理時間過長,容易造成輸出圖像出現不同程度的模糊和邊界震蕩效應。
為此,利用小波具有多分辨率分析和局部化時頻域特性,引入小波變換對圖像進行放大,在一定程度上緩解了傳統插值引起的邊緣鋸齒化和模糊化效應。鑒于小波放大方法普遍存在灰度變暗和邊緣模糊問題[7],給出改進的自蛇模型對放大后的圖像進行清晰處理。實驗結果顯示,該算法可以有效地對放大后的圖像進行清晰化處理,同時通過對邊緣停止函數的修改可以提高算法的時間性能,增強了圖像的視覺效果。
經過小波變換后的圖像,可得到良好的空間-頻率多分辨率表示,不但能保持原圖像的空間特性,還能更好地提取圖像的高頻信息。同時由于高頻分量具有豐富的細節邊緣信息,所以可以通過對插值放大后的圖像進行小波分解以提取更精確的邊緣信息。傳統基于小波變換的圖像的放大算法都不可避免的存在灰度變暗和邊緣模糊問題,本文將傳統的內插值算法嵌入到小波變換過程中,得到小波插值(wavelet-interpolation)算法。
算法的具體步驟如下:
Step1:對原始低分辨率圖像P進行一級小波分解,結果為[A, H, V, D ]=DWT(P),其中A是小波分解的低頻成分,H是水平高頻成分,V是垂直高頻成分,D是對角線方向的高頻成分。
Step2:將分解后的低頻分量A采用內插值算法進行放大得到A0。
Step3:圖像P直接采用內插值法進行放大,并對放大后的圖像進行小波分解得到 AA, H H, V V, DD。
Step4:將第二步中得到的放大后的低頻分量A0與第三步得到的水平、垂直、對角線上的高頻細節HH, V V, DD進行小波逆變換重構得到放大后的圖像PT,即 PT=DWT-1(A0, H H,V V, D D)。
小波插值(wavelet-interpolation)算法流程如圖1所示:

圖1 小波插值(wavelet-interpolation)放大算法流程圖
自蛇模型(self-snake)[8]屬于非線性偏微分方程,其表達式如(1)所示:
其中g(ΔI)是邊緣停止函數,表達式為公式(2)所示:

其中門限梯度k是選定的常數,一般取 15、16[9],用來控制g的下降速度。本文采用的邊緣停止函數為:

比較公式(2)和(3)兩個邊緣函數,可以看出:
a、新的邊緣停止函數(3)取消了門限梯度,使得模型更加的簡單化。
b、由于通常梯度門限門限k>1,因此

由(4)式可以知道,邊緣停止函數(3)減少了對參數k的討論,更多的依賴放大后圖像的邊緣信息,這樣就使得在對圖像進行后處理時能夠對邊緣進行較為細致地處理,得到更好的邊緣效果。

采用“整點”近似來表達(6)式中的每一項,例如,第一項可表示為:

其中梯度的兩個分量可表示為:

如此,我們就可以用g和I的“整點”值計算(8)式中的第一項。同理,處理其它三項,則散度算子的離散化就完成了。對自蛇模型求粘滯解,其顯式計算格式為:

其中:

實驗中用大小為60×60的圖像進行放大清晰化處理,為了能夠更清楚地觀察小波插值的實驗結果,采用雙性插值得到的圖像2(b)做為對比。圖2(a)是原始圖像,圖2(b)是雙線性插值放大后的圖像,圖像整體比較平滑且出現邊緣模糊和鋸齒化效應,圖2(c)對應于小波插值對圖像進行放大3倍后的結果圖,從圖中可以看出,小波插值放大后的圖像失真度比較小,目標邊緣消除了一部分邊緣方塊效應,同時圖像的灰度變暗。圖2(d)是采用本文方法對圖像放大3倍的實驗效果圖,從處理效果來看,本文方法有效地避免了小波插值帶來的圖像灰度變暗問題而且放大后的圖像保持較為清晰的輪廓。

圖2 小波插值與改進自蛇模型用于無噪聲圖像
為量化圖像的放大效果,采用峰值信噪比(PNSR)和均方誤差(RMSE)來評價圖像放大清晰效果的好壞.峰值信噪比是一種比較接近人眼的視覺效果評價量。均方誤差用來測量放大圖像與標準圖像的相近程度。表 1給出了不同算法的峰值信噪比對比結果,由表中結果可以看出,采用小波插值與改進自蛇模型對無噪聲圖像進行放大清晰處理后,圖像的峰值信噪比更高,均方誤差值更小。

表1 實驗結果圖像的PSNR、RSME比較
針對噪聲圖像在放大的同時也放大了噪聲,所以先采用自蛇模型對噪聲圖像進行去噪和清晰化處理,隨后采用小波插值進行放大,實驗中選取視頻圖像《羅馬假日》中的一幀噪聲圖像的局部進行放大清晰化處理,圖3為選取原視頻中的一幀圖像的局部(30×30),實現放大倍數為4。圖4(b)為直接對噪聲圖像進行雙線性插值得到的圖像效果,從圖中可以看出這種插值方法放大了噪聲,而圖4(c)則采用改進自蛇模型對幀圖像的局部進行去噪和清晰處理,隨后進行小波插值放大,最終效果如圖4(d) 所示,圖像的視覺效果較好,符合視頻圖像清晰度要求。

圖3 《羅馬假日》中的一幀圖像


圖4 小波插值與改進自蛇模型用于含噪視頻圖像
本文提出了一種基于小波變換與改進自蛇模型相結合的方法,該方法適用于對無噪圖像和噪聲圖像進行放大和清晰化處理:針對無噪聲圖像采用小波變換的方法代替傳統的插值方法[10],加上對放大后的圖像采用改進的自蛇模型進行邊緣修正處理,不僅能夠避免小波插值放大造成的灰度變暗和邊緣模糊問題,而且提高了算法的時間性能,同時由于噪聲圖像的特殊性,采用自蛇模型對待放大的圖像進行去噪和清晰化處理,隨后采用小波插值放大處理后的圖像。實驗結果表明:采用本文方法處理的圖像,不僅可以使得圖像平滑清晰,而且保持了圖像邊緣輪廓的細節特征,視覺效果較好。
[1]R.G Keys.Cubic convolution interpolation for digital image processing.IEEE Trans,Acoust,,Sp eech,,Signal Processing,1981,29(6)6:1153–1160.
[2]Chin-Chen Chang,Yung-Chen Chou,Yuan-Hui Yu and Kai-Jung Shih.An image zooming technique based on vector quantization approximation[J].Image an d Vision Computer,2005,23(13):1214-1225.
[3]S.Battiato,G.Gallo,F.Stanco.A locally adaptive zooming algorithm for digital images[J].Image and Vision Computing,2002,20(11):805-812.
[4]Abdelmonnitn Belahmidi,F.Guichard.A Partial Differential Equation Approach to Image Zoom[C].2004 International Conference on Image Processing(ICIP),2004:649-652.
[5]朱長青,王倩,陳虹.基于多進制小波變換的圖像放大方法[J].中國圖像圖形學報,2002,7(3),261-266.
[6]朱寧,吳靜,王忠謙圖像放大的偏微分方程方法[J].計算機輔助設計與圖形學學報,2005 17(9):1 941-1945.
[7]郝鵬威,朱重光.基于小波的圖像插值方法[J].遙感學報,1998,2(2):98-102.
[8]吳良武,歐宗瑛.保持輪廓清晰光滑的灰度圖像放大算法.計算機輔助設計與圖形學學報.2002,1 4(4):306—309.
[9]Osher S,Rudin LI.Feature oriented image en hacement using shock filters.SIAM.J.Num.An aL,1990,(27) ,919—940.
[10]Carey WK,Chuang DB,Hemami SS.Regularity preserving image interpolation.IEEE Trans I mage Proc,1999,8(9):1293-1297.