基于MATLAB/GUI的圖像語義自動標注系統

陸偉艷，鄭 鑫

?

基于MATLAB/GUI的圖像語義自動標注系統

陸偉艷，鄭 鑫

(廣西民族師范學院，廣西崇左 532200)

圖像語義自動標注系統對大量圖像數據庫的圖像檢索起到重要的作用，并能將圖像的視覺特征轉化為圖像的標注字信息，給檢索用戶帶來了很大的便利。文中研究了圖像自動語義標注系統的實現及有關技術，通過matlab中GUI的圖形用戶界面設計并實現了圖像自動標注系統，該系統能較好的實現圖像輪廓與顏色特征的提取。提取圖像輪廓是由顏色空間來獲取整體輪廓，該方法對于顏色變化比較明顯的圖像可以很好的提取輪廓。結合顏色特征與圖像輪廓進行相似度量，從而較好的將待標注圖像分類，采用特征點匹配標注圖像語義關鍵詞能夠比較準確的對圖像進行標注。

Matlab/GUI；自動標注；視覺特征；輪廓特征；圖像語義

0 引言

隨著多媒體數字影像技術與移動互聯網技術以及云計算存儲的迅猛發展，互聯網為用戶提供了驚人的大量的數字圖像資源。為了有效管理、查詢和瀏覽此大規模圖像資源，圖像檢索技術應運而生，已經成為研究的一個熱點[1]。現有的數字圖像檢索方式存在著底層特征與高層語義特征之間的“語義鴻溝”[2]。為解決‘語義鴻溝’的問題，人們就提出了基于圖像語義的檢索方式，隨之而來的問題就是圖像高層語義的映射技術及分類，自動圖像標注等技術就順其自然成為研究者們的關注問題。如何快速、有效的實現對圖像自動語義標注則得到了研究者的極大關注。

目前，不少研究者們也都在研究圖像自動標注技術，他們所提出的方法有著各自不同的出發點和解決方案。本系統要實現的圖像語義自動標注是為了自動獲取圖像的語義信息，并對待標注圖像給予關鍵字的標注，將標注的關鍵字存儲，并為檢索做出支持[3]。本文主要研究圖像語義自動標注的基本原理，基于Matlab/GUI實現圖像語義自動標注系統，利用圖形用戶界面，用戶可以很好的操作完成圖像底層特征的提取、根據特征相似將大量的圖片進行分類及存儲和圖像自動標注[4]。

1 系統設計

本系統主要研究面向網絡龐大的沒有整理過的無序的圖像信息來設計的，由于網絡的信息量超大，人工標注顯得工作量非常之大，而且由于個人情感差異和判斷差異，使得標注無法統一，檢索系統性能不理想[5]。因此，本文設計的系統是對沒有預先分類好的圖像集進行自動標注。由給出的系統設計方框圖可知，系統首先將沒有預習分類好的待標注圖像集進行顏色、輪廓特征的提取，然后計算所提取的這些圖像特征的互信息量，設置恰當的閥值將圖像集進行分類并分別保存在各自的圖像庫中，對已標注圖像提取特定區域的輪廓特征，并與分類好的圖像集匹配進行自動標注[6]。

圖1 系統設計構架

2 圖像特征提取及相似度

2.1 基于圖像顏色特征分類

圖像的視覺特征主要有顏色、紋理、形狀和空間關系等[7]。在視覺特征中最為廣泛使用的是顏色特征，因為顏色特征的定義比較其他的特征明確，它的提取方法也比較簡單，并且能夠較好的體現出圖像中所包含的物體或者場景[8]。本文采用RGB彩色空間，由于顏色直方圖作為圖像的顏色特征在圖像識別系統中應用比較廣泛，因此本系統提取圖像的顏色直方圖作為圖像的顏色特征[9]。通過式子（1）來描述圖像顏色的直方圖，定義顏色直方圖為H，在一副圖像中有N個像素，則在RGB的圖像顏色空間中被量化為3個不同的顏色，用表示第種顏色在整幅圖中具有的像素數那么有：

2.2 輪廓特征提取分類

本系統采用基于顏色的變化邊緣來對圖像進行提取輪廓[10]，次方法是通過顏色空間來獲取整體輪廓，檢測顏色空間的變換對圖像進行分割得到圖像輪廓，并進行修正最終確定輪廓，該方法對顏色變化較明顯的圖像提取輪廓特征有較好的效果。基于顏色特征分割是在EXG算法灰度化的基礎上技術閥值進行分割，以下式子（2）和（3）分別是EXG算法表達式與閥值表達式[11]：

（3）

2.3 圖像相似度計算及自動標注

本文沒有采用傳統的分類技術，而是通過循環批量的讀入圖像數據，各自計算每一幅圖像的RGB的三個分量的顏色直方圖，利用巴氏距離對比較的兩幅圖像的個顏色分量直方圖的歸一化，計算得到相關系數，相關系數越大，那么兩幅圖像的相似度就越大，這種方法計算量較小，因此在速度上還比較快。分類的效果較好，當然存在有誤分和漏分的現象，為了克服這一點問題，又采用提取圖像輪廓特征并在這基礎上提取輪廓圖像的特征點相互匹配進行二次分類。

本文使用的巴氏距離公式如下：

圖像自動標注：首先將上述待標注的各類圖像的特定區域特征與已標注的圖像特征進行匹配計算，把所有匹配系數比較帥選，系數越大的排在前面并且把圖像的關鍵字分別賦給這些待標注圖像，并顯示最相近的圖像。

3 實驗結果

本實驗從corel圖像庫中拿出200張圖像做實驗，其內容有大海、藍天、沙灘、建筑物、公共汽車、樹和路等，其中把大海和藍天、沙灘歸為一類，有七個關鍵字。采用傳統的巴氏距離計算對批量相互比較計算相似度，效果不好，分類不準確，比較難以設置的較精確的門限值。本文在原有的巴氏距離的基礎上做了一點改進，計算兩幅圖像的相似度效果有很大的改進得到較好的效果，查全率和查準率有所提高。查全率和查準率的定義式為：

（6）

圖3 圖像特征點匹配結果

圖5 輪廓特征結合顏色特征對海灘風景分類結果

圖6 “公共汽車”自動標注結果

4 結論

文中設計基于MATLAB/GUI的圖像分類及自動標注系統，該系統實現圖像的顏色特征提取及輪廓特征提取、圖像特征點提取、特征匹配相似度測量及分類、圖像自動標注。實驗結果證明系統性能較好，能夠較好的基于顏色和輪廓特征進行分類并匹配，能夠運用簡單的算法進行自動標注圖像，不足之處未能實現大量的圖像語義自動標注，對于大量的實現起來還是比較困難，因此該系統還需要進一步的完善和改進。

[1] 孫亞杰, 張永宏, 季賽.無方向數據采集的相控陣結構健康監測研究[J]. 數據采集與處理, 2014, (06): 1023-1029.

[2] 朱文球，劉強. 一種新的圖像自動語義標注與檢索算法[J]. 計算機應用研究, 2007(7): 318-320

[3] 李志欣, 施智平, 李志清. 融合語義主題的圖像自動標注[J]. 軟件學報, 2011(04): 213-224.

[4] 紀傳俊, 劉作濤, 產文. 一個基于語義上下文建模的圖像自動標注系統[J]. 計算機研究與發展, 2011: 450-454.

[5] 田楓, 沈旭昆, 劉賢梅. 大規模圖像語義相關性自動標注[J]. 計算機輔助設計與圖形學學報, 2013(02): 26-32+40.

[6] 歐陽軍林, 夏利民, 文杏梓. 結合SML與本體的圖像語義自動標注方法[J]. 小型微型計算機系統, 2012(09): 239-242.

[7] 紀穎. 一種基于實例的圖像自動語義標注方法[J]. 哈爾濱理工大學學報, 2009(1): 38-42

[8] MIGNOTTE M. Segmentation by Fusion of Histogram basedK-Means Clusters in Different Color Spaces[J]. IEEE Transactions on Image Processing, 2008, 17: 780-787.

[9] GROMPONE R, JAKUBOWICZ J, MOREL J M, et al. LSD: A Fast Line SegmentDetector with a False Detection Control[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2010, 32(4): 722-732.

[10] 夏旸, 管海兵, 宦飛. 基于顏色與線段的圖像輪廓提取算法[J]. 通信技術. 2012. 5: 58-60、65.

[11] OnyangoC, MarchantJ. Physics-based colour image segmentation for scenes containting vegetation and soil[J]. Image and Vision Computing, 2001, 19(8): 523-538.

Image Semantics Automatic Annotation System Based on MATLAB/GUI

LU Wei-yan, ZHENG Xin

(Guangxi Minzu Normal College, Chongzuo, Guangxi 532200)

Image semantics automatic annotation system plays an important role for image retrieval of large amount image database, it can transform visual features of images into annotation information, and bring great convenience for retrieval users. The article studied implementation of image semantics automatic annotation system and related technology, and realized image automatic annotation system through GUI graphical user interface design in MATLAB, which can realize extraction of image contour and feature well. For extraction of image contour, the whole contour can be extracted from color space, and it can be received well for images with obvious color change. Combined with color feature and image contour, we can carry on similarity measurement and classify annotating images. Image semantics key words annotation with feature matching can receive accurate image annotation.

Matlab/GUI; Automatic annotation; Visual feature; Profile feature; Image semantics

TP753

A

10.3969/j.issn.1003-6970.2017.04.018

廣西高校科學技術研究一般項目《基于圖像語義的圖像檢索技術的研究》（編號：2013YB270）

陸偉艷(1980-)，女，工學碩士，副教授，研究方向為為數字圖像處理；鄭鑫(1979-)，男，碩士，講師，主要研究方向為物聯網圖像技術。

本文著錄格式：陸偉艷，鄭鑫. 基于MATLAB/GUI的圖像語義自動標注系統[J]. 軟件，2017，38（4）：99-103