萬幼川,鄭順義,柯 濤
(1.武漢大學 遙感信息工程學院,湖北 武漢 430079)
新型航空傳感器快速處理方法探討
萬幼川1,鄭順義1,柯 濤1
(1.武漢大學 遙感信息工程學院,湖北 武漢 430079)

針對快速發展的新型航空傳感器如何進行快速處理問題進行了探討,包括多級并行處理機制、海量航空遙感影像的自動空中三角測量、大尺度三維地形信息精確提取、大區域大比例尺數字影像圖智能鑲嵌等技術;針對航空攝影過程中的實時處理探討了實時定位與測姿參數解算、航空遙感影像幾何與色彩質量評定、數字影像圖實時拼接等技術。
新型傳感器;海量數據;并行計算;實時在線處理;幾何質量;全景影像
隨著國內外新型航空傳感器快速發展,如三線掃描式的ADS40、80系統、寬幅SWDC、UCD、DMC數字相機在我國開始大范圍使用,現有的航空遙感數據生產采用單機、串行的生產作業模式人工干預量大,軟件智能化程度低,嚴重束縛了數碼航空影像高效、快速處理,更難以滿足突發事件應急響應和多種航空遙感應用發展的需求。因此,在現階段對獲取的高分辨率航空影數據如何實現快速處理仍然是一個亟待解決的瓶頸問題。
新型航空傳感器由于獲取信息速度快、幾何分辨率高,其處理的數據量呈幾何倍增,需要有效地解決海量航空遙感影像數據的多級并行處理機制、海量航空遙感影像的自動空中三角測量、POS輔助的海量遙感影像無(稀少)控制方位參數精化、大尺度三維地形信息精確提取、大區域大比例尺數字影像圖智能鑲嵌及海量航空遙感數據自動化處理質量控制等關鍵技術,實現海量航空遙感快速處理的自動化、并行化和智能化。
1)形成并行計算體系和開放式體系結構。研發多機、多核的兩級并行處理算法[1],通過最優化理論和多級優化算法,對任務隊列進行了高效合理的自動管理與分配;利用GPU實現了對影像處理過程的硬件加速,實現了持續或者近似100%地利用所有計算機、所有CPU從而使生產效率最大化。采用共享資源池的分布式調度模式,如圖1所示。集群計算機作為計算資源,磁盤陣列作為存儲資源,二者共同構成資源池,可以為網絡中分布的工作站所共享。服務器集群則用于管理構成共享資源池的各種資源,并對網絡中分布的工作站提供必要的資源申請和目錄查詢等各種服務。
圖2為網絡并行處理計算的一般流程。系統根據自動化處理與人工編輯作業相分離的設計原則,將測繪生產中自動化算法設計成基于網絡的并行處理程序。
將處理對象分解為影像、模型、航帶等,鑒于遙感影像的海量數據特點,任務分解時需要合理選擇并行處理粒度,盡量避免由于網絡結點間大數據傳輸引起的系統效率下降。確定并行處理的任務粒度后,建立整個處理任務的任務列表達到系統負載均衡。

圖1 共享資源池的分布式調度

圖2 網絡并行處理計算的一般流程
2)面陣/線陣影像空三自動匹配。針對框幅式中心投影的傳感器所獲取的影像其數據是按設計的航帶和曝光點獲取的在物理存儲上互相獨立的單幅影像,匹配的并行計算應以各立體像對和航帶為單元,對測區影像的匹配[2]任務進行并行計算的子任務劃分每臺刀片服務器為一個計算節點,各計算節點同時對各單航帶影像進行航帶內的匹配和轉點。搜索應遵循以下原則:①增大匹配的搜索范圍,以確保同名點位于搜索范圍內。② 物體表面連續光滑的假設在宏觀上不成立,應保證所有目標點匹配之間的獨立性,即每個目標點的搜索范圍應均等。③在大范圍搜索情況下,為了提高匹配的速度,保證匹配的成功率和可靠性,應采用基于多級金字塔影像和由粗到細的匹配策略。④ 幾何約束條件與局部連續光滑約束條件依然是必要的。
線陣影像的物理存儲是以條帶為單元,即一個條帶的影像存儲在一個大的文件中。如一個航帶的三線陣影像包括前視、下視和后視3個條帶的影像數據[3],各視的條帶數據分別獨立存儲在一個大文件中。因此三線陣影像空三自動匹配的并行計算必須先將三線陣影像在邏輯上劃分為若干塊,然后以邏輯塊作為子任務發送給集群計算機的多個計算節點進行并行匹配。
3)三維地形信息快速提取。多特征匹配使數字表面模型可以更好地反映地形地貌特征,匹配算法在傳統特征點匹配的基礎上增加了直線和曲線特征(用來表示地形特征線,如道路、山脊和建筑物邊緣等)的匹配。將傳統的特征點整體松弛匹配也擴展為點、線特征的混合松弛匹配[4]。除此以外,在點、線混合松弛過程中,三角網是一種非常高效的數據結構用于確定某個匹配點鄰域中的松弛點。為了提高匹配的成功率,同時抑制誤匹配率,除了最高一級金字塔影像以外,其余每一級金字塔影像(包含原始影像)匹配時都要根據上一級金字塔影像的匹配結果和影像的紋理特征對匹配參數進行自適應的調節。其中匹配參數包括影像相關窗口的大小、物方搜索范圍、相關系數閾值以及特征點提取格網的大小等等。例如對于平坦地形,相應的物方搜索范圍就需要小一些,而特征點提取格網則可以適當大一些;又例如影像上紋理特征比較匱乏的區域(水域或陰影區域),就應當適當增大相關窗口和提高相關系數閾值等。
4)正射影像制作。正射影像制作中常用的遙感影像勻光處理包括補償法和濾波法[5]。補償法中可以通過數學模型模擬,也可以通過低通濾波的方式來反映影像亮度變化,然后再對影像不同部分進行不同程度的補償,從而獲得亮度、反差均勻的影像。對于DMC、ADS40等特定相機拍攝影像,使用相應的數學模型模擬相機成像造成的不均勻光照現象;對于其他情況的不均勻光照,目前常用傳統光學曬印中的MASK勻光,使用低通濾波結果模擬影像亮度變化。濾波法中常用的是Wallis濾波器,將影像局部均值和方差調整至給定的均值和方差,使影像不同位置處的灰度均值和灰度方差具有近似相等的數值,以達到勻光效果。
快速鑲嵌技術以BBI文件的小塊為基本鑲嵌單元,尋找每一小塊與單幅正射影像中心點(或者影像的攝站坐標)的最小距離,以最小距離所對應的單幅正射影像作為該小塊的紋理填充源進行快速填充,該方法實際上與基于Voronoi圖的鑲嵌方法類似。給出鑲嵌線的初始位置,然后再人工修改鑲嵌線以避免穿過房屋、樹木等高出地面的地物或者灰度差異大的區域。目前數碼航空影像已經成為航測生產最主要的數據來源,其高重疊度、大比例尺特征大大增加了正射影像鑲嵌處理的工作量。可以利用蟻群算法來實現鑲嵌線的自動檢測。
面向航空遙感系統快速發展及實時信息提取的需求,解決航空遙感數據實時檢測與監控關鍵技術,研究數碼航攝儀與定位定向系統集成、實時定位與測姿參數解算、數字影像圖實時拼接、航空遙感影像幾何與色彩質量評定等技術,建立機上實時檢測與處理,服務于航空遙感質量保障、快速響應、實時監控與指揮決策等應用。

圖3 機上位置姿態數據實時解算流程圖
1)機上航空傳感器位置姿態實時解算技術。研究機上航空遙感快速處理硬件集成技術,通過國產自主航空數碼相機及POS系統集成技術,實現機上數據處理設備的快速通信與調度,利用機上實時處理硬件平臺,實現機上GPS攝站坐標數據的高精度實時處理,IMU姿態數據實時解算與輸出[6]。如圖3所示,主要包括信息采集、時間同步、坐標轉換、IMU和GPS數據實時聯合解算、外方位元素內插與改正等主要環節。
2)航空遙感影像幾何質量實時評定。在航空影像數據采集過程中,由于天氣和飛行計劃等因素的影響,可能存在漏拍、影像重疊度不夠、旋偏角過大等情況,如能在飛行過程中實時計算出航攝漏洞區域,指導實時補飛,則可以大幅節省數據獲取成本。采用影像所對應的外方位元素來計算相關的數據,根據規范要求的最小航向、旁向重疊度、各條航帶的航偏角等參數,對航攝區域數據進行質量評定和分級,對幾何質量不合格地區的信息進行綜合分析,為制定最優航攝補拍方案提供數據。
航空遙感影像幾何質量實時評定首先讀入航攝遙感影像以及解算的定位定姿的數據。為保證實時處理的需要,采用通過實時解算得到的定位定姿的數據來計算重疊度、旋偏角、航線彎曲度。首先通過外方位元素角元素將傾斜影像置平,然后根據外方位線元素確定置平后的水平影像的縮放參數,以上兩步可以合為一步完成以降低系統處理的時間,通過統計相鄰影像重疊的像素數來計算相鄰影像的重疊度,確定整個區域的重疊度圖。
3)航空遙感影像色彩質量實時評定。航空攝影影像的質量關系到內業數據處理的效率與成果質量,影像數據模糊會導致空三精度與立體測圖精度下降,顏色質量差導致DOM制作過程中編輯工作量大,DOM成果觀感差。航空攝影時應保證影像內容清晰、亮度對比度適中、色調飽和、無大面積陰影區域、無云與云影等,同時還應保證相鄰影像之間的色調基本一致。需要研究確定描述影像質量的定性與定量指標(包括信息熵、信噪比、均值方差、平均梯度、灰度動態范圍、亮度空間分布均勻度與顏色空間分布均勻度等)、陰影檢測與云量實時估計等算法。
通過對陰影特性進行分析,選取能夠有效檢測陰影的特征組合,改進了Otsu閾值算法,可以自動獲取各特征的合適閾值,實現陰影的自動檢測(如圖4所示),并提出了改進的Wallis濾波陰影補償策略,突出陰影區域的地物信息。實驗結果表明,該檢測算法簡單有效,精度和適用范圍均得到有效提高,陰影補償效果明顯,真實再現了被陰影遮蔽的地物細節。
4)全景影像圖實時拼接技術[7]。全景影像圖與正射影像不同,它是原始影像的直接拼接結果,無需地面控制點和數字表面模型等已知數據,也無需正射糾正。盡管快速拼接圖不是基于嚴格的共線方程正射糾正生成,也沒有考慮地形起伏的影響,相鄰影像在拼接線附近會存在一定的接邊誤差,但具有很強的實時性,完全滿足測區整體現狀評估、土地利用現狀調查、自然災害快速響應、外業控制點設計與布設等方面的要求。研究航空相機與定位定向系統的高精度集成方法,對位置和姿態參數進行實時計算與坐標轉換,采用機上實時處理平臺對各影像進行實時鑲嵌,實現數字影像圖的在線拼接。

圖4 不同區域有云圖的檢測結果
圖5所示處理過程中首先讀入預處理后的航攝遙感影像、預先設計的航線計劃信息以及對應的定位定姿數據;根據航攝計劃中的測區信息及全景影像圖的比例尺計算出拼接圖大小。待解算出當前影像的外方位元素后,根據外方位元素和影像4個角點的影像坐標按共線條件方程解算出該張影像在全景圖像中的覆蓋范圍,然后根據共線條件方程和原始影像的灰度信息得到全景圖該范圍內的每一像素的顏色值,在此過程中檢查拼接圖上每一像素的重疊度。按照該方法生成全景圖實質上是利用外方位角元素組成的旋轉矩陣將傾斜影像變換為水平影像,然后根據外方位線元素平移縮放影像至全景圖中正確的位置。

圖5 數字影像圖實時拼接
新型航空傳感器快速處理必須依賴并行計算、信息化和高度智能化,其結果必將引起生產方式變革和生產效率大幅度提高;航空影像進行幾何質量、遮擋損失、色彩質量等方面的在線評定可以調整航攝策略,
實現高質量影像的準確獲取及滿足應急的需要。
[1] 張劍清,柯濤,孫明偉,等.并行計算在航空攝影測量中的應用與實現:數字攝影測量網格(DPGrid)并行計算技術研究[J].測繪通報,2008(12):11-14
[2] 袁修孝,明洋.一種綜合利用像方和物方信息的多影像匹配方法[J].測繪學報,2009,38(3):216-222
[3] 張永軍,鄭茂騰,王新義,等.“天繪一號”衛星三線陣影像條帶式區域網平差[J].遙感學報,2012(S1):84-89
[4] 王華,侯相深,叢建亭,等. 已知初始匹配對的圖像四元松弛匹配算法[J].北京航空航天大學學報,2010,36(7):785-788
[5] 王密,潘俊.一種數字航空影像的勻光方法[J].中國圖像圖形學報2004,9(6):744-748
[6] 彭孝東,張鐵民,李繼宇,等.基于傳感器校正與融合的農用小型無人機姿態估計算法[J].自動化學報,2010,41(4):854-860
[7] 彭孝東,張鐵民,李繼宇,等.無人機低空遙感影像的自動拼接技術研究[J].西北水電,2012(2):14-18
P231
B
1672-4623(2016)12-0001-03
10.3969/j.issn.1672-4623.2016.12.001
萬幼川,教授,博士生導師,主要研究方向為攝影測量與遙感技術。
2016-10-25。
項目來源:國家科技支撐資金資助項目(2014BAL05B07)。