基于云計算的海量影像數(shù)據(jù)快速處理模型探討

樂海軍

摘 ? 要：本文以海量數(shù)據(jù)的快速處理模型設(shè)計為研究對象，首先分析了云計算模型構(gòu)建的需求，進(jìn)而進(jìn)行了云計算模型的架構(gòu)，在此基礎(chǔ)上，探討了云計算處理模型的運行機制和具體的模型實現(xiàn)，并采用實驗數(shù)據(jù)進(jìn)行了類比分析，證明了其有更大的運行效率，相信對從事相關(guān)工作的同行能有所裨益。

關(guān)鍵詞：云計算 ?航空影像 ?數(shù)據(jù)處理 ?構(gòu)架

中圖分類號：P237 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 文獻(xiàn)標(biāo)識碼：A ? ? ? ? ? ? ? ? ? ? ? ?文章編號：1674-098X（2019）09（a）-0121-02

隨著攝影測量手段和信息獲取技術(shù)的發(fā)展，航空影像數(shù)據(jù)的獲取周期越來越短，航空影像數(shù)據(jù)的更新頻率越來越快。

對于海量遙感數(shù)據(jù)快速處理以達(dá)到實現(xiàn)快速響應(yīng)機制，傳統(tǒng)的攝影測量數(shù)據(jù)處理平臺已經(jīng)不能滿足當(dāng)前的生產(chǎn)需求。因此，如何快速、高效地處理這些影像數(shù)據(jù)，以及如何迅速地從影像數(shù)據(jù)中獲取用戶所需的基本信息（如概貌、土地的分類、土地利用情況、植被分布、水系的分布和變化，災(zāi)害區(qū)的范圍等）是一個值得研究并且急需解決的問題，也是建立遙感快速響應(yīng)機制領(lǐng)域的一個重要的應(yīng)用和發(fā)展方向。

本文將云計算模型處理的技術(shù)引入影像數(shù)據(jù)處理中，設(shè)計了基于云計算的海量影像數(shù)據(jù)的云處理模型。

1 ?云計算模型構(gòu)架

云計算的關(guān)鍵是如何實現(xiàn)大規(guī)模地連接到更加廣泛的服務(wù)器甚至個人計算機，使這些計算機并行運行，各自的資源結(jié)合起來形成足可比擬超級計算機的計算能力。我們可以通過個人電腦或便攜設(shè)備，經(jīng)由因特網(wǎng)連接到云中。對用戶端來說，云是一個獨立的應(yīng)用、設(shè)備或文件，云中的硬件是不可見的。

它的過程是這樣的：首先，用戶的請求被發(fā)送給系統(tǒng)管理，系統(tǒng)管理找出正確的資源并調(diào)用合適的系統(tǒng)服務(wù)。 這些服務(wù)從云中劃分必要的資源，加載相應(yīng)的Web應(yīng)用程序，創(chuàng)建或打開所要求的文件。Web應(yīng)用啟動后，系統(tǒng)的監(jiān)測和計量功能會跟蹤云資源的使用，確保資源分配和歸屬于合適的用戶。

2 ?云計算處理模型的運行機制

基于云計算模型的影像數(shù)據(jù)處理模型是在傳統(tǒng)的影像數(shù)據(jù)處理流程的基礎(chǔ)上，突破了傳統(tǒng)的計算模式，使用了云計算強大的計算資源來完成整個數(shù)據(jù)處理中的大量的數(shù)字運算。其中包括任務(wù)的分發(fā)、云端處理以及處理完數(shù)據(jù)的集中和影像的鑲嵌等操作。

2.1 云處理模型的體系結(jié)構(gòu)

云工作站負(fù)責(zé)管理和分發(fā)任務(wù)，云端處理服務(wù)器依據(jù)分發(fā)的任務(wù)，從云存儲中取出影像進(jìn)行相應(yīng)的處理，通過 TCP/IP 通信協(xié)議與服務(wù)器建立通信。當(dāng)對應(yīng)的云端處理服務(wù)器（可以是大型的計算機，也可以是微型的個人機）接收到任務(wù)時，通過調(diào)用系統(tǒng)的計算資源進(jìn)行相應(yīng)的處理服務(wù)，同時通過云端系統(tǒng)之間的相互通信可以實現(xiàn)一些軟件資源的共享等。

2.2 云處理模型的工作流程

圖1為基于云計算模型的影像數(shù)據(jù)處理系統(tǒng)的一般的工作流程，主要包括任務(wù)表的創(chuàng)建與分發(fā)，云端系統(tǒng)的具體處理過程以及數(shù)據(jù)成品的集中和影像的鑲嵌。利用云計算強大的計算資源來完成其中涉及到的巨大的運算要求。

3 ?基于云計算的航空影像處理模型

在這個模型系統(tǒng)中，主要包括數(shù)據(jù)的預(yù)處理和專題信息的提取。在后期的制圖過程中主要包括地圖信息的符號化和綜合。

3.1 預(yù)處理

遙感圖像的預(yù)處理主要包括幾何校正和輻射校正， 還包括其他的預(yù)處理手段。遙感圖像成圖時，由于各種因素的影響，圖像本身的幾何形狀與其對應(yīng)的地物形狀往往是不一致的。遙感圖像的幾何變形是指圖像上各地物的幾何位置、形狀、尺寸、方位等特征與在參考系統(tǒng)中的表達(dá)要求不一致時產(chǎn)生的變形。遙感圖像的變形誤差可以分為靜態(tài)誤差和動態(tài)誤差兩大類。靜態(tài)誤差是在成像的過程中，傳感器相對于地球表面呈靜止?fàn)顟B(tài)時所產(chǎn)生的各種變形誤差。動態(tài)誤差主要是成像過程中由于地球的旋轉(zhuǎn)等因素所造成的圖像變形誤差。遙感圖像的幾何處理主要包括圖像的粗加工、精糾正，還包括重采樣以及共線方程的糾正等。

由于航空影像成像過程的復(fù)雜性，傳感器接收到的電磁波能量與目標(biāo)本身輻射的能量是不一致的。傳感器輸出的能量包含了太陽位置和角度條件、大氣條件、地形影響和傳感器本身的性能所引起的各種失真，這些失真不是地面目標(biāo)本身的輻射，因此對圖像的使用和理解會造成影響，必須加以校正或消除。

3.2 中期操作

在傳統(tǒng)的遙感影像專題信息提取中，主要包括影像數(shù)據(jù)的格式轉(zhuǎn)化，圖像的增強和均衡化、波段的融合、糾正等，文本資料的分類，地圖信息的分析，同時在信息的提取中有監(jiān)督法分類和非監(jiān)督法分類，以及分類后處理等操作。 在基于云計算模型的遙感影像處理系統(tǒng)中，上述的操作方法不變，變化的是計算的模式。 傳統(tǒng)的處理模式是串行的處理，基于云計算的遙感影像處理模式主要是利用云端系統(tǒng)強大的計算資源實現(xiàn)影像的實時處理。

在完成任務(wù)的分發(fā)后，相應(yīng)的云端通過直接的相互通信，能夠下載相應(yīng)的處理模塊所需的軟件和模塊，同時按照當(dāng)前服務(wù)器的計算資源狀況完成相應(yīng)的處理和任務(wù)的分發(fā)等。

3.3 后期操作

后期的專題地圖的制作中主要包括地圖信息的綜合，按照專題的信息決定地圖信息的取舍，突出重點的專題，省略其他無關(guān)的要素，符號化的過程主要依據(jù)可視化和視覺美學(xué)等知識進(jìn)行取舍，其中涉及到大量的計算任務(wù)仍然放到云端來完成。

影像數(shù)據(jù)的處理一般包括格式轉(zhuǎn)換、圖像的增強、均衡化、波段的融合等，在影像數(shù)據(jù)的應(yīng)用上主要有信息的提取、分類、專題圖的制作等。

4 ?模擬實驗數(shù)據(jù)類比

在這個基于云計算模型的遙感數(shù)據(jù)處理系統(tǒng)中我們設(shè)計使用的是云端強大的計算能力，突破傳統(tǒng)的計算模式。

由于云計算模型從理論走向?qū)嶒炦€有一個過程，這個實驗現(xiàn)階段沒辦法完成。現(xiàn)以“數(shù)字?jǐn)z影測量網(wǎng)格系統(tǒng)一 DPGrid”實驗的數(shù)據(jù)進(jìn)行生產(chǎn)實驗和效率對比。

表1為DPGrid系統(tǒng)（8臺刀片服務(wù)器）與傳統(tǒng)數(shù)字?jǐn)z影測量工作站生產(chǎn)效率對比表。從實驗5可以看出，一個中等城市（3000km2），6000幅DMC航空數(shù)碼影像，8臺刀片服務(wù)器，僅需要15天即可生成影像鑲嵌圖。而相同的數(shù)據(jù)，按照傳統(tǒng)作業(yè)方式制作正射影像圖，需要10個以上的工作人員一年以上的時問。同時由表1可以看出，鑲嵌圖耗時最短，因而可滿足快速響應(yīng)的需求。同時并行計算的效率比傳統(tǒng)串行計算的效率提高了3～10倍，并且影像數(shù)越多，效率提高的越多。云計算平臺具有更加龐大的服務(wù)器群，計算能力更加強大，相比DPGrid系統(tǒng)有更大的運行效率，這將使得海量的遙感數(shù)據(jù)處理得更加準(zhǔn)確、及時。

5 ?結(jié)語

云計算是一種顛覆性的技術(shù)，具有深刻意義，不僅對互聯(lián)網(wǎng)服務(wù)，而且對整個IT業(yè)都是一次革命。將它應(yīng)用在航空影像數(shù)據(jù)處理領(lǐng)域更是一種大膽的嘗試，作為航空影像數(shù)據(jù)處理專業(yè)領(lǐng)域，如何進(jìn)行海量數(shù)據(jù)存儲與處理、系統(tǒng)的擴展與開放等是該領(lǐng)域長期的瓶頸，云計算的出現(xiàn)給解決這些問題帶來了希望。本文詳細(xì)探討了遙感云計算的系統(tǒng)構(gòu)成和實現(xiàn)方法，并以一個具體的原型系統(tǒng)展現(xiàn)了航空影像云計算模式的用戶界面、技術(shù)手段和運行流程。

參考文獻(xiàn)

[1] 穆琳.于B/S架構(gòu)的海量國產(chǎn)高分辨率遙感影像的批量快速處理方法[J].國土資源信息化，2016（2）：22-26.

[2] 沈曉麗.三維影像數(shù)據(jù)的處理、存儲與發(fā)布[J].山西電力，2010（12）：8-60.

[3] 曹敏.新一代海量影像自動處理系統(tǒng)“像素工廠”初探[J].測繪通報，2006（10）：5-58.