何 歡,李高云,曠生玉,江 果,王冠華
(中國電子科技集團公司第二十九研究所,四川成都 610036)
電子偵察是一種典型的無源偵察,即被動接收對方輻射源發射的電磁波信號,經信號級處理后得到電磁偵察數據,該數據屬于典型的時序數據,內容包括時間戳、參數信息、空間信息和屬性信息等。眾多類型的偵察設備在各個時刻對當面范圍目標進行探測,單日形成數億條、TB 級的海量時間序列大數據,匯總后需要對其進行高效存儲,并要求存儲方式具有可擴展性,以應對數據量隨時間與日俱增的需求,方便后續利用人工智能、大數據分析等新興技術手段,提供高效的數據支撐,實現對數據潛在價值的挖掘和應用。
針對電磁大數據的特點和處理需求,臧維明等人研究了電磁大數據挖掘分析架構,提出了電磁大數據混合存儲架構,滿足多來源、多屬性、多類型、多專業、小樣本、開環非配合、博弈規則不確定等典型特征的數據存儲治理需求。陳學淵等考慮電磁數據的跨域特性,研究了跨地域環境下的電磁數據分布式存儲架構。業界Apache 基金會頂級項目HBase存儲方案,基于HDFS的開源、分布式、列式數據存儲,是對Google 的Big Table的 開 源 實 現,具 有 可 伸 縮、高 可靠性、高性能、行鍵單一索引等特點,作為一個成熟的非關系型數據庫,已成功用于金融、交通、電網等大數據存儲領域。上述研究為電磁偵察大數據存儲設計提供了很好的借鑒。
本文首先分析了電磁偵察大數……