太赫茲/毫米波人體安檢和人臉識別技術深度融合應用研究

鄧維立 劉震 山東省泰安市公安局

引言

長期以來，電磁波人體安檢和人臉識別安防應用在反恐維穩、重大安保等公共安全領域分別發揮著不可替代的作用。隨著人臉識別技術的發展，智能感知的安防天網不斷完善，但是其防范能力仍然達不到安檢級別，對無法強制安檢的公共區域的未知風險仍然難以提前預警。如今，隨著新興電磁技術不斷取得突破并應用于人體安檢領域，研發具備電磁探測功能的“透視天眼”，將安檢系統和人臉識別圖像系統實現數據級融合并開展深度應用，已經成為現實。而這種融合對于開放區域的大范圍安防預警以及非配合條件下的智慧安檢將起到至關重要的作用。

一、需求背景

當前，主流人體安檢手段是在機場等重要場所由手持安檢儀的安檢人員或設置安檢門、安檢通道進行強制檢測，其局限性在于對地點、設備、安檢人員和被檢人配合度高度依賴。比如醫院、商場等場所，并不適合強制安檢，但是人員密集，一旦發生暴恐行為后果難以想象。隨著圖像技術的發展，人臉識別安檢門、安檢人臉識別系統等一體化安檢系統逐漸投入使用，大幅提高了安檢速度和精度，實現了安檢系統的功能升級。然而這種嵌入式的集成實際上仍然是安檢系統和人臉識別系統的硬件組合，并未實現數據級的融合應用。不能像安防監控系統一樣大范圍開放式部署并實現圖像信息綜合應用。而對于人臉識別、視頻監控等安防應用來說，則只能采集視頻圖像，針對城市公共安全防范和未知的暴恐行為，如公交車、校園、廣場等區域范圍廣、人流大，仍然存在安檢手段難以提前介入、對身上有危險物品的人員無法提前預知預警、開放區域人流太快來不及布控抓捕等問題。如何讓危險人員“不知不覺過安檢”一直沒有實現。當前發達的安防物聯網技術和圖像大數據應用已經實現了人臉識別，并可以大范圍跨區域感知預警、實時布控、刻畫人員軌跡，但并不能實現安檢級別的危險物品檢測發現。如何融合打通安防和安檢兩個層面，進行深度融合運用，實現在開放區域對流動人員安檢并實時預警，結合人像比對進行身份識別、軌跡刻畫和區域布控，是現實存在的重要需求。

二、關鍵技術及研究現狀

要實現非可見光人體安檢和人像識別的數據級融合并開展深度應用，涉及電磁波和圖像處理兩大領域，以及電子通信和大數據等相關技術。其中人像識別技術早已成熟并在全國安防行業實現大規模應用，數據通信和大數據作為基礎技術對該項目來說完全能夠滿足，并非本文重點，不再贅述。本文僅就研發“能安檢的人像識別監控”方向，探討所需技術以及實現模式。

（一）毫米波和太赫茲

傳統的手持安檢儀、安檢門等采用的電磁場、X射線和X射線背散射等技術，因其工作原理必須依賴有人值守式的強制安檢，遠遠無法滿足上述需求。而要實現人體安檢設備的非接觸式乃至隱蔽應用，對安檢設備而言首先要解決的問題是設備的被動式、非接觸式和快速成像。因此在電磁波家族眾多成員里，能夠被動式探測人體危險物品并成像的只有兩個頻段：太赫茲和毫米波。毫米波，是指頻率在30GHz～300GHz之間的電磁波。太赫茲波，是指頻率在100GHz～10THz之間的電磁波。這兩段電磁頻譜處于傳統電子學和光子學研究頻段之間的特殊位置，二者存在部分頻段重疊，過去對其研究以及開發利用都相對較少。近年來其特性越來越多的被應用于安檢領域，比如毫米波較短的波長可以有效減少器件尺寸，更在成像方面可以有更高的分辨率。而太赫茲的高分辨力、透視性、安全性和瞬態性，結合被動成像技術可以實現更好的探測效果。而且這兩個頻段都可以實現被動檢測，接收人體對外輻射，對人體安全無害。2018年，民航局頒布了《民用航空毫米波人體成像安全檢查設備鑒定內控標準》及《民用航空毫米波人體成像安全檢查設備違禁物品探測能力測試程序》，正式將毫米波人體成像設備納入中國民航安檢設備清單，中國由此成為全球第三個、亞洲第一個獨立頒布毫米波人體成像技術標準的國家實體。同年，國內多家廠商和科研機構推出了應用級的太赫茲安檢儀，“無輻射、無感知、無觸摸、無停留”的人體安檢新概念正式登場，標志著毫米波和太赫茲這兩大電磁領域最前沿的新興技術已經進入安檢應用階段。可以肯定的是，在當前技術條件下，毫米波和太赫茲是打通電磁人體安檢和人像識別安防兩大領域，實現數據級融合應用的最佳選擇。

（二）多模圖像融合與結構化

傳統的有人值守式安檢通過終端直接查看非可見光成像，對于非可見光成像和可見光成像進行多模圖像融合并非必要需求。視頻大數據和人臉識別盡管已經技術成熟并實現普及應用，但是只針對可見光攝像頭的成像處理。目前非可見光攝像頭成像技術已經成熟，可以通過安檢設備接收人體自然輻射的太赫茲/毫米波信號，采用合成孔徑實時成像技術，實現對人體及攜帶物品高分辨率實時成像。而要實現數據級融合和大數據應用，還需要對可見光成像和非可見光成像進行多模圖像融合，將非結構化的非可見光成像轉換為結構化數據。多模圖像的直接融合較為困難，結合當前技術條件，筆者設計了一種轉換方法：先將非可見光攝像頭成像轉換為可以由計算機視覺辨認的普通圖像，再運用現階段已經成熟的視頻結構化算法，將其圖像結構化分析，識別出可疑圖像，通過通信模塊將報警信息傳送給人臉識別單元，再由人臉識別單元立即鎖定人臉，進行人臉識別和圖像大數據應用。

（三）目前國內研發現狀和存在問題

根據公開資料，近年來國內先后發布了多種被動式太赫茲/毫米波人體安檢設備，在外形和技術指標上已經不斷完善。北京航空航天大學研制的攝像式毫米波人體安檢儀，可在人流密集的環境下進行隱蔽監視，最遠檢測距離可達5米。中電科五十所正在開發的太赫茲多頻-多模成像安檢設備，采用主、被動融合的多頻段太赫茲成像探測技術，可進行大范圍掃描成像，實現在人流量大的場所對危險品進行快速檢測、識別與定位。公安部一所推出的Fiscan-Safesearch設備體積小巧，可懸掛于墻壁、天花板處進行隱藏式檢查；重量輕，功耗低；可用于較大人流量處，于不同距離進行連續性篩查；其智能被動式探測無需主動配合，自行完成過往人群的探測，全程無需工作人員。此外，上海理工大學現代光學系統重點實驗室課題組研發的安檢儀可探測15米大范圍內人群。中國航天十一所、二十五所、二〇三所等也紛紛立項推出并和國外頂尖機構聯合研發了毫米波和太赫茲安檢儀。以上這些產品的出現為實現“安檢+人臉”應用打通了過去難以逾越的技術壁壘，加上不斷完善的人臉識別算法和視頻結構化技術，數據級融合已經成為現實。

圖3所示的是某城市地鐵測試的一種太赫茲人體安檢設備，可以對3m～15m、120°角度范圍內遠距離成像。

可以看到該設備大小已經十分接近攝像機，而且已經實現了圖像對齊和圖像融合。

綜上，可以看出被動式太赫茲/毫米波人體安檢儀產品已經逐漸研發完成并向應用邁進，要實現人體安檢和人臉識別的軟硬件集成和數據融合，其體積、成像、探測距離等核心技術已經實現，目前存在的問題主要是國內被動式太赫茲/毫米波安檢儀普遍處于樣機測試和立項階段，尤其是對于“天網”監控攝像機式的掛桿應用來說，還存在成本高、體積體重較大、成像分辨率、報警準確率距離大數據應用還需進一步提高等問題。在過渡階段可以通過落地式放置、后臺人員遠程值守等方式來實現綜合應用，從長遠來看，仍然需要不斷攻克技術難關，早日實現“天網”圖像式的成熟規模應用。

三、系統架構與流程

（一）系統架構

系統架構拓撲圖如圖5所示。

1. 非可見光探測模塊

即安檢探測模塊，使用太赫茲或毫米波安檢技術的危險物品探測模塊。通過非可見光攝像頭成像，發送至模塊2。

2. 光學圖像轉換模塊

將模塊1的非可見光攝像頭成像傳給該模塊，轉換為可以進行計算機視覺識別的一幀一幀的安檢探測視頻圖像，發送至模塊4。

3. 可見光成像模塊

通過人臉識別攝像模塊采集可見光成像的視頻圖像信息，發送至模塊4。

4. 視頻結構化分析模塊

該模塊作用有三：（1）接收模塊2發送的轉換后的安檢探測視頻圖像，轉化為結構化數據A。并對該數據進行分析，是否攜帶危險物品及危險物品內容。并生成報警數據。（2）接收模塊3發送的人臉視頻攝像模塊的視頻圖像，轉化為結構化數據B。（3）根據結構化數據A的分析結果，將報警數據和結構化數據B進行數據融合，生成含有人臉識別信息的報警數據C，并將數據C發送給模塊5。

5. 后臺模塊

該后臺模塊是指包含人員數據庫，有人像識別和軌跡分析、人臉布控等功能的圖像信息綜合應用系統。該模塊接收模塊4推送的數據C，通過系統和后臺數據庫進行比對，識別人員身份，并在系統進行人臉布控和軌跡分析。

（二）實現模式

根據上述架構，系統功能實現流程可以為雙向報警推送：（1）由安檢模塊掃描進行安檢，一旦發現可疑物品報警立即對人像數據進行標注，經視頻結構化后推送系統進行身份識別，隨即啟動對人員進行軌跡分析和布控。這種方式對系統性能、數據容量、安檢準確度要求較高。（2）反向報警推送。針對某些場景下只需要對數據庫關注人員進行重點檢測，不需要進行“逢人必檢、全部采集”的情況下，也可以先在后臺建立重點關注人員庫，由人臉識別模塊發現關注人員后，先進行人員報警，自動啟動檢測，根據檢測結果決定是否進入后續流程。比如有的重點場所人臉識別系統建設了可疑人員模型（陌生人、無故逗留、反復出現等），可以在模型比對認定為可疑人員后啟動安檢。一定程度上可以減少誤報、減輕安檢工作量和系統負荷。上述兩種流程可以單獨，也可以結合運用，隨著大數據建模的普及和算法的成熟，實際實施可以結合實際搭建不同模型，比如對檢測出的可疑人員只在出現在重點部位時報警，根據防護目標的不同設置不同的危險物品庫、劃分危險等級等。

（三）應用場景及成效

“監控+安檢”深度融合的新安防模式將主要用于開放式區域，實現對攜帶危險和可疑物品人員的預警防控。從反恐維穩到區域安保，其突破性的應用成效和廣闊應用前景可期。筆者在應用研究中選取了很多場景進行分析，其中之一就是社會高度關注的暴力傷醫事件。以醫院場景為例，其特性決定了很難采取傳統安檢，院內遍布的監控也只能起到事后追查作用。而滿足非接觸式、無人值守和大數據預警研判的新安防體系一旦落地應用，對于防控此類風險，減少犯罪和悲劇的發生必將起到重要作用。

四、結語

隨著太赫茲、毫米波安檢技術的不斷發展，今后安檢設備的小型化、無感化和高分別率、高靈敏度技術將不斷提升，與人臉識別等視頻圖像大數據系統實現數據融合后的跨維智能化應用已經成為現實。積極探索開展電磁技術在公安工作中的深化應用研究，開始公共安全“大電磁”新格局的建設實踐將成為必然趨勢。當前，在深度融合“電磁探測+人臉識別”，打造安檢級視頻安防應用方面的技術難關已經被攻克，相信隨著新的融合需求的發現和提出，必將加快應用級產品的研發落地和規模應用。實戰引領必將帶來行業變革，未來，筆者將繼續以公安實戰為抓手，與學術界、產業攜手并進，推動建立“電磁+大數據”多維融合新生態。