基于多傳感器的戶外體感交互研究

王樹輝

（長春工程學院 計算機技術與工程學院，吉林 長春130012）

因虛擬現實技術的不斷發展，各種交互方式也隨之層出不窮，其中最符合人的自然屬性交互模式當屬體感交互。體感交互往往讓人們不由自主的將娛樂動作在交互過程中體現出來，所以是非常受大眾喜愛的。目前虛擬現實和其交互技術在電子娛樂，互動教育，機械視覺，傳媒廣告等實際應用中越來越被重視和應用。《中國廣告方式調查報告》顯示，在中國有21.86%的受眾群體中明確表明喜愛虛擬現實。

1 目前廣告互動方式

目前的商品廣告為了提升公眾的參與度，已經開始越來越多地向借鑒新媒介相關技術，其中虛擬互動技術的出現使得廣告商的原有格局發生了變化，現在的廣告不僅有美觀性，還增加了互動內容，但是目前的互動仍然是網頁和線上互動最多，近年來傾向短視頻植入廣告的方式也仍然是給個鏈接而已。廣告的互動方式和交互度急需改變。而廣告的載體在戶外基本都是以LED 大屏的方式出現，價格和技術因素讓特大尺寸的高清LED和彩色LED 隨處可見，在戶外目前所見的各種LED 大屏內的廣告均為視頻廣告，這些戶外的廣告方式也亟需改變。

2 現有體感交互手段

如果將體感交互技術與戶外廣告結合，就可解決上述問題。目前最常用的體感交互技術手段有兩種：

第一種是ccd（成像）為基礎的體感交互，市場上常用的設備有微軟的KINECT，北京的VIRTOUCH, 以及leap 公司的leapmotion。這種一般都以攝像頭為采集裝置，人類或動物只要在攝像頭前做相應動作，一般將視頻分解為多個連續照片，再通過對照片的相同顏色或者相同明度的像素進行處理，進而捕獲關鍵部位的位置變化，再對這些變化進行處理，分析。用種種手段分析出用戶的動作行為并將其轉化為輸入指令，與虛擬現實內容互動。其優點是不需要穿戴任何外置設備，視頻采集設備也非常便宜。但這種技術對計算量要求大，對計算機硬件要求高，同時受外界環境影響大，比如環境光線昏暗、背景雜亂、有遮擋物等情況下不適用。

第二種是利用深度相機作為采集裝置，深度相機如果按技術原理分類，一般可分為三類：結構光、雙目視覺和TOF 飛行時間法。目前最主流深度感知方案是結構光，根據結構光投射器向被測物體表面投射可控制的光點、光條或光面結構的信息，并結合圖像傳感器獲取到的圖像，利用三角原理以及系統幾何關系，通過計算得到物體對應的的三維坐標。其優勢是深度圖像的分辨率比傳統設備采集到的更高。其劣勢是根據折射光的落點位移來進行位置計算，所以此項技術對識別的距離有嚴格的要求，同時不能計算出精確地深度信息，因此響應速度慢。

3 多傳感器實現交互

針對現有常用戶外體感交互手段的缺點，查詢了資料，發現目前有利用紅外與激光融合手段來識別目標的方法[1]，受此啟發，通過對激光雷達作為傳感器與紅外線矩陣傳感器的實驗，驗證了多手段融合作為戶外無感交互傳感器的可行性。首先激光雷達優點是數據為深度數據，不需要進行視頻灰度化和降維處理，僅用數據融合就可以實現數據的提取，通過機器學習方法處理數據就可獲取交互物體的輪廓和運動向量。其次利用紅外線點傳感器矩陣，直接判別人體和車的區別，不需要像視頻采集那樣再配一個紅外攝像頭。獲得到的直接就是人體輪廓信息。其實現方式如圖1 所示。

圖1 實現方式

4 激光雷達數據的采集

激光雷達的數據均為深度數據，但是人體的體感交互需要的是輪廓數據，目前常用的CPD 算法可以將人體外輪廓點進行匹配[2]。CPD 算法實際是將雷達的相鄰深度數據定性為兩個有關聯的點，利用混合高斯模型將這兩個點建立一個分類，分配一個高斯模型的中心，例如有人體進入雷達區域后，先通過紅外矩陣識別人體，啟動雷達探測，雷達所獲得的人體域附近的值就有明顯變化，其變化的相鄰點如果定義為△P1…，這些變化的點，就分配一個高斯模型的中心點，將這些高斯模型的所屬概率計算出來，就可以用此概率反推其它所有的點的概率，如果概率大于剛才計算出來的概率，則點是人體的輪廓，反之就不是人體的輪廓，高斯模型如公式（1）所示。

公式中的ω 是人為設定的權重參數，這個參數大，則人體輪廓的點集合就小一些，反之就大一些。由于戶外交互并不像室內交互那樣識別精準的手指動作等，只是識別大體的人體運動所以，點集合多一些少一些僅僅影響多人交互時候的人與人重疊的部分多少。

雷達的分辨率越高，人體的輪廓信息越明顯，即可以從屏幕采集的人體輪廓矩陣來看越像人形，但代價是人形越明顯就越貴。在戶外廣告交互中的應用來說，受眾看到的應該是商品，例如人向左移動，LED 戶外大屏上的某品牌礦泉水向左移動。所以沒有必要必須完整人形全部采集出來，經過試驗得到的數據當人形低于50%數據時，廣告商品出現位移不平滑，有跳的表現。所以在戶外廣告實現過程中，雷達分辨率的選擇只要在設定距離內采集輪廓矩陣保持50%以上，最后再執行多個雷達的數據融合[4]。

5 紅外線干擾的去除

紅外線矩陣如果用紅外線攝像頭，價格過于昂貴，利用單點式紅外線矩陣可以很容易的采集到交互人群是否進入指定區域，紅外線矩陣的間接決定了改紅外線矩陣數據的大小，根據測驗，單點紅外線傳感器距離為成年人肩寬平均值以下即可。此時的紅外線除了外界干擾外（例如熱的汽車尾氣等）還要考慮的就是紅外線不是激光，距離會造成多個紅外線數據的互相干擾。目前常見的紅外線數據的這種干擾避免有發射層疊法和長距離法。由于長距離法需要采集成年人的肩寬等數據，所以無法采用長距離法，只能用層疊法。層疊法本來是指把紅外線的發送器和接收器每一層換向安裝，例如第一層發射器在左，接收器在右，第二層發射器在右，接收器在左，對于本文所需要的紅外線矩陣來說，不能使用接收器式紅外線，使用的是TOF類型的紅外線，所以利用層疊法的思想，并參考了無線電波干擾的處理方法[3]進行了改造，將每相鄰的紅外線進行分組，每個矩陣中心點為奇數組，矩陣邊為偶數組，將紅外線的奇數組和偶數組間隔打開，目前常用的可編程控制器能做到每隔多少秒輪換打開，這樣就實現了紅外線傳感器的另一種層疊，大大減少了紅外線傳感器數據的交叉干擾。

6 結論

本文提出的可附加在戶外LED 大屏的戶外體感交互系統，利用先進的計算機技術，將戶外交互技術、虛擬現實技術和傳統廣告融合創新，通過戶外交互實時渲染實現廣告內容互動、優惠券的發布、各種商品的植入、顧客信息的采集、功能商品信息的讀取和推薦等。首創提出多傳感器融合的技術和激光雷達分層次讀取，并附加機器學習手段實現戶外交互，提高了戶外廣告的受眾關注度。