基于VR技術的實時交互平臺的設計與實驗

吉林大學電子科學與工程學院 尹悅鑫 魯 岳 王 珣

基于VR技術的實時交互平臺的設計與實驗

吉林大學電子科學與工程學院 尹悅鑫 魯 岳 王 珣

隨著科技進步與生活水平的提高，基于VR技術的產品已經以商品的形式進入千家萬戶。但事實上，其相關衍生品主要以旅游和視頻 應用為主，種類單一，缺乏創新。同時，普通的VR產品不具備實時交互性，用戶體驗差。基于以上問題，本文基于VR技術，下位機以單片機為核心，上位機采用UNITY 3D游戲引擎的安卓開發平臺，下位機利用藍牙模塊HC-05，實現與上位機的實時交互，從而實現虛擬現實中的實時操作。

VR技術；實時交互平臺；設計與實驗

1 設計原理

圖 1 設計原理框圖

如 圖1設計原理框圖所示，實時交互平臺包括硬件系統和軟件平臺兩部分。硬件系統由陀螺儀GY-25，按鍵，藍牙模塊HC-05和微控制器STC12C5A60S2組成。其中陀螺儀GY-25實時讀取角度，按鍵實現特殊操作功能，HC-05與手機進行藍牙通信，微控制器STC12C5A60S2進行數據的接收，處理和發送，處于整個硬件系統的核心地位。軟件平臺由手機的Android系統和Unity軟件組成。同時，硬件系統和軟件平臺相互之間通過藍牙進行通信，進而實現實時交互的功能。

1.1 產品調研

虛擬現實技術(VR)是一種可以建立虛擬世界的計算機仿真系統，它可以通過計算機技術來模擬現實的環境，是一種多源信息融合的、交互式的三維動態視景和實體行為的系統仿真，可以使用戶沉浸到該環境中。

現如今，基于VR技術開發的產品已是種類繁多。但目前，大部分VR產品的應用僅僅停留在視覺接收階段，例如，VR視頻，VR旅游，VR購物等，并不具備實時交互功能，導致用戶體驗缺乏真實性。

本文研究的基于VR技術的實時交互平臺，采用相對成本最低的STC12C5A60S2單片機，利用藍牙模塊HC-05向上位機實時傳遞信息，并且通過VR眼鏡顯示出相應的場景，從而實現設計要求。

1.2 原理圖

圖2 原理圖

1.3 軟件設計原理

圖3 軟件設計原理框圖

如圖3軟件設計原理框圖所示，Bluetooth部分采用藍牙模塊HC-05。通過藍牙模塊實現和手機安卓操作系統的通信，可以實時的將單片機接收到的采集數據，如角度，按鍵信息等發送到手機。事先，利用原生安卓開發編寫接收藍牙數據并解讀數據的代碼，然后將安卓工程導出為jar包，放在Unity工程相應目錄下的文件夾中，在Unity端編寫相應的代碼調用jar包里準備好的方法，便可對手機藍牙接收到的數據進行處理，實現用戶在VR游戲界面中的移動，射擊，空間視角切換等功能。

2 系統設計

2.1 硬件模塊

硬件模塊包括陀螺儀，微控制器，藍牙模塊和按鍵：

陀螺儀采用GY-25，一款低成本、低功耗的傾斜角度傳感器模塊。其工作原理是通過陀螺儀加速度傳感器經過數據融合算法，最后直接得到角度數據。將其放置于操作手柄，如模型槍上，便可實時讀取當前的三維角度。將數據發送給單片機進行處理，再利用藍牙通信，便可以實現VR游戲界面中的視角切換功能。

微控制器采用的是宏晶科技生產的單片機STC12C5A60S2。具有優秀的工作性能，較高的數據處理速度。作為整個平臺的核心控制模塊，承擔著數據的接收，處理，發送等一系列重要功能。

藍牙模塊采用HC-05，一款主從一體藍牙串口模塊。利用其藍牙通信功能，實時的將數據發送給手機上的Unity端。Unity將數據處理結果反映到VR游戲界面當中，讓用戶有實時操作的游戲體驗。

而按鍵則由三個簡單的微動開關組成。其功能分別為前進，后退和射擊。由單片機接收按鍵信息，通過藍牙發送，Unity端接收。

2.2 軟件平臺

軟件平臺分為Android部分和Unity部分：

Android部分采用Eclipse軟件編寫藍牙程序。Eclipse是一個開放源代碼的，基于Java的可擴展開發平臺。通過查閱藍牙相關的API，參考范例，編寫相關的藍牙程序。由于數據發送以字節為單位，而一個角度信息要用兩個字節記錄。因此，在編寫解讀藍牙接收數據的程序時，需要進行相應數據的整合，并依照順序拼出正確的角度信息。而按鍵方面，將三個按鍵的信息存放在一個字節的第三位，并在安卓端將存放按鍵信息字節的第三位逐位讀出。至此，數據的解讀工作順利完成。最后寫好用于Unity調用的函數，便可使Unity獲取相應的信息。至此，安卓方面的藍牙相關的工作全部完成。

VR的實現則采用了Google公司的CardboardSDKForUnity。由于此SDK設定了專用的主Activity，因此，會與藍牙的主Activity發生沖突。解決方案如下：導入Google的jar包到安卓工程，將藍牙的主Activity繼承Google的CardboardSDKForUnity的主Activity。至此，安卓方面的代碼編寫完成。確認好安卓端代碼正確無誤后，將工程導出為jar包，并在Unity工程目錄下建立安卓插件專用的目錄，并將jar包及相關安卓工程中的文件放到相應的目錄下。

Unity部分主要是指Unity Technologies開發的多平臺的綜合型游戲開發工具——Unity，它是一個全面整合的專業游戲引擎。通過Unity的游戲開發功能，設計一個FPS（第一人稱射擊類）游戲的界面。其中，包括星空，天臺，集裝箱等環境模型，具有一定AI的怪獸，沖鋒槍等游戲元素的加入，增添了本VR實時交互平臺的可玩性。配合藍牙通信，使用戶擁有更為真實的體驗。

在角色模型設計方面，我們采用狀態機的方式進行編程，能夠根據控制信號按照預先設定的狀態進行狀態轉移，是協調相關信號動作、完成特定操作的關鍵，可以有效地實現基本功能轉換。狀態機流程圖如圖4所示：

圖4 狀態機流程圖

相關程序如下：

3 最終成果展示

3.1 硬件部分

圖5 硬件 部分成果展示

如圖5所示，將硬件系統焊接于電路板，裝配于模型槍上，達到硬件和手柄一體化的目的。用戶可以手持模型槍，通過按動按鍵，完成移動，射擊等特殊功能。利用放置于VR眼鏡中的手機，用戶可以實時觀察到游戲中的場景。

3.2 軟件部分

圖6 游戲界 面成果展示

如圖6所示，為VR眼鏡中的真實游戲場景。用戶可以利用手中的模型槍進行射擊，攻擊敵人。利用模型槍上的按鍵在游戲場景中進行移動，以此躲避敵人的傷害。根據模型槍當前角度的變化，來決定用戶的移動方向。通過用戶頭部的轉動，實現游戲視角的切換。在游戲界面中，正上方顯示得分（Score），正下方顯示當前血量。當血量歸零時，游戲結束。

[1]優美締軟件(上海)．Unity官方案例精講[M]．北京:中國鐵道出版社,2015．

[2]MingChaoSun．Cardboard 虛擬現實開發技巧(一)之放置一個固定在視野中的物體[EB/OL]．(2015-12-25)[2016-01-03]．

[3]程明智,江道遠,韓超．Unity5．X游戲開發技術與實例[M]．電子工業出版社,2016．

尹悅鑫（1995—），大學本科，現就讀于吉林大學微電子科學與工程專業。

魯岳（1996—），大學本科，現就讀于吉林大學電子信息科學與技術專業。

王珣（1996—），大學本科，現就讀于吉林大學電子信息科學與技術專業。