基于“互聯(lián)網(wǎng)+”的手語教學(xué)平臺的研究和實踐

張海洋 王衛(wèi)民 唐雯君

【摘要】 由于語言障礙，聾啞人尤其是聾啞兒童很難融入到健全人群體中去，逐漸產(chǎn)生了自卑的心理，影響著他們的身心健康。本文主要研究基于“互聯(lián)網(wǎng)+”的手語教學(xué)平臺，該平臺極大地方便了聾啞人的手語學(xué)習(xí)、社會交往，打破了聾啞人與健全人之間的交流壁壘。

【關(guān)鍵詞】 手語教學(xué) 互聯(lián)網(wǎng)+ 聾啞人

一、研究的背景和意義

據(jù)統(tǒng)計全世界大約有6000～7000萬聾啞人，我國大約有2075萬，占中國人口總數(shù)的1.67%，其中7歲以下的兒童為近80萬。按每個聾啞人有直系親屬4人計算，基本生活中需要使用手語的人口高達(dá)一億人左右。對聾啞人來說，手語是最好的語言，是聾啞人交流和學(xué)習(xí)知識的重要手段。由于語言障礙，聾啞人尤其是聾啞兒童很難融入到健全人群體中去[1]，逐漸產(chǎn)生了自卑的心理，影響著他們的身心健康。

在手語學(xué)習(xí)需求日益增加的趨勢下，傳統(tǒng)手語教學(xué)方式已經(jīng)不能滿足現(xiàn)實的需要，因此，對于創(chuàng)新性手語教學(xué)模式的研究有著巨大的學(xué)術(shù)價值和廣闊的市場應(yīng)用價值。本課題提出開發(fā)基于“互聯(lián)網(wǎng)+”的手語和自然語言之間的自動翻譯軟件系統(tǒng)，利用移動互聯(lián)網(wǎng)技術(shù)的優(yōu)勢，改善傳統(tǒng)手語教學(xué)的瓶頸問題，讓聾啞人及其他手語學(xué)習(xí)者只要通過移動智能終端就可以實現(xiàn)手語的學(xué)習(xí)和交流。

二、手語教學(xué)現(xiàn)狀

目前，學(xué)習(xí)手語的常見渠道還停留在特殊學(xué)校課堂教學(xué)的形式，由手語老師按照手語教材的大綱要求進行課堂授課。這種授課方式對于聾啞人尤其是初學(xué)者來說，在學(xué)習(xí)過程中很難與老師產(chǎn)生互動，學(xué)習(xí)效率低。并且，手語教材與普通的教學(xué)材料相比編寫成本高、可選數(shù)量少、教學(xué)內(nèi)容少，質(zhì)量參差不齊，教材收錄的內(nèi)容往往僅包含日常基本用語和簡單的常識詞匯，專業(yè)性不強，教材本身的局限性就制約了學(xué)習(xí)的程度和水平。

且現(xiàn)階段從事手語教學(xué)的專業(yè)教師尚未能實現(xiàn)針對聾啞人教學(xué)的正常數(shù)量配置，在其他手語學(xué)習(xí)者數(shù)量日益增長的情況下，師資短缺的問題也更加突出。相比課堂教學(xué)方法而言，自學(xué)的方式更能符合各類手語學(xué)習(xí)群體在靈活性方面的需求，但自學(xué)方法的學(xué)習(xí)效率都比較低，且學(xué)習(xí)范圍比較局限。

三、項目研究內(nèi)容

本課題研究基于“互聯(lián)網(wǎng)+”的手語教學(xué)平臺，具備良好的交互性、實時性、擴展性，能夠同時適應(yīng)各個手語學(xué)習(xí)群體自學(xué)手語的要求，同時可以作為特殊學(xué)校課堂教學(xué)中教學(xué)內(nèi)容的外延。平臺包括以下主要內(nèi)容和功能：

3.1自然語言語義分析

采用概念空間+語義文法+意圖分析+知識融合的技術(shù)路線，綜合起來完成語義分析。其中，概念空間是基于本體論對世界知識的統(tǒng)一建模，語義文法是對自然語言進行深層次語義分析的手段，意圖分析用于分析用戶潛在的需求，而知識融合將生成完整的解決方案。本系統(tǒng)將對用戶輸入的文字（稱為“咨詢”）進行三個層次的自然語言分析：語義文法分析、帶詞類的短語文法（稱為“詞模”或“句模”）分析、關(guān)鍵詞檢索。同時，對用戶的自然語言繼續(xù)采用縮略語識別、錯別字識別、模糊推理、特征術(shù)語識別等，以進一步增強自然語言理解的準(zhǔn)確性。

3.2電子化手語資源

設(shè)計自然語言、手語等相關(guān)的語義資源庫，如自然語言和手語之間轉(zhuǎn)換所需的語義知識，包括：語素、詞語短語、同義詞、術(shù)語語義網(wǎng)、手語文法和自然語言文法等。同時利用各種渠道建立了手語圖片庫，其中包括字母、稱謂、職業(yè)、姓氏、時間、空間、生活、社交、民族、宗教、文化、體育、科學(xué)、動植物等54大類共5234張常見手語圖片。并在此過程中，建立手語資源電子化的規(guī)范和標(biāo)準(zhǔn)，讓資源真正可以為聾啞人使用，讓平臺外的手語專家和系統(tǒng)可以上傳手語資源，并可以對其進行管理和評價。

3.3動畫建模和自動生成

平臺通過3D動畫的形式直觀進行手語動作內(nèi)容的教學(xué)展示，采用手語角色建模、手語動作捕獲、面部表情建模、基于狀態(tài)機的動作自動生成、動作優(yōu)化等技術(shù)，來進行手語動畫的建模和自動生成。首先選擇動畫建模軟件，利用軟件構(gòu)建角色模型。然后利用國內(nèi)最先進的動作捕獲設(shè)備對手語專家的手語動作（手語詞匯動作）進行動作捕獲，從而生成原始的動畫并拍攝手語視頻；最后對這些動畫進行人工的調(diào)優(yōu)，形成可用的動畫（手語詞匯動畫）。

四、結(jié)語

本課題研究成果以鎮(zhèn)江市特殊教育學(xué)校為試點，在充分調(diào)研、反復(fù)實驗的基礎(chǔ)上，通過研究，發(fā)現(xiàn)通過該平臺可以實現(xiàn)自然語言到手語動畫的準(zhǔn)確轉(zhuǎn)換，在手語教學(xué)領(lǐng)域的實踐應(yīng)用符合語言學(xué)習(xí)的認(rèn)知規(guī)律，能夠幫助手語學(xué)習(xí)者靈活、便捷地學(xué)習(xí)手語。

隨著本課題的繼續(xù)深入研究，未來還將繼續(xù)挖掘手語教學(xué)中新的需求，并且在社會生活的更多方面促進聾啞人的社會融入。

參 考 文 獻

[1]張思遠(yuǎn).優(yōu)勢視角下聾啞人社會融合研究[D].貴州大學(xué)，2015.