語音識別技術(shù)在聾校信息技術(shù)課堂中的應(yīng)用初探

劉炳俊

聽障學(xué)生由于無法聽到或者聽清教師授課的內(nèi)容，通常會基于視覺信息而非聽覺信息來進行學(xué)習(xí)。聾校課堂教學(xué)通常采用手語加口語的教學(xué)方式，為聽障學(xué)生同時提供視覺信息和聽覺信息。隨著現(xiàn)代科學(xué)技術(shù)的發(fā)展，信息技術(shù)在聾校課堂教學(xué)中得到廣泛應(yīng)用，為教師授課和聽障學(xué)生學(xué)習(xí)提供了有效幫助。語音識別技術(shù)是指機器通過識別和理解過程，把語音信號轉(zhuǎn)變?yōu)橄鄳?yīng)的文本或命令的技術(shù)。隨著語音識別技術(shù)的不斷成熟，在聾校課堂教學(xué)中運用語音識別技術(shù)將教師授課的語音轉(zhuǎn)化成文本，成為幫助聽障學(xué)生學(xué)習(xí)的一種有效的教學(xué)輔助手段。江蘇省南京市聾人學(xué)校于2020年引入了某品牌語音識別系統(tǒng)，安裝在計算機教室，由信息技術(shù)老師在課堂上使用，研究語音識別技術(shù)在課堂教學(xué)中應(yīng)用的適切性，以克服手語詞匯量少、專業(yè)術(shù)語詞匯匱乏以及教師運用手語不熟練等問題，打造無障礙交流的高效信息技術(shù)課堂。

一、完善專業(yè)詞匯庫，提高語音識別準確度

在課堂教學(xué)中應(yīng)用語音識別技術(shù)時，語音識別轉(zhuǎn)寫過程中常常出現(xiàn)字詞識別錯誤，教師授課時的口頭語“嗯、啊、唉”等也被轉(zhuǎn)寫。信息技術(shù)中的一些英文專有名詞常常被轉(zhuǎn)寫成中文，比如URL（通用資源定位器）會被轉(zhuǎn)寫成“有啊哎吆”。另外還有同音字詞轉(zhuǎn)寫錯誤的問題，比如“接口”常常被轉(zhuǎn)寫為“借口”。授課過程中，語音識別技術(shù)對教師語句的斷句還不足夠智能，不能根據(jù)前后語義進行斷句，常常出現(xiàn)斷句不準確的情況，造成轉(zhuǎn)寫文本語義表達錯誤。

為此，需要優(yōu)化語音識別系統(tǒng)根據(jù)語義斷句的能力，加強口頭語的過濾功能，不斷補充和完善學(xué)科相關(guān)專業(yè)詞匯庫，解決專業(yè)詞匯轉(zhuǎn)寫正確率低的問題。該語音識別系統(tǒng)在此領(lǐng)域已經(jīng)做了一些技術(shù)上的更新，專門設(shè)置了“熱詞庫”進行“關(guān)鍵詞優(yōu)化”。教師可通過在“熱詞庫”中輸入一些使用頻率較高的詞語來提高語音識別的準確率。如本校所在街道是“御道街”，在沒有把“御道街”輸入“熱詞庫”前，語音識別學(xué)校地址時常常將“御道街”轉(zhuǎn)寫為“遇到姐”。但把“御道街”輸入“熱詞庫”之后，系統(tǒng)就可以十分準確流暢地轉(zhuǎn)寫出來。

二、增加教學(xué)設(shè)備，解決文稿沖突問題

學(xué)校計算機教室之前只有一塊智慧黑板，語音轉(zhuǎn)寫文本常常會覆蓋掉演示文稿上的文字，導(dǎo)致在授課過程中，教師常常需要重新設(shè)置演示文稿或重新調(diào)整語音轉(zhuǎn)寫文本的顯示位置，造成課堂教學(xué)的中斷，影響聽障學(xué)生注意力，使課堂流暢度受到極大影響，教學(xué)內(nèi)容未能在規(guī)定時間內(nèi)完成，課堂教學(xué)效率下降。

為了解決語音轉(zhuǎn)寫文本與演示文稿視覺沖突的問題，2021年學(xué)校通過政府采購，為每一間教室配備了兩塊智慧黑板。一塊智慧黑板專門播放教師的演示文稿等內(nèi)容，另一塊顯示語音轉(zhuǎn)寫文本和教師板書。例如，學(xué)校組織學(xué)生在教室觀看冬奧會閉幕式和冬殘奧會開幕式時，因為節(jié)目沒有提供手語翻譯，就利用一塊智慧黑板播放視頻，另一塊智慧黑板進行語音轉(zhuǎn)寫，實現(xiàn)多種視覺信息的同時呈現(xiàn)。

三、根據(jù)學(xué)生需要，適時使用語音識別技術(shù)

在沒有引入語音識別技術(shù)之前，聾校信息技術(shù)課堂教學(xué)主要依靠手語、口語、演示文稿。聽障學(xué)生在上課時，視覺注意力主要集中在教師的手勢、口型上。當講授內(nèi)容用手語表達不夠準確時，教師會用演示文稿進行輔助，此時學(xué)生視覺注意力自然會集中過來。引入語音識別技術(shù)以后，學(xué)生在獲取演示文稿信息的同時還需要將視覺注意力分配到語音轉(zhuǎn)寫文本上。

例如，在使用語音識別技術(shù)講授“信息及其特征”一課時，教學(xué)內(nèi)容包括“結(jié)繩記事”“烽火告急”“信鴿傳書”等古時候用來存儲、傳遞、利用、表達信息的方法，教師采用演示文稿、語音轉(zhuǎn)寫、手語、口語方式同時呈現(xiàn)教學(xué)內(nèi)容。結(jié)果大部分學(xué)生反映“不習(xí)慣”“眼睛看不過來”“沒看明白意思”等。語音識別技術(shù)沒有達到預(yù)期的效果，反而影響了學(xué)生理解授課內(nèi)容。可見語音識別技術(shù)不能盲目使用，而應(yīng)結(jié)合課堂教學(xué)內(nèi)容和學(xué)生需要來使用。

教師在使用語音識別技術(shù)時要根據(jù)學(xué)生的需要，在適當?shù)臅r候為其提供相應(yīng)的支持。有殘余聽力的學(xué)生在課堂教學(xué)中主要通過學(xué)校提供的FM調(diào)頻語訓(xùn)系統(tǒng)接收教師的口語信息。重度、極重度聽障學(xué)生主要依靠教師的手語視覺信息。而隨班就讀的學(xué)生由于長期在普校讀書，手語能力有限，他們大多會選擇語音轉(zhuǎn)寫文本的方式來接收課堂教學(xué)信息。聾校信息技術(shù)課堂應(yīng)提供多元化的視覺信息呈現(xiàn)方式，為不同需求的聽障學(xué)生提供適切的選擇。

語音識別技術(shù)進入聾校信息技術(shù)課堂有力促進了課堂教學(xué)效果的提升。隨著語音識別技術(shù)智慧化水平的不斷提高，其在聾校中的應(yīng)用范圍將更為廣泛，如低年級的語言康復(fù)訓(xùn)練、社會融合等多種場景，為聽障學(xué)生無障礙交流提供有效支持。聾校教師應(yīng)該努力掌握新的信息技術(shù)，為聽障學(xué)生創(chuàng)建無障礙學(xué)習(xí)環(huán)境，提升課堂教學(xué)實效。

三葉草（紙花制作）楊 雨（江蘇省南京市聾人學(xué)校）指導(dǎo)老師：徐 慧