語音識別技術在聽障大學生課堂教學中的應用研究

王煥　朱琳

基金項目：

本項目由北京聯合大學“啟明星”大學生科技創新項目經費資助（201911417SJ044）。

摘 要

為了解語音識別技術在聽障生大學課堂教學中的應用情況，本研究對北京聯合大學特殊教育學院253名同學進行問卷調查。結果表明語音識別技術在課堂應用中存在鏈接不穩定、低頻詞語或專業名詞轉換錯誤等技術問題;存在課程應用范圍狹窄、使用頻率低、教師操作不熟練得的使用問題。并討論了語音識別技術要高效傳遞課堂教學信息，需要繼續完善語音識別技術;聽障教師應綜合運用多種教學手段;聽障學生應提高自身的閱讀理解能力。

關鍵詞

語音識別技術;聽障學生;課堂教學

中圖分類號： G762文獻標識碼： A

DOI：10.19694/j.cnki.issn2095-2457.2020.03.012

0 前言

語音識別技術是隨著計算機技術發展起來的一種將語音轉變為文本的技術。語音識別技術的日益完善也為無障礙教學提供了有效的方式。國外對語音識別技術在聽障生課堂教學中應用的研究主要可以分為兩個方面。一個是針對硬件系統的，研究語音識別技術在課堂中應用的影響因素，另一個是研究語音識別技術對課堂教學的影響。

我國將語音識別技術應用于聽障生的各種教學環境下的試驗研究已有14年，但在知網搜索，僅有一篇研究，是徐靜在《語音識別技術在高校聽障生課堂教學中的信息傳遞效果及影響因素的研究》[1]，該研究從三個角度闡釋了影響語音識別技術傳遞信息效果的因素，一是教師，包括教師的教學內容、對課程的熟悉程度、聲音品質、文本信息呈現的方式、文本信息的準確性等對課堂教學信息傳遞的影響，二是客觀環境，指環境噪音對課堂信息傳遞的影響，三是學生，包括學生語言理解能力以及對學習內容的態度等對課堂信息傳遞的影響。但該研究樣本量小、且只針對一門課程，采用實驗法進行研究，外部效果低。為使研究結果更具有普遍性，本研究采用問卷調查的方式，以北京聯合大學特殊教育學院聽障生作為調查對象，研究語音識別技術在課堂教學中的使用情況。

1 研究對象與方法

通過自編問卷收集聽障生在課堂中使用語音識別技術的情況。問卷內容包含兩個方面，其一是學生的基本信息，包括聽障學生性別、年齡、專業、聽力情況、語文成績。其二是語音識別技術在教學中的應用情況，包含教師使用語音識別技術的頻率、效果，同學對語音識別技術的看法與建議、語音識別技術在教學中出現的問題、語音識別技術與其他教學方式的比較。

以北京聯合大學特殊教育學院大一至大四年級、視覺傳達系與計算機系兩個專業的聽障生作為調查對象，通過問卷星軟件發放調查問卷，回收有效問卷253份。

在問卷正式施策前，選取5名聽障大學生進行前測，根據反映的問題修改問卷，最終確定問卷的格式與內容。

2 研究結果與分析

2.1 調查對象基本情況

通過統計數據發現：調查對象的男性比例為39.92%，女性比例為60.08%，女性人數略高于男性人數。調查對象的年級分布為：大一占16.21%;大二占33.6%;大三占37.15%;大四占13.04%，可以看出調查對象主要以二、三年級聽障生為主，這是因為大一剛入學的新生接觸到語音識別技術的次數有限，而大四的學生面臨畢業，多在校外實習。

調查對象聽力損傷程度分布為：一級占77.87%;二級占15.42%;三級占5.53%;四級占1.19%，由此可見，調查對象的聽力損傷絕大部分為一級。調查對象的專業分布較為平均，其中屬于計算機科學技術系的占44.66%，屬于視覺傳達與設計系的占55.34%。

在調查學生的基本情況時，還加入了對聽障生高考語文成績的調查，其中分數在110分以上的占24.51%;在90分-109分之間的占46.64%;在70分-89分之間的占23.32%;在69分以下的占5.53%。可見學生的高考語文成績多分布在90分-109分之間。

2.2 聽障生課堂教學的主要方式

在調查聽障生課堂教學的主要方式時，根據前期訪談結果給出選項，問題采取排序的方式由多到少排列出教師的授課方式，得到數據后計算每個選項的平均綜合得分，公式為：選項平均綜合得分=（Σ頻數×權值）/本題填寫人次，得分越高表示綜合排序越靠前。結果顯示，聽障生日常教學方式由高到低按序排列分別是：手語、PPT、打字、語音識別技術，其中手語的平均綜合得分為4.34;看PPT的平均綜合得分為3.83;打字的平均綜合得分為2.35，語音識別技術的平均綜合得分僅為1.26，位居第四位。可見在教學中使用語音識別技術的比率并不高。

此外還調查了語音識別技術在各種課程中的使用情況，結果顯示，教學中使用語音識別技術最多的是學校公開課、講座這種場合，達到54.55%;其次為專業課程達到28.46%;第三為必修課程，達到14.23%。由此可見，語音識別技術更多地被應用到大型活動、集體教學之中。

2.3 語音識別技術在使用過程中出現的問題

語音識別技的工作在將口語逐音翻譯成文字時，即使通過大數據的分析與處理，還是會受到環境的噪音、口語發音不規范、低頻詞匯、專業名詞等因素影響，造成同音字、詞翻譯錯誤的問題。

根據調查結果顯示有84.59%的同學在閱讀過程中發現字、詞轉換錯誤，其中有19.37%的聽障大學生受其影響，對信息正確理解出現問題。由于語音識別技術是逐音翻譯，教師講授時的口頭語言也會被翻譯成文字，如嗯、誒等，根據調查結果顯示有45.06%的學生認為這些口頭語言不經常出現，但其中15.42%的學生認為這些口頭語言雖不經常出現，但出現時也會影響閱讀。有54.94%的學生認為這些口頭語言經常出現，其中9.09%的學生認為這些口頭語言的出現影響了閱讀。

教師在講授過程中所說的語句一般情況下是連續的，句與句之間會出現停頓，語音識別技術可以識別出這種停頓，根據停頓時間正確選擇標點符號。但教師在授課的過程中也會有表達完整句中出現停頓，語音識別技術無法根據前后語義正確選擇標點符號，此時就會產生標點符號的選擇錯誤。根據問卷調查顯示：30.43%的同學覺得語音識別技術不能正確識別并使用標點符號，影響文本的閱讀。

語音識別技術還支持英文識別，在大型講座、專業課程中都可能會出現英文。根據問卷調查結果顯示，30.04%的同學認為語音識別技術不能識別英文，影響理解;其中42.69%的同學認為語音識別技術能正確識別英文，文本閱讀流暢。

此外，語音識別技術在使用中還存在其他問題。根據前期訪談中收集的聽障生在課堂中使用語音識別技術的反饋，編制了多選問題用來調查語音識別技術在使用中存在的其他問題，多選題選項百分比計算方法為：該選項被選擇次數÷有效答卷份數;百分數越高說明選擇該選項的人次在所有填寫人數中所占的比例越多。調查數據顯示，聽障生認為語音識別技術在使用過程中出現主要問題有兩個，其一是鏈接不穩定，造成老師說的話沒有被及時轉換成文字，有78.66%的學生認為語音識別技術在使用存在此問題;其二是一些教師對于語音識別技術的操作不熟練、缺乏經驗，有45.85%的學生認為語音識別技術在使用中存在此問題。

除語音識別技術的成熟程度影響聽障生接收信息外，學生的語文能力同樣影響信息接收。根據調查結果顯示有46.25%的學生認為翻譯的語序顛倒，與平時自己的語序不符造成理解困難;有9.49%的學生根本讀不懂。

2.4 聽障生關于語音識別技術應用到課堂中的看法與建議

根據調查問卷數據顯示，41.5%的學生認為在教學中使用語音識別技術會幫助學習，并起到很大作用;其中有45.45%的學生認為語音識別技術會幫助學習，但作用一般。

最后通過問卷多選題的形式收集了聽障生對于進一步將語音識別技術應用到課堂教學中的建議，由高到低排列分別是：通過演示文稿（PPT、投影）、口語、語音識別等多種方式授課（占83.4%）;建立學科基本材料電子信息庫，提高語音識別正確率（占77.47%）;上課內容以網頁、音頻文件或者多媒體文件等多種形式保存在電腦里，可登錄校園網查看（占64.43%）;教師將上課PPT發送到公共郵箱中，供學生學習（占63.64%）;教師學習相關語音識別技術的使用，提高使用效率（占59.29%）;學校提供更多無障礙教室，配備語音識別技術（占59.29%）。

3 討論

根據問卷調查與訪談結果顯示，語音識別技術在課堂應用中存在使用頻率低、應用范圍狹窄的現象，聽障生對于課堂中使用該技術輔助教學的總體感受一般，說明聽障生未切實體驗到語音識別技術運用到日常教學中的優勢與有利性，這與該技術應用到課堂教學時出現的問題有關。根據問卷調查結果顯示，語音識別技術在應用到課堂中存在連接不穩定、標點符號使用錯誤、低頻詞語或專業名詞轉換錯誤、英文識別錯誤的技術問題，其中連接不穩定是最突出的問題。目前我國的聽障生無障礙教學還在發展初期，語音識別技術被應用到聽障生課堂教學中不過也才十四年。語音識別技術還需不斷發展，這需要研發人員不斷努力，讓聽障學生切身體驗到語音識別技術帶來的教學便利，發揮語音識別技術最大的價值。同時要以積極地態度對待語音識別技術，不要因使用中設備不穩定、短時間內教學效果不明顯而抵觸學習、應用語音識別技術，特教老師應對語音識別技術應持正確積極的態度，積極實踐，真正發揮語音識別技術的作用，為殘疾人創設無障礙教學環境，對聽障大學生教學進行新的探索。

根據問卷調查結果顯示，本院的聽障生聽力損傷多為一級，聽力重度損傷，因此他們的學習更多依靠視知覺。這對聽障教師的教學提出了更高的要求，選擇合適的教學手段和方法，利用現代化的信息技術知識，開展現代化的、高效的課堂教學。隋文婧（2009）在特殊教育教師的勝任力中明確提出“特殊教育教師需要具備多媒體技術應用能力，以開展現代化的、高效的課堂教學”[2]。聽障教師應主動學習、使用多媒體、語音識別等技術。在課堂中利用不同的形式，直觀、清晰的呈現信息;在使用語音識別技術時，要規范發音、注意語速、避免口頭語言、主動建立屬于本課程的數據庫，提高信息傳遞效率。同時學院也應提供給教師進修學習使用語音識別技術的機會，讓教師能夠根據學習知識內容，自由選擇、綜合運用多種教學手段，使聽障學生更高效理解所學知識。

此外，聽障生的語文能力也會影響使用語音識別技術教學的效果。楊飛燕的研究發現：聽障生雖掌握了一定的閱讀方法，但總體閱讀理解能力屬中等偏低水平，對文章內容缺乏整體意義上的把握，較難分析文章的主旨，在歸納文章的結構特點和層次上存在問題[3]。在本研究為節約經費與時間，只調查了聽障大學生的高考語文成績作為一個參考。根據調查，28.85%的聽障生高考語文成績低于歷年高考語文平均分，表明聽障生的高考語文成績整體略低于聽力正常學生。由此推斷聽障生的語文能力略低于聽力正常人。在語文能力中，重要的一項就是閱讀能力，閱讀能力是個體學習、生活和發展的必要技能，也是獲取信息、接受教育的重要渠道。步入大學，閱讀能力更是直接影響到聽障大學生的就業與回歸主流社會。這就要求聽障大學生在步入大學后更要重視提升自己的語文閱讀能力，增加閱讀量、多使用書面語言交流、寫作。在提高自身素質，更好學習的同時，也為今后參加工作，融入社會打下基礎。

參考文獻

[1]徐靜.語音識別技術在高校聽障生課堂教學中的信息傳遞效果及影響因素研究[D].重慶師范大學，2007.

[2]隋文婧.特殊教育教師勝任力模型的構建[D].哈爾濱師范大學，2009.

[3]楊飛燕.聽障高中生閱讀能力現狀調查及其思考[D].南京師范大學，2005.