聾啞人心感手語翻譯APP的研究

翟冠群，田相克*，馬保聰*，田相密，張國鳳，趙新甜，曲 增，袁天琦

（1.臨沂大學機械與車輛工程學院，山東 臨沂 276000；2.沂水縣楊莊鎮第一初級中學，山東 臨沂 276000）

0 引言

根據資料表明，我國聽力語言殘疾位于五大殘疾之首。數據顯示，我國每年約有2000萬新生兒出生，其中聽力受損的新生兒約有3萬。在無聲的世界里需要我們無聲的話語。在他們的健康成長里，需要手語，更需要關愛。希望關注這個項目，實行這個計劃，關注弱勢群體，傳遞正能量。

隨著信息時代的到來，很多人肯定已經跟不上新時代的腳步，我們通過市場上的調查發現大多數都聾啞人們不能夠很好的融入新科技時代，由于先天的不足他們很難適應這個快速變化著的世界，即使可以通過手語溝通，但是現在又有多少人能去看懂手語呢？聾啞人的手語有不同的種類，大眾對手語并不普及，減少了聾啞人的許多就業機會。他們急需一項產品來解決這種問題。

1 國內外研究現狀和發展動態

手語翻譯器一般指UNI的手語―音頻―文字轉換裝置（可以簡單理解為語言及聽力障礙者的隨身翻譯機），可以識別手語并轉化翻譯為語音，同時可將對方的語音轉換成文字顯示在屏幕上。手語翻譯器將幫助語言與聽力障礙者與普通人進行雙向交流。

圖1是舊金山某某公司的UNI裝置是一臺帶專用附件的平板電腦，它利用運動感應攝像頭和語音識別技術，把美式手語實時翻譯成口語，并把口語翻譯成文本。此款產品處于較為初級階段，可識別手勢約300個左右，預計正式推向市場時可識別手勢將達到15000個。《時代周刊》評價該發明為“2014年25項最佳發明”。該產品仍然具有許多局限性，是一臺帶專用附件的平板電腦，限制了翻譯功能實時性，并不十分方便。

圖1 UNI裝置

2019年5月16日全球無障礙宣傳日，騰訊優圖實驗室宣布攻克AI手語識別技術，并聯合深圳市信息無障礙研究會，正式發布“優圖AI手語翻譯機”。使用優圖AI手語翻譯機，聽障人士只要面對攝像頭做手語，經過后臺計算機高速運算，翻譯機屏幕就能快速把手語轉換成文字，讓健聽人士秒懂。

目前，這款翻譯機能識別聽障者大部分的日常手語表達用語。其背后的手語識別數據集覆蓋了近千句日常表達，900個常用詞匯，是全球最大的中文手語識別數據集。這是優圖通過AI技術協助警方找回多名被拐超過10年兒童之后，騰訊在計算機視覺人工智能領域的又一重大技術突破。未來，優圖AI手語翻譯機有望在機場、高鐵、民政窗口等公共場所部署應用，助力信息無障礙城市建設。

雖然我國信息無障礙領域的投入在逐漸增加，但全國致力于聽障者專業服務的人士仍只有大約一萬名，大部分公共服務沒有配備專門的便利設施。聽障人士出門辦事往往“雞同鴨講”，難以得到正常溝通。未來的AI手語翻譯會應用到更多場景，更加便捷強大。

2 心感手語語翻譯APP總體方案設計

2.1 產品功能設計

心感手語語翻譯APP總體方案設計思路如圖2所示。心感手語翻譯APP提倡簡約，遵循客戶至上的原則，為客戶提供高性價比、更人性化的手語翻譯平臺。作為當前潮流下很普通的一款智能APP，沒有設計復雜的產品內容，也沒有過多的冗余設計以致用戶難以操作，用戶只需通過APP注冊用戶，并綁定自己手機、智能手環、平板等帶有攝像功能的電子產品，依靠移動網絡鏈接到相應APP與固定的云端，便可享受優質服務，提供更好生活質量。

圖2 心感手語語翻譯APP總體方案設計思路

2.2 規格參數

產品載體：帶有攝像頭的智能移動客戶端

耗電量：8mA/min（開啟后臺而不使用的情況下5mA/min）

版本：1.0

續航時間：10天

連接方式：手機下載官方APP，注冊登錄即可

防護等級：公司承諾保護所以注冊用戶的個人信息

設備要求：Android5.0、IOS7 以上

產品包裝：采用暖色風格，給人一種溫暖的感覺，同時也會有一定的安全感，應用界面打開時展示公司LOGO，其下方寫有“用心感受、溫暖你我”。

3 APP平臺設計

心感手語翻譯平臺能讓用戶在第一時間進行手語無障礙溝通，拉近心的距離，與之搭配的智能設備在使用時，可實時進行查詢、搜索、拍攝翻譯等功能，并設有人工智能（AI）及人工客服專門實時解答，大大減小了客戶交流時的難度，為客戶生活提供便利。

APP承擔著數據分析處理的使命，使用者獲得熱門查詢詞匯、詞匯學習建議等等這些都是通過APP來實現的，APP與智能設備及云端處理器同步連接，實時上傳更新記錄及儲存數據，方便用戶實時掌握詞匯學習情況，更好地了解手語。

心感手語翻譯APP具有監測數據分析、趣味手語操、常用詞匯推薦等功能與模塊，同時提高配套服務所帶來的深度體驗，具體功能如下：

（1）打開APP時會出現心感LOGO標志，標志下方寫有“用心感受，溫暖你我”，突出心感手語翻譯APP的橋梁使命。

（2）進入首頁后，初次使用時用戶可看到心感手語翻譯APP的具體介紹，它大致描述了心感手語翻譯APP的功能定位，以方便用戶快速了解心感手語翻譯APP。在首頁上同時也可以直接看到自己的詞匯查詢使用信息以及對用戶詞匯學習的建議。根據數據庫反饋的信息，為使用者制定合理的個人手語學習計劃，提供更為便捷的生活方式。右下角設有功能──我的，用戶可以綁定賬號，修改用戶信息，以及設定各種個人信息等等。

（3）APP中還開設有每日詞匯推介，搜索查詢等功能，用戶可以了解一些關于手語方面的知識，APP設有客戶服務功能，人工智能助理與人工客服實時為您解答手語問題，以方便用戶了解自己的手語學習情況。

（4）APP可與家人賬號進行綁定，獲取權限后方可了解家人詞匯使用情況，若有判斷錯誤的問題，利用APP反饋環節，用戶將信息上傳到APP，通過專線聯絡解決問題，設有向朋友分享詞匯數據的獨特功能，使用者只需點擊分享功能即可發送到朋友圈、QQ空間、微博等一些第三方軟件，方便快捷。

（5）APP界面的背景采用明亮溫柔的暖色──淺粉色，避免白色帶來的色彩沖擊、黑色的陰暗壓抑。

4 產品特性及適用人群

4.1 核心競爭力分析

本產品采用AI分析技術，加入了“手環、手機等+APP+云端”的新模式，可以存取調取數據的功能，在未來的產品中會出現全息技術的融合及升級。具有數據準確切實，翻譯隨時隨地，應對突發情況能力強的特點。

手語是聾啞人不可或缺的語言工具，是一種很美的語言，也是一種心與心的交流。手機APP與線下相關聯，APP承擔著數據分析處理的使命，使用者通過拍攝聾啞人的手語達到交流理解的目的。本研究致力于讓手語變成一種可以讓更多人理解的語言，來拓寬聾啞人范圍更廣的就業機會，增加對聾啞人更多的關愛。

4.2 消費者特征與需求

聾啞人的手語有不同的種類，大眾對手勢語言并不普及，減少了聾啞人的許多就業機會和人與人之間的溝通交流。他們急需一項產品來解決這種問題，正是抓住了消費者的這一需求和心理。在生活中消費者心理分為好幾種，比如從眾心理、求實心理等。其中，從眾心理指的是盲目的模仿；求實心理，是根據自己的實際經濟實力購買合理的物品。該產品正符合消費者各種心理，產品更具有競爭力。

5 結語

本文主要是針對聾啞人與正常人以及聾啞人與聾啞人之間交流的困難提供一種解決方案即手語翻譯器，讓不同群體可以實現無障礙交流，通過該手語翻譯器，可以將聾啞人表達的手語表達給另一個健全人或者表達給使用手語不同于該聾啞人的另一個聾啞人，也可將健全人的說話翻譯成相應的手語表達給聾啞人，克服了聾啞人和健全人之間以及不同地域、不同民族的聾啞人之間交流所面臨的問題。對于AI這種善于模仿人類能力的技術來說，它的產生就可以成為搭建各個群體之間交流的橋梁，Al技術不僅可以進行語言交流，甚至可能成為跳動的心臟。未來會有越來越多的科學工作者和企業家關注到他們。聾啞人雖然不會說話，但他們渴望別人理解自己。Al技術雖然沒有靈魂，但他可以實現語言的跨越。未來讓我們一起努力用科技造就世界。