論視覺語言之圖庫概念在特殊交流中的應用探索

徐曉婕，胡向媛，梁童鹿，劉亞賽，高志利，丁 辛

（東華大學 紡織學院，上海 201620）

視覺語言久已有之，它是以文字，圖像為符號刺激視覺器官，啟發人的思維和想像，然后由大腦分析并理解其表達的含義。從人類發展史來看，象形文字既是一種最原始的造字語言，也是一種圖畫符號；原始圖騰同樣也是視覺語言的一種表現方式。近代社會里，19世紀到20世紀初的藝術設計運動，基本遵循探索視覺語言新形式為基本目標的理念，“工藝美術運動”、“新藝術”、“現代主義”、“波普設計”和“后現代主義”等等流派層出不窮，視覺語言運動趨勢歷經變革，視覺設計理念形式多次革新，改革者們總是在尋找最簡化、符號化的視覺符號，來體現時代特征與潮流，以便能夠更形象地對事物進行表達［1］。伴隨著人類的發展，視覺語言在人類文化的交流創新中有著重要的意義，因此被人們稱為“第三種語言”。

聽說障礙人士由于生理原因，與他人溝通不暢，乃至于影響其適應社會的能力。如何通過運用現代科學技術，結合視覺語言系統，為聽說障礙人士創建更為便捷的交流工具，為他們日常生活提供舒適方便的服務，是一個值得思考的問題。聽說障礙人士的視覺正常，在對于視覺語言的理解上，他們具有與正常人類似的快速反應和辨識能力。視覺語言是一種有效的溝通交流工具，簡明圖形或圖案對聽說障礙人士具有直接的視覺沖擊效果。本課題通過嘗試把視覺語言中的圖庫概念與紡織智能科技、計算機編程技術等相結合，以有效促進和改善聽說障礙人士與正常人群交流中的溝通困難、內容理解上易產生歧義等問題，切實地為聽說障礙人士解決實際問題。

一、聽說障礙人士交流現狀調查研究

我國在《殘疾標準》的立法規章中，從社會功能角度出發將殘疾人劃分為五類，分別是：視力殘疾、聽力語言殘疾、智力殘疾、肢體殘疾、精神病殘疾，聽說障礙人士屬于聽力語言殘疾。由于身體機能的缺陷，使得聽說障礙人士無法像正常人一樣自如地交流，本應多彩的生活和自由的空間，也因此失去顏色、拘泥于有限空間中。

通過對相關聾啞機構的實地走訪，隨機調查了73位聽說障礙人士和52位正常人士，并分別與這兩組人士進行多次的交流，完成相關問卷調查，以便深入地了解聽說障礙人士的日常生活交流情況。從對聽說障礙人士與正常人交流過程的分析，他們可能采用手寫、手語，也可能以直接電腦屏幕上打字等的方式進行交流。對各種交流方式中潛在的問題也進行了分析，如手寫可能是手寫速度較慢，打字可能是語序的問題。最終調查發現，用手語交流的困難性以及手語語序問題是聽說障礙人士當前面臨的比較主要的問題，如圖1所示。

圖1 影響聽說障礙人士與正常人交流的因素

經過與聾啞人機構相關人士的交流，了解到目前手語是聽說障礙人士使用的主要交流工具。但是調查中也發現：手語在聽說障礙人士和正常人的交流間，使用頻率低于10%（調查對象包括聽說障礙人士和正常人）。調查結果分析表明：對于聽說障礙人士而言，手語是用形象的手勢比擬具體事物的式樣和特點來代表某事物，帶有很強的形象性、直觀性；各地手語表達有所差別，造成不同地域范圍的聽說障礙人士之間交流溝通的困難；手語較普通圖像更側重于空間性，表達必須與口型、表情、體態語言和對事物摹擬結合起來，且手語圖形難以記憶，正常人不易使用確切手語與聽說障礙人士進行交流［2］；手語語序也會發生一定變化，但有一定規則；各地域手語語序轉換規則有差異，且具有高度的抽象性，掌握起來相當于掌握一門外語的難度。因此，對于大多數正常人來說，不會刻意學習手語，即使學習，往往也不能熟練地運用，實質上這是聽說障礙人士和正常人群之間溝通的主要障礙。采用圖形或圖案等視覺語言體系可以有效彌補這些不足，促進雙向溝通。關于手語特色的分析見圖2。

圖2 手語特色分析圖

約20%的調查對象認為，與聽說障礙人士通過文字語言交流，依然會存在理解歧義等困難。聽說障礙人士無法通過對話的方式來開展交流，也很難通過語音辨析文字，這造成他們書面語言中存在錯別字較多、語序顛倒、語法混亂、詞義混淆、虛詞標點符號使用不當等多方面問題。這些問題的存在，使得正常人在與聽說障礙人士開展書面文字形式交流的過程中，也會存在領悟偏差和錯誤理解等問題（圖3）。

經常與聽說障礙人士溝通交流的正常人群，為了使表達更為簡潔清晰，往往會省略部分語句成分，并對正常文字語法規范規則進行變通，以促進雙方能夠快速理解所要表達的內容。但是使用這類特殊語言時，往往會造成其他非經常與聽說障礙人士交流的正常人無法理解該對話交流含義的結果，逐漸地聽說障礙人士就只能局限于與他們認識的小部分正常人開展交流，進而使得他們的生活圈變得越來越小，導致進一步喪失學習社會主流人群語言的動力，這也造成了聽說障礙人士與大部分正常人群交流頻率進一步降低。在被調查的正常人對象中，87%的調查對象肯定了這一現象（圖4）。

當代社會科技的進步，將促使人們孜孜不倦地追求、探索更加靈活簡便的、對于聽說障礙者來說溝通交流以及理解內容上無明顯差異感的新型語言工具［3］。現在市場上有部分產品能起到協助聽說障礙人士交流的目的，如：助聽器、手寫器、特殊的手機、人機互動頁面設計，等等。這些特殊產品雖然能起到一定的交流工具的效果，但是由于攜帶不便等問題的存在，使得聽說障礙人士和正常人的交流并沒有因為該類電子產品的出現得到明顯的改善。也就是說，這些產品并沒有真正達到促進聽說障礙人士無障礙交流的目的。

圖5 市場上的主要聽說障礙特殊產品使用頻率

從設計心理學的角度講，情感溝通的意義在于雙方的“傳達”和“接受”的契合，關于消費者最大主體要求，即滿足最大的心理需求。符合聽說殘障人士需求的設計產品不應僅僅限于功用，也應充分尊重其人格特征，不僅僅要關注產品的功用性，更重要的是要對產品開展情感設計，賦予產品情感內涵，從而觸動情感世界，形成共鳴，正確傳達相互之間要表達的意思，促進提升聽說障礙人士適應生活的生存能力，滿足其對于青春、成功、卓越人生的自我價值追求［4］，真正達到無障礙設計。

圖形實質上是一種明確的“意義符號”，是各種文化元素的抽象化、概括化。它來源于生活，因此更能引起全人類的共鳴，無論是正常人還是聽說障礙人士，都可以準確地理解簡明圖形的含義。典型性圖形標志如：公共洗手間的男女性別標志，是視覺語言中的純粹提煉，具有明顯的標志性、識別性和概括性。此外，圖形圖案可以通過簡單的組合傳達更加豐富的信息，具有一定的實用性。該組合過程靈活簡單，不需要特殊的專業語法訓練就可以熟練地掌握，這也是其相對于手語和文字語言的優勢所在。

二、特殊交流環境下視覺語言之圖庫概念的構建

（一）圖形（案）在特殊交流中的應用狀況分析

簡明圖形（案）可以解決手語的區域差異性以及抽象性所帶來的交流困難，使得聽說障礙人士能更便捷、有效地交流。根據調查結果，發現聽說障礙人士對一些圖形（案）的理解準確率均高于80%，一些組合圖形（案）所傳達的信息也易理解，如圖6～7所示。

對單個圖形的理解率：

圖6 視聽障礙人士對于簡單圖形（案）的理解水平調查結果圖

對于組合圖形含義的理解率：

圖7 視聽障礙人士對于簡單圖形（案）組合的理解水平調查結果圖

調查還發現，無論是正常人或是聽說障礙人士，在使用電腦或手機交流的時候，往往會使用QQ表情等。他們都表示QQ表情生動有趣，使用便捷。聽說障礙人士在使用QQ圖像后變得喜歡交流，而正常人群則表示愿意嘗試使用圖像與聽說障礙人士進行交流（見圖8）。

圖8 日常交流中QQ表情圖像使用情況調查表

但是目前QQ圖形工具僅僅局限于表情符號，并沒有對生活中經常碰到的事物等進行關于符號的設計與整理。因此，建立一個系統和完整的圖庫，以在某些特殊場合輔助甚至是代替文字語言進行交流，具有一定的可行性。可以將日常生活中的各種事物加以抽象、提煉、升華，使其成為簡單、易懂、形象的符號，對已有的簡明易懂的圖像符號歸納、分類、整理，對于未有的但是有一定實際需要的意向進行相應的設計，以形成一個實用的、完整的、系統的圖像庫，并對相關圖形（案）庫嘗試進行編撰、創新、匯總，日積月累，待庫中事物收集齊全后，也可將此圖庫集與現代新型通訊工具相捆綁，將其運用到QQ，MSN等聊天工具中，使圖庫不僅可以成為聽說障礙人士的交流工具，而且可以成為正常人網上聊天的表情符號工具盒，使交流更加快捷，更加趣味化，同時該圖庫也可以嘗試運用在病人的緊急呼叫設備中。較為完整系統的圖片庫，其中圖片元素類似于語言系統中的單詞，在使用時，將這些圖片進行簡單的排列整合，使其能傳達相應的信息，具有與語言系統中的語句相對應的功能。相比于常規的有聲語言系統，“符號視覺語言”的“單詞”更加形象易懂，此外“語法”更加靈活，無需復雜的記憶，只需簡單的排列組合即可表達相應的涵義。

（二）視覺語言之圖庫概念的設計與運用前景

通俗易懂、形象生動、含義真切的圖案、圖像、圖形可以匯總形成一個全面、有效、便于使用的圖庫。通過創建圖庫和使用圖庫內容設計相關溝通交流產品，可以有效降低聽說障礙人士與他人之間交流中存在的語法錯誤和理解歧義等現象發生，使得雙方溝通更加準確，促進交流互動。在緊急狀況下，圖形圖案視覺語言將起到舉足輕重的作用。如：聽說障礙人士在緊急情況下，由于難以用聲音求救，而手勢等往往意向不明或者不易察覺，可以借助一定的發光元件顯示出醒目的“SOS”求救符號，使路人注意到，并前來施救，達到有效減少意外傷害發生的目的。再比如：在外籍友人訪問時，由于語言文字不同，往往需要借助翻譯來理解雙方語言含義，而通過使用圖庫概念之圖形圖案產品，完全可以準確表達出句子含義，促使雙方的交流和溝通更加迅速和有效。在手機插件和網上聊天工具中，也可以用到圖庫概念產品，這不僅可以增加交流的趣味性，而且可以省去很多繁瑣字句，只需快速從圖庫中選取所需圖片，加以組合，便可傳達相應信息。

建立一個相對系統和完整的圖庫，以輔助甚至是在某些特殊場合代替語言文字進行交流，具有一定的必要性和可行性。通過以上的調查與分析，可以了解到聽說障礙人士對于日常生活中的具象事物可以很好地理解。因此，在設計理念中，我們以生活中常見的具象事物作為主要的圖庫圖像內容。圖庫將日常生活中的各種事物、情感等進行分類，對已有的簡明易懂的圖像進行歸納整理，對于未有的但是有一定實際需要的意向進行相應的設計，以形成一個實用的、完整的、系統的圖像庫。

圖庫的構建思想主要側重于三個方面：一是圖像盡量地簡單化，便于聽說障礙人士以及交流對象相互理解；二是圖像的豐富性，盡可能涉及到生活中方方面面；三是圖像表達的趣味性，要做到無障礙情感設計，有利于雙方互動，增進情感交流。設計圖庫的素材主要針對兩個方面：一是現有的一些公共標識以及表達一定具象事物的圖像；二是針對現有的視聽障礙人士所使用的語言，比如說是手語，分析視聽障礙人士在表達過程中側重的方面，對現有的標識進行修改，以便雙方（視聽障礙人士與正常人）都能夠很好地理解。當圖庫中的圖像收集達到一定程度的時候，假設把圖庫看作一種視覺語言體系，圖庫中的每個圖像都可以看作語言體系中的基本要素，我們可以將這些要素進行類似于語言的組合。比如將單一的圖像組成句子，表達一個完整的意思。對于每個單一的要素，可以動態顯示，也可以靜態顯示，可以是無色的，可以是彩色的，動態顯示、彩色顯示更體現趣味性，更能增進人們相互之間的交流。

對于圖庫的分類，聽說障礙人士希望圖庫能夠越全越好，日常生活中出現的具象事物，包括經常使用的表情符號，醫院、學校等的生活場景符號，購物時使用的符號，以及在緊急情況下表達使用的符號。對于圖庫的符號，大家偏向于使用彩色，可視性更強。通過此種方式方法，來嘗試使用象征具象事物的圖形構建正常人與聽說障礙人士溝通的橋梁，如圖9，可以輕易地猜到圖片所表達的意思。

又比如針對生活中表達某個場景的句子，如“電話響了”，可以用下面的圖像來表示。

圖9 禁止鳴笛圖

圖10 電話接聽

運用一定的計算機設計理念以及圖形設計方法，結合各種生活標識、指導標識、公眾標識、情感標識，“微”語言以及象形文字等方面內容特點，構建具象符號設計理念、設計思路、設計質量、設計內容，并歸納整理。在此基礎上，開展相應簡化和創新，使得整體標識系統具有統一的規格和模式［5］。可以嘗試通過構建一個內容豐富的圖庫，來搭建聽說障礙人士與正常人群交流的有效平臺。圖庫中的標識內容包括對現實生活中已有符號進行的收集整理，以及對日常交流中其他鮮有相應標識的事物符號開展圖形創造，創建相關思想情感表達符號，等等方面的內容。

經過調研，對相關標識給出初級類別劃分，如圖11所示。

圖11 標識設計類別劃分

劃分的原則是要盡可能地接觸到聽說障礙人士日常使用的標識。分類1中包括情感表達與動作方面的標識，即情感動作類，例如大家經常在聊天的時候，使用的包括喜、怒、哀、樂方面表達情感的符號，以及去、來、走、跑等常用的動作趨勢符號等；分類2表示日常生活中需要的食物以及經常遇到的小型生活用品類，即生活類標識，比如臺燈、米飯、食品、蔬菜、自行車等；分類3為公共標識類，如表示學校、旅館、廁所、公交車、小汽車、輪船等的標識符號，其中，有部分公共場所以及公共設施已有成熟完善的現實標識；分類4表示自然環境類，如表示動物、植物、自然氣象、氣候等方面的標識符號；分類5表示緊急情況或者特定符號等，即特定場合類的標識符號，如急救、登山救援等。

其中，分類1至5中有部分內容有交叉，例如：自行車可以作為小型生活用品，但是同時它也可以成為大型自行車租借場所中的租借用交通工具，因此，它可以橫跨分類2和分類3。因此，調查方式為多項選擇題，每個分類下面有幾個復選項，調查者可以任意選擇。根據此分類方法，建立一個完整的圖庫系統，之后將圖庫中的圖案作為基本元素，組合表達。例如：如果想要表示“去學校”，我們可以通過兩個簡單的符號來表示，“去”的圖形以及“學校”的圖形；如果想要表示“我要吃飯”只需要將“我”“飯”等簡單的符號進行相應的組合，即可進行相應的表達。通過單獨標識，或者若干簡單標識的組合，形成簡明、易懂的句子，并設置為常用語，聽說障礙人士可以通過相應的類別與常用語等快速找到表達自我需要的符號，便于交流。

現代通訊技術高速發展，3D動畫等智能技術也在廣泛地運用，圖像的使用和運用越來越方便快捷，在日益忙碌的生活中，視覺語言的便捷性、迅速性、形象性，正在被越來越多的人喜歡。運用視覺語言理念進行圖庫設計，可應用范圍廣泛，應用價值高，相關的開發空間前景深遠，可以在更大程度上促進聽說障礙人士與他人的溝通交流。我們不僅可以使用電腦共時性聊天工具、網上成像等高新電子產品技術，也可以促進圖庫概念與相關高科技知識相結合，推動聽說障礙人士在日常生活中更加方便自如地交流。

目前，在紡織學科中，正在嘗試通過利用紡織纖維以及紡織材料等高新技術手段，將電子發光元件（如LED）和導線嵌入編織到織物中，制成柔性良好、可折疊的顯示器。用多層織物的形式，在織物中嵌入非絕緣的導電紗線，將電流傳輸到嵌入織物的發光元件（LED）上，驅動其工作。在程序的控制下，實現織物上圖案的顯示和變化，用動態方式顯示聾啞人要表達的情感以及信息溝通符號，這是一個新的技術應用。

圖12就是采用連續顯示達到圖像顯示的結果。

這樣更容易被記憶，同時具有一定的明確性，引導觀看者集中到一個點上去分析。同時也符合人的視覺看點，首先是各個符號的顯示，然后將這些符號進行連接，表達一個完整的意思，通過這樣的方式來解決視聽障礙人士與正常人日常生活中的交流問題。

之后，將這些顯示的圖像設計在衣服上。全型成像圖（即織物顯示器及其顯示圖像在衣物表面直觀展示圖）示例見圖13。

與傳統的不可視的有聲語言系統相比，符號視覺語言系統更加形象易懂、方便靈活，無需復雜記憶，只需簡單的排列組合即可表達相應的涵義。目前，我們正在設計在衣物內側的固定位置設計按鈕等智能設備，這樣聽說障礙人士通過簡單的按鈕選擇，就能從內置圖庫中選出所需圖片，并在服裝上即時顯示所選擇的圖形。為了更好地顯示圖庫內容，還可以對圖庫圖案持續性精確分類，并進行一一對照的數碼編號，使其能夠更加迅速便捷地顯示圖像。在未來，我們也希望能夠充分嘗試利用計算機芯片技術，通過把發達的電腦高科技與現代紡織服裝智能技術相結合，并運用更加先進、完整的圖庫概念內容，通過成像處理的方式，來達到在服裝衣物表面顯示出更加連續、動態、清晰、先進的圖形圖像的目的，以便更好地、更便捷有效地為聽說障礙人士開展與時俱進的生活服務與技術支持。

圖13 衣物表面最終全型成像圖

［1］孟凱寧．視覺語言的傳達與創新設計分析［J］．電影評介，2009，（17）：91．

［2］范雙南，陳益強，周經野．自然手語動作序列生成的研究［J］．計算機與工程，2010，38（8）：110－112．

［3］國華，張寧生．威廉姆·斯多基的手語及語言手勢起源說的理論評介［J］．現代特殊教育，2008，（10）：40－41．

［4］李金領．情感設計的無障礙——深化無障礙設計中的情感表現［J］．教育時空 ，2010，（1）：48．

［5］孫慶華．針對視障用戶的網絡信息無障礙研究［D］．北京：首都師范大學，2008：30－41．