13　基于移動設備中的交互性手勢設計探考

方芳 FANG Fang武漢理工大學，武漢 430070（Wuhan University of Technology，430070 Wuhan）

13基于移動設備中的交互性手勢設計探考

方芳 FANG Fang
武漢理工大學，武漢 430070（Wuhan University of Technology，430070 Wuhan）

移動智能設備的廣泛應用使得當今的科技進入了一個全新的交互時代。設備的使用者及軟件數量都以令人驚嘆的速度增長著。手勢交互的操作特性使得這種交互方式成為移動設備中人機交互的主流模式和未來的發展方向。基于此，一方面針對現有主流移動設備手勢交互方式進行社會調查，探討并建立用戶特定手勢和含義的映射關系；另一方面則從用戶出發，研究用戶的意圖，考察不同環境、平臺下用戶手勢操作的關聯性，從而設計出更加高效、便捷的用戶手勢操作方式，使智能移動設備能夠充分發揮其使用價值，更好地為用戶服務。

手持移動設備；用戶操作；人機交互；手勢識別

一、引言

伴隨著文明的發展，電子科技的水平也在不斷提高，人機交互技術儼然成了一個新的關注點，因為它給人們的生活境況帶來了大的改變。該項技術的載體即移動設備的廣泛應用同樣使得當今的科技產品進入一個全新的信息交互時代。傳統的交互方式主要是鍵盤、觸摸等，而手勢交互更加直觀便捷、表意豐富，能夠更好地在設備與用戶之間搭建一座橋梁，傳遞使用者的意圖。人與機器之間的交互方式更加自然，同時機器設備也將更為準確地進行識別、理解并執行用戶想要表達的意圖。由此可見，手勢識別這種方式的運用已然成為當今人機交互中便捷性、自然性的重要體現。

二、手勢與移動設備的結合

1.手勢的定義

一直以來，人類借助于手勢進行溝通和交流。人們常常不用多加思考，應用身體語言就可以主動地向他人表達想要傳遞的思想。長久以來由于人類對手勢交流的重視創造出了大量通行、易懂的語義，這些語義就是信息。換言之，一些信息是可以通過手勢語言給予準確表達的。

2.移動設備的手勢功能

作為日常生活中形影不離的工具，移動設備為人類的生活帶來了極大的便捷。將手勢操作運用在移動設備中，設計出天然的交互操作方式，成了交互設計的重要目標。手需要運用何種方式進行卓有成效的操作也就成了一個重要的研究內容，于是就有必要重點思考和探討目前已有的問題并予以回答。

移動應用中手勢說明的自然交互性尤為重要。通常情況下，一個移動設備的應用要呈現出相當多的信息，然而由于屏幕的限制，這些數據必須存放在不同級別關系的界面之中。例如，用戶通過左右滑動的方式呼出菜單、用“下拉”的方式刷新頁面以及“長按”來編輯數據。手勢的運用使界面伸展擴大，使用者也能夠一次性地瀏覽到大量的數據信息。這就是說移動設備手勢操作的設計必須滿足這些特性，并且應該提高其便捷性與高效性，才能成為符合用戶操作需要的手勢。

三、用戶操作手勢與移動設備的交互性連接

1.手勢交互應用的特性

科技的進步使人類可以自由地穿行在虛擬與現實場景之中，無論身處哪種環境，人們都能依賴于最自然、最熟悉的方式與世界溝通。這樣的行為促使設計師在手勢交互的使用上，設計出更符合人類操作習慣的交互設計。移動設備在與用戶交互的過程中重點使用了手勢，這種交互方式與人類自身所熟悉的身體語言相似，所以用戶能夠在最短的時間內掌握操作方式。用戶長久以來在日常生活中所積累的經驗和技能能夠在此極好地得到應用，大大提高了用戶使用的舒適度，同時也降低了操作難度。這樣，用戶就沒有必要從頭學起，操作也可以更加順手、便捷。

2.交互性手勢語義分類

按照不同的語義對手勢進行分類是手勢操作識別設計中的重要內容。有以下三種手勢分類方式。

（1）符號型手勢、模式型手勢、模仿型手勢、圖標型手勢、指示型手勢以及強調型手勢。符號型手勢指的是用手指的動作代表一種通用符號；模型式手勢經常表示一些情感，如聳肩、攤開手表示不知道等；模仿型手勢常被用來模仿人們使用、操縱某個物體，如模仿操縱汽車的方向盤等；指示型手勢就是用手指指向一個物體，或者指向物體的位置抑或運動方向等；強調型手勢主要是在人們說話的時候具有輔助的作用［1］。

（2）手勢和無意識動作。手勢有兩種，即操作型手勢和通信型手勢。操作型手勢表示在某種環境中對某些物體的操作，通信型手勢就是將手勢作為交流的工具，就像手語一樣；通信型手勢又可以分為動作手勢和符號手勢。符號手勢與第一種分類方法中的符號型手勢一樣，用來表示一種事先約定的意思，可以區分為指代型符號和模式型符號兩種形式；動作手勢則包含模仿型動作和指示型動作，這與上一種分類方式中的模仿型手勢和指示型手勢是相一致的［2］。

（3）二維手勢和三維手勢。二維手勢通常發生在移動設備的交互界面上，而三維手勢則經常出現在脫離交互界面的整個三維立體空間之中。二維手勢被普遍應用于與手持移動設備關聯的交互技術之中，而三維手勢目前主要應用于更為復雜的人機交互系統之中［3］。

四、移動設備平臺中手勢交互技術的新發展

1.三維手勢輸入技術——Leap Motion體感控制器

近年來，國內外科學家對計算機中基于手勢識別的三維手勢交互輸入技術進行了認真研究。目前計算機三維手勢輸入主要有收據手套和基于電腦視覺兩種方式。

（1）數據手套。基于數據手套的手勢輸入，是根據戴在手上的具有位置跟蹤器的數據手套獲取信息，然后利用光纖直接測量手指的彎曲和手的位置以實現的手勢輸入［4］。

（2）電腦視覺。基于電腦視覺的手勢輸入是采用攝像機捕捉手勢圖像，再利用計算機視覺技術對捕獲到的圖像進行分析，提取手勢圖像特征，從而實現手勢輸入［5］。這種方法較少限制用戶手的運動，與此同時，用戶還可以觀看到自己所捕獲的圖像。

Leap motion通過兩個攝像頭以捕捉經過紅外線 LED 照亮的手部影像，經三角測量并計算出在空間中的相對位置，以此來連接電腦，其最大特點是用手勢輸入取代了傳統的鍵盤、鼠標輸入。Leap Motion的識別范圍大致為設備頂部以上 25毫米至 600 毫米處，識別空間基本上是一個倒置的四棱錐體。在這個空間之中理論上能夠實現的精度為 0.01 毫米，目標則是手指的動作識別，延遲大約在 5-10 毫秒內［6］。

作為一款三維手勢輸入的概念產品，leap motion依然存在著一些缺點，如用戶長時間手臂懸空操作的勞累問題，以及懸空手勢輸入的精準度問題等，因此需要使用更多的時間進行優化。當科技發展到一定水平，Leap Motion這種三維空間手勢交互方式一定會成為人機交互的最新工具（見圖1）。

圖1　Leap Motion體感控制器

2.智能可穿戴設備中的手勢問題

可穿戴設備的工作原理基于穿戴式傳感器的識別系統，一般是利用數據手套或是固定在手臂上的動作傳感器來獲取手勢數據。數據手套可以直接采集到所需要的運動數據、手型以及手指、手臂彎曲角度等方面的數據。數據手套的優點是采集到的數據比較穩定，信號處理簡單；缺點則是設備復雜而費用昂貴，實用性比較低。而基于加速度、地磁和陀螺儀等動作傳感器不受外部條件的限制，可以在惡劣的條件下和較大的空間范圍內實施手勢操作識別［7］。

探討、研究可穿戴設備的手勢識別有著重要的理論意義和實際應用價值。理論上，手勢識別涉及人機交互、模式識別等多個領域，這項技術的應用能極大豐富人機交互方法的理論基礎；實際應用上，大量基于傳感器這種識別方式的移動設備的開發也改變了人們的生活質量，給日常生活帶來了極大的便捷。

［］［］

五、小結

隨著日常生活節奏的不斷加快，人們需要在忙碌之中快速處理眾多信息，由此手持移動設備的交互便捷顯得尤為重要。手勢交互的重點就是要強調更自然更直觀的綜合性手勢操作。用戶能夠迅速理解并熟練掌握各種操作方式并使用自如，高效率地利用產品，以求最快的實現用戶使用的目的。

手勢操作有著豐富而有趣味的交互方式，它的應用使用戶不再受設備的諸多限制，操作者能夠在方便和高效的情況下完成各項操作，同時也能為用戶提供新鮮而有刺激的經歷。手勢的應用十分廣泛，這都需要交互設計師具有相當大的知識儲備以及設身處地的從用戶的角度出發，只有這樣才能真正地為用戶做出有益的設計。

［1］Wexelblat.A feature-based approach to continuous-gesture analysis［D］.SM Thesis，MIT Program in Media Arts and Sciences，1994:113-114.

［2］Pavlovic I，Sharma R，Huang T S.Visual interpretation of hand gestures for humancomputer interaction: A review［C］.IEEE Trans on PAMI，1997:23-25.

［3］王元，高羽.帶你了解世界最先進的手勢識別技術［EB/OL］.（2015-02-27）［2015-03-18］. http://www.leiphone.com/news/201502/ QM7LdSN874dWXFLo.html.

［4］韓雙煥.筆式用戶界面中手勢的可用性設計和識別研究［D］.北京:中國科學院研究生院（軟件研究所），2005:56-57.

［5］王悅，岳瑋寧，王衡，董士海.手持移動計算機中多通道的交互［J］.軟件學報，2005（01）:60.

［6］周韶宏.交互革命：人與機器該怎樣交流［EB/ OL］.（2014-11-05）［2015-03-18］.http://www. ifanr.com/466339.

［7］楊經緯.基于可穿戴傳感器的手勢識別［D］.杭州：浙江工業大學，2012:31-32.

Research on Interactive Gesture in Mobile Devices Design

Wide use of mobile intelligent devices has turned today's society into a new era of interaction. The number of application users and devices are increasing in an amazing pace. Operational characteristics of the gesture interaction make this interaction become the mainstream model of mobile devices in human-computer interaction and future trends. In this paper, on the one hand we like to investigate and study currently mainstream mobile devices interactive gestures explore and establish the mapping between user-specifi c gestures and their meanings. On the other hand, our research starting from the user, to know their intention, to explore different environments, relevance under the platform of user gestures, to design more effi cient and convenient user gestures, which allows the smart mobile devices into full play its value and better services for users.

mobile device；user operation；human-computer interaction；gesture recognition

J02

A

10.3963/j.issn.2095-0705.2016.03.013（0080-03）

2016-04-19

方芳，武漢理工大學藝術與設計學院碩士生。