具身認(rèn)知視角下的交互手勢對用戶情感認(rèn)知的影響

王新燕

具身認(rèn)知視角下的交互手勢對用戶情感認(rèn)知的影響

王新燕

（南京航空航天大學(xué)金城學(xué)院，南京 211156）

以具身認(rèn)知相關(guān)理論為基礎(chǔ)，結(jié)合現(xiàn)代人使用便攜移動設(shè)備的操作習(xí)慣，探討觸屏環(huán)境下操作手、圖片價(jià)態(tài)、滑動方向三者對用戶情感認(rèn)知造成的影響差異，為便攜式移動設(shè)備的界面設(shè)計(jì)及手勢設(shè)計(jì)提供參考。實(shí)驗(yàn)采用手（左/右）×滑動方向（由左向右/由右向左）×圖片價(jià)態(tài)（積極/消極）的混合設(shè)計(jì)，刺激圖片均選自國際情緒圖片系統(tǒng)。將60名右利手大學(xué)生隨機(jī)分為四組，兩組受測者使用右手，另外兩組則使用左手，分別在觸屏設(shè)備上完成從左向右或從右向左滑動情感圖片的操作。受測者根據(jù)自己的實(shí)時(shí)感受對圖片進(jìn)行1-5的評分。滑動方向?qū)τ谟脩舻那楦姓J(rèn)知具有顯著影響，由左向右的滑動方式能為用戶帶來更加積極的情感體驗(yàn)，增加用戶對于圖像的喜好程度；當(dāng)用戶使用慣用手操作時(shí)，該影響會更加顯著。同時(shí)，研究發(fā)現(xiàn)當(dāng)操作手與空間位置的極性保持一致時(shí)，用戶對圖片的情感認(rèn)知會更加積極，然而該結(jié)論在消極圖片上并不適用。

具身認(rèn)知；極性一致假說；近手效應(yīng)

在桌面時(shí)代，用戶通過點(diǎn)擊、滾動和拖動鼠標(biāo)與產(chǎn)品進(jìn)行交互[1]；然而，隨著觸控技術(shù)與交互方式的發(fā)展，平板電腦與智能手機(jī)日益普及，用戶可以直接用手在觸屏上通過輕擊、拖拽或縮放等手勢與產(chǎn)品進(jìn)行互動。基于手勢的交互技術(shù)已經(jīng)徹底改變了用戶與產(chǎn)品交互的方式[2-3]。例如，在社交APP應(yīng)用“探探”中，用戶可以通過左滑或右滑個(gè)人照片對未來的約會對象表示喜歡或者不喜歡。如圖1所示，為一款名為Stylect的手機(jī)購物APP，用戶通過瀏覽產(chǎn)品圖片找到心儀的商品，如果喜歡該產(chǎn)品就向右滑，不喜歡就向左滑。“滑動”成為一種越來越普遍的交互動作，而滑動方向作為滑動手勢的重要特征成為一個(gè)值得研究的話題。

圖1 Stylect購物平臺

根據(jù)具身認(rèn)知（Embodied Cognition）理論，人們所處環(huán)境及身體行為會對其認(rèn)知和情感造成一定影響[4-6]。人們的身心是作為一個(gè)整體系統(tǒng)共同進(jìn)化和發(fā)展的[7]，用戶與設(shè)備互動時(shí)所使用的手勢也可能會潛在性地影響用戶在交互任務(wù)中的情感認(rèn)知，如通過觸屏設(shè)備進(jìn)行網(wǎng)購時(shí)對產(chǎn)品的評價(jià)。另一方面，手附近的空間是特別的[8]。研究表明，當(dāng)用戶通過手在觸屏界面上直接與電子訊息交互時(shí)，近手空間的電子資訊可能會更加強(qiáng)烈地影響用戶的情感體驗(yàn)。

在觸屏環(huán)境下，不同的交互手勢會對用戶情感認(rèn)知造成不同影響[9-10]，近手空間效應(yīng)加劇了此情感認(rèn)知的影響。然而，與觸屏設(shè)備的手勢交互方向是否有關(guān)以及如何對用戶情感認(rèn)知造成影響尚未得到充分的研究。例如，研究購物或社交平臺滑動方向的不同（從左到右或從右到左）是否對用戶對于該產(chǎn)品的情感認(rèn)知造成影響，這一影響可能會進(jìn)一步影響用戶的產(chǎn)品評價(jià)和支付意愿。因此，本文在具身認(rèn)知理論的基礎(chǔ)上，結(jié)合現(xiàn)代人使用便攜移動設(shè)備的操作習(xí)慣，探討觸屏環(huán)境下滑動方向這一重要變量對用戶情感認(rèn)知造成的不同影響。

1 具身認(rèn)知與極性一致性假說

人們與空間的情感聯(lián)系是基于自身的身體構(gòu)造及其與環(huán)境的互動經(jīng)驗(yàn)[11]。人們在日常生活中，主要通過右手與周圍環(huán)境與事物進(jìn)行互動，因此右手無論是在靈活性、肌肉力量、敏感性等方面都比左手有優(yōu)勢，流暢的互動體驗(yàn)導(dǎo)致右利手對其右側(cè)空間產(chǎn)生更加積極的情感體驗(yàn)。而左利手的情況恰恰相反。因此，左右利手在空間位置與情感認(rèn)知關(guān)系上存在顯著差異現(xiàn)象[9,11]。右利手傾向于將右側(cè)空間與積極情感相聯(lián)系，將左側(cè)空間與消極情感相聯(lián)系，而左利手與空間的情感聯(lián)系則完全相反[12–14]。因此，可以想象，當(dāng)用戶分別使用右手與左手與呈現(xiàn)在觸屏上的電子訊息進(jìn)行互動時(shí)，操作手的不同可能會導(dǎo)致用戶對同一產(chǎn)品產(chǎn)生不同的情感認(rèn)知差異。

隨著對左右空間情感效價(jià)的研究深入，人們發(fā)現(xiàn)對應(yīng)于右利手者的“右好左壞”現(xiàn)象，以及對應(yīng)于左利手的“右壞左好”現(xiàn)象并不是恒成立的[15]。為了更好地解釋這種差異，Lakens基于前人研究，根據(jù)情緒以及空間方位等概念所具有的兩極提出了極性一致性假說（Polarity Coding Correspondence Hypothesis）[16]。極性一致假說[17]認(rèn)為一個(gè)刺激的概念意義（效價(jià)）與其知覺特性（空間）相互重疊時(shí)，可以促進(jìn)情緒認(rèn)知加工。Cervera Torres在極性編碼一致性原則的背景下，對用戶與大型觸屏設(shè)備的物理互動所造成的情感認(rèn)知影響進(jìn)行實(shí)驗(yàn)研究[18]。結(jié)果表明，受測者用于互動的手（慣用/非慣用）、圖像的價(jià)態(tài)（積極/消極）和交互手勢的起始空間（左/右）之間的極性一致增強(qiáng)了受測者對于該圖像的情感認(rèn)知。即當(dāng)用戶使用慣用手（正極）從屏幕右側(cè)空間（正極）滑動積極圖像（正極）到左側(cè)空間時(shí)，三者的極性一致導(dǎo)致用戶對該圖像的情感認(rèn)知變得更加積極。但鑒于Cervera Torres采用的實(shí)驗(yàn)設(shè)備為23英寸的大型觸摸顯示屏，該結(jié)果是否同樣適用于便攜式移動設(shè)備仍有待驗(yàn)證。極性一致假說的極性說明見表1。

表1 極性一致假說的極性說明

Tab.1 Polarity explanation of the Polarity Coding Correspondence Hypothesis

注：“+”為正極，“–”為負(fù)極。

2 近手效應(yīng)

2006年，Reed等[19]的研究發(fā)現(xiàn)手部距離屏幕越近，Posner的空間線索任務(wù)反應(yīng)時(shí)間越短，出現(xiàn)在手部附近空間的視覺刺激目標(biāo)能夠更快地被檢索到。之后Abrams等的研究表明，在三種經(jīng)典視覺注意任務(wù)（視覺搜索、返回抑制和注意瞬脫）中，手部位置靠近刺激目標(biāo)均有效改變了受測者的任務(wù)表現(xiàn)。在這一現(xiàn)象中，手部附近的空間似乎獲得了特殊的注意加工[20]。例如，在簡單的辨別任務(wù)中，受測者對接近手部位置的刺激反應(yīng)具有更高的準(zhǔn)確性和更短的反應(yīng)時(shí)間。

其他的一些證據(jù)進(jìn)一步表明，手部位置的靠近影響著視覺加工的很多方面，比如知覺及認(rèn)知控制[21]。Weidler通過實(shí)驗(yàn)研究發(fā)現(xiàn)，當(dāng)視覺刺激呈現(xiàn)在手部附近時(shí)，可以增強(qiáng)受測者對視覺信息的注意加工[22]。這種注意力的增強(qiáng)是人類長期進(jìn)化得來的，因?yàn)榭拷眢w附近的物體可能是需要快速有效處理的危險(xiǎn)物。Kranz等通過圖片的分類實(shí)驗(yàn)發(fā)現(xiàn)，直接觸摸并拖動圖片會帶來更好的任務(wù)表現(xiàn)，即近手條件更加有利于受測者對視覺空間信息的認(rèn)知與加工處理。近手效應(yīng)的影響不僅發(fā)生在視覺信息處理中，還會進(jìn)一步影響用戶的情感體驗(yàn)[23]。Brucker等的研究結(jié)果同樣表明，在觸屏界面上直接用手接觸帶有情感色彩的電子刺激（如滑動情感圖片）會使用戶對該刺激產(chǎn)生更高的視覺關(guān)注，這種視覺注意力的增加可能會影響其情感體驗(yàn)與產(chǎn)品評價(jià)[24]。

由于以往關(guān)于手勢互動對情感認(rèn)知影響的實(shí)驗(yàn)研究較多采用大型觸控屏幕[18,25–27]，較少有研究針對便攜式觸屏環(huán)境下的用戶情感認(rèn)知進(jìn)行探討。因此，本研究試圖以具身認(rèn)知等相關(guān)認(rèn)知理論為基礎(chǔ)，以便攜式觸屏設(shè)備為實(shí)驗(yàn)載體，采用情感圖片作為實(shí)驗(yàn)樣本，探討不同操作手（左、右）、不同滑動方向（由左向右、由右向左）對用戶情感認(rèn)知造成的影響差異。

3 研究方法

3.1 測試對象

采用G*Power3.1.7軟件預(yù)估樣本量，參考已有類似文獻(xiàn)的效應(yīng)量[25]以及課題組預(yù)實(shí)驗(yàn)結(jié)果，計(jì)算得到36名被試即可達(dá)到0.95的統(tǒng)計(jì)檢驗(yàn)力。本研究招募了60名右利手大學(xué)生（平均年齡age=20.15，46.7%為女性），且視力或矯正視力均為正常，智力正常，沒有明顯影響右利手測試的身體疾病。將受測者隨機(jī)分為四組，每組15人。

3.2 測試樣本

實(shí)驗(yàn)中啟動情感效價(jià)的刺激材料為國際情緒圖片系統(tǒng)（IAPS）的情感圖片，包括15張積極情感圖片（例如，植物、風(fēng)景、可愛的動物等）與15張消極情感圖片（例如，垃圾、雜亂空間、災(zāi)難等）。圖片呈現(xiàn)于iPad pro 10.5寸（17.4 cm×25.1 cm）平板電腦上，圖像尺寸為4 cm×5 cm，水平移動距離為12 cm；四組受測者所用的平板電腦的亮度、對比度等功能均統(tǒng)一設(shè)置。

3.3 實(shí)驗(yàn)部分

實(shí)驗(yàn)狀態(tài)中受測者均采取標(biāo)準(zhǔn)坐姿，平板電腦平放于其面前的桌子上，眼距屏幕25 cm。受測者登錄測試程序，界面中隨機(jī)出現(xiàn)樣本圖片。受測者需要根據(jù)分組任務(wù)，使用左手或右手滑動情感圖片到指定位置（白框）。具體分組情況為，四組受測者中，兩組受測者使用右手，另外兩組則使用左手，分別完成從左向右或從右向左滑動情感圖片的操作（見圖2）。操作完成后，受測者根據(jù)自己的實(shí)時(shí)感受，使用Likert量表對該圖片進(jìn)行情感效價(jià)評分，評價(jià)時(shí)間不限，速度由受測者自己掌握，可隨時(shí)休息。

注：灰色手和虛線框分別為手部及圖片最終位置

4 分析與結(jié)果

4.1 滑動方向與情感認(rèn)知的關(guān)系研究

將實(shí)驗(yàn)數(shù)據(jù)通過SPSS 21.0進(jìn)行ANOVA分析。采用手（左/右）×滑動方向（由左至右/由右至左）×圖片價(jià)態(tài)（積極/消極）的混合設(shè)計(jì)，結(jié)果如表2所示。分析用戶通過便攜式觸屏設(shè)備與情感圖片進(jìn)行水平方向的人機(jī)互動時(shí)，滑動方向是否以及如何對用戶情感認(rèn)知造成影響，結(jié)果發(fā)現(xiàn)：

1）滑動方向?qū)τ脩羟楦姓J(rèn)知有顯著影響，（1，56）=17.22，<0.001。用戶與呈現(xiàn)在便攜式移動設(shè)備屏幕上的情感圖片進(jìn)行互動時(shí)，采用由左向右的滑動方式能夠使用戶對該圖片的情感認(rèn)知更為積極（（=4.46，=1.46）>（=3.93，=1.39））。

表2 手、滑動方向、圖片價(jià)態(tài)對用戶情感認(rèn)知的ANOVA分析

Tab.2 ANOVA analysis of hand, swiping direction, and picture valence on user's emotional cognition

注：***表示<0.001，*表示<0.05。

2）手與圖片價(jià)態(tài)在用戶情感認(rèn)知上具有顯著交互作用，（1，56）=5.92，=0.02，說明兩者對用戶的情感認(rèn)知具有重要的影響。進(jìn)一步進(jìn)行單純主效果檢定，結(jié)果如表2所示。對消極圖片來說，手具有顯著單純主效果，（1，112）=4.44，=0.04；即用戶在觸控屏幕上與情感圖片互動時(shí)，是否使用其慣用手對用戶的情感認(rèn)知具有顯著影響。當(dāng)用戶使用右手（慣用手）時(shí)，用戶對該圖片的情感認(rèn)知相對積極，厭惡感減弱（（=2.76，=0.60）<（=3.1，=0.87））。

3）手、滑動方向、圖片價(jià)態(tài)在用戶情感認(rèn)知上有顯著交互作用效果，（1，56）=12.64，<0.001，表明用戶通過觸控屏幕與情感圖片進(jìn)行人機(jī)互動時(shí)，手、滑動方向與圖片價(jià)態(tài)三者對用戶情感認(rèn)知的影響具有共同重要性。進(jìn)一步進(jìn)行單純交互作用檢定，結(jié)果如表3所示。無論操作手是否為慣用手，滑動方向與圖片價(jià)態(tài)均具有顯著單純交互作用效果（（1，56）= 5.84，=0.02；（1，56）=6.62，=0.01）。為進(jìn)一步研究滑動方向與圖片價(jià)態(tài)如何對情感認(rèn)知造成影響，進(jìn)行單純主效果檢定（見表4）。結(jié)果表明：當(dāng)用戶使用慣用手滑動積極圖片或使用非慣用手滑動消極圖片時(shí)，滑動方向均具有顯著單純主效果（積極（1，112）=8.58，積極<0.001；消極（1，112）=22.45，消極<0.001），且由左向右的滑動方式（M積極=5.85，積極=0.70；消極= 3.63，消極=0.85）均比由右向左滑動(積極=5.19，積極=0.59；消極=2.57,消極=0.47)更能為用戶帶來積極愉悅的情感認(rèn)知。

表3 手、滑動方向、圖片價(jià)態(tài)在用戶情感認(rèn)知上的單純交互作用

Tab.3 Simple interaction of hand, swiping direction, and picture valence on user's emotional cognition

表4 單純主效果分析

Tab.4 The simple main effect test

為進(jìn)一步研究用戶對圖片的情感認(rèn)知在何種滑動方式下影響顯著，需要繼續(xù)對手與情感圖片在水平空間的互動進(jìn)行進(jìn)一步分析探討。

4.2 操作手與情感認(rèn)知的關(guān)系研究

研究發(fā)現(xiàn)，使用非慣用手（左手）沿水平方向滑動情感圖片時(shí)，由左向右的滑動方式使用戶對該圖片的情感認(rèn)知變得更加積極。另一方面，當(dāng)用戶使用右手沿水平方向移動積極圖片時(shí)，由右向左的滑動方式亦使用戶對圖片的情感認(rèn)知變得更加積極（（28）=2.79，=0.009）；但相同條件下滑動消極圖片時(shí)，用戶對該圖片的情感認(rèn)知并不存在顯著差異（（28）=0.05，=0.96）。

該結(jié)果表明用戶對圖片的情感認(rèn)知與最初觸碰圖片時(shí)圖片所處的空間位置有關(guān)，而與圖片價(jià)態(tài)本身無關(guān)；當(dāng)操作手與圖片出現(xiàn)時(shí)所處空間的極性保持一致時(shí)，用戶對圖片的情感認(rèn)知會更加積極；即當(dāng)右手為操作手時(shí)，用戶對其右側(cè)空間出現(xiàn)的圖片情感認(rèn)知更加積極；同樣地，當(dāng)其使用左手時(shí)，用戶則對其左側(cè)空間出現(xiàn)圖片情感認(rèn)知更加積極。然而，該結(jié)論并不完全適用于消極圖片，比如用戶使用右手滑動消極圖片時(shí)，其對于左側(cè)出現(xiàn)的圖片的情感認(rèn)知與右側(cè)出現(xiàn)的并不存在顯著差異。

5 討論

本實(shí)驗(yàn)采用手（左/右）×滑動方向（由左向右/由右向左）×圖片價(jià)態(tài)（積極/消極）的混合設(shè)計(jì)，實(shí)驗(yàn)圖片均選自國際情緒圖片系統(tǒng)，共計(jì)60名右利手大學(xué)生參與實(shí)驗(yàn)研究。通過數(shù)據(jù)分析發(fā)現(xiàn)：

1）用戶通過手指直接對觸控屏幕上的情感圖片進(jìn)行左右滑動時(shí)，操作手、滑動方向與圖片價(jià)態(tài)三者對用戶情感認(rèn)知的影響具有共同重要性。對右利手用戶來說，由左向右的滑動方式可以為用戶帶來更加積極的情感認(rèn)知，增加用戶對于該圖像的喜好程度；當(dāng)用戶使用慣用手操作時(shí)，該影響會更加顯著。此結(jié)論在一定程度上驗(yàn)證了具身認(rèn)知理論。

2）用戶對圖片的情感認(rèn)知與最初觸碰圖片時(shí)圖片所處的空間位置有關(guān)；當(dāng)手與空間位置的極性保持一致時(shí)，用戶對圖片的情感認(rèn)知會更加積極。即當(dāng)用戶使用右手進(jìn)行觸屏操作時(shí)，其右側(cè)空間出現(xiàn)的圖片更容易獲得用戶的好感，用戶對其情感認(rèn)知相對積極。然而，該結(jié)論并不完全適用于消極圖片。例如，用戶使用右手滑動消極圖片時(shí)，用戶對其左側(cè)出現(xiàn)的圖片評價(jià)與其右側(cè)出現(xiàn)的圖片之間并不存在顯著差異。簡單來說就是，當(dāng)用戶面對為他帶來負(fù)面情緒或者不好回憶的產(chǎn)品時(shí)，該空間效價(jià)無法疊加到產(chǎn)品本身。無論產(chǎn)品位于左側(cè)還是右側(cè)空間，均無法顯著改變用戶對該產(chǎn)品的情感認(rèn)知。造成該現(xiàn)象的原因，一方面可能是由于消極刺激屬于非凸顯維度。Dela Vega在2013年通過實(shí)驗(yàn)研究發(fā)現(xiàn)，右手對積極詞匯的反應(yīng)顯著快于左手，左手對消極詞匯的反應(yīng)與右手差異不明顯，說明刺激與相同編碼反應(yīng)之間的聯(lián)系可能由凸顯刺激驅(qū)動[28]。而由于消極詞匯并非屬于凸顯的維度，從而對該效應(yīng)的影響并不顯著。本研究結(jié)果在一定程度上驗(yàn)證了Dela Vega的觀點(diǎn)，即消極刺激（詞匯、圖片）無法完全驅(qū)動編碼反應(yīng)，極性一致性假說在消極刺激狀態(tài)下有可能無法出現(xiàn)。同時(shí)由于本實(shí)驗(yàn)將刺激物置于被試的近手空間，強(qiáng)化了消極圖片帶給被試的刺激。被試在面對強(qiáng)烈消極刺激時(shí)，會本能選擇回避，并進(jìn)行情緒調(diào)節(jié)，甚至以犧牲自我控制或自我管理為代價(jià)[29]。這種無意識的情緒調(diào)節(jié)弱化了消極刺激的維度與驅(qū)動力，最終導(dǎo)致編碼效應(yīng)并未出現(xiàn)或效果并不明顯。

另一方面可能是由于便攜式移動設(shè)備尺寸較小，用戶與情感圖片交互的時(shí)間過短，對消極圖片的反應(yīng)尚未充分，進(jìn)而導(dǎo)致編碼效應(yīng)的影響不夠顯著。后期課題研究將針對消極刺激狀態(tài)下的用戶情感認(rèn)知進(jìn)行深入探討，以更好地理解APP界面設(shè)計(jì)及手勢設(shè)計(jì)對用戶體驗(yàn)及情感認(rèn)知的影響方式。

6 結(jié)語

越來越多消費(fèi)者使用移動設(shè)備來評估和購買產(chǎn)品，這使得理解用戶與移動設(shè)備的人機(jī)互動如何影響其情感認(rèn)知與產(chǎn)品評估變得越來越重要。本研究主要討論了觸屏環(huán)境下水平空間的滑動方向?qū)τ脩羟楦姓J(rèn)知的影響，研究結(jié)果表明，當(dāng)用戶通過便攜式移動設(shè)備與圖片進(jìn)行人機(jī)互動時(shí)：

1）向右滑動的手勢可以將用戶與正面評價(jià)聯(lián)系在一起，增加用戶對右滑產(chǎn)品的喜愛。生活中大部分用戶為右手慣用者，右側(cè)空間代表著更好的易用性與喜愛度。因此，在進(jìn)行相關(guān)APP界面設(shè)計(jì)時(shí)，可以考慮將購買、收藏、點(diǎn)贊等鼓勵(lì)性操作與右滑手勢相結(jié)合，以提升用戶互動時(shí)的情感體驗(yàn)。比如“探探”產(chǎn)品的目標(biāo)是促成更多的用戶配對成功，即系統(tǒng)是希望用戶更大概率地進(jìn)行“喜歡”的操作。因此，界面中采用對多數(shù)習(xí)慣右手操作的用戶更順手的右滑手勢，引導(dǎo)用戶進(jìn)行喜歡的操作。

2）空間效價(jià)對用戶情感認(rèn)知具有重要影響。例如，超市貨架商品擺放時(shí)，習(xí)慣將促銷產(chǎn)品或利潤較大的產(chǎn)品優(yōu)先擺放到超市貨架的右側(cè)空間，便是符合用戶心理認(rèn)知的一種操作習(xí)慣。該效應(yīng)同樣可以應(yīng)用于相關(guān)APP界面設(shè)計(jì)，利用用戶對右側(cè)空間的好感對其進(jìn)行一定的行為引導(dǎo)，增加其操作體驗(yàn)，提高購物成功率。但當(dāng)該產(chǎn)品形象或圖片為用戶帶來負(fù)面情緒或者不好回憶時(shí)，空間效價(jià)無法疊加，無論其在屏幕左側(cè)或右側(cè)出現(xiàn)均無法使用戶對該產(chǎn)品或圖片產(chǎn)生好感。

本研究通過實(shí)驗(yàn)分析探討了觸屏環(huán)境下交互手勢對于用戶情感認(rèn)知造成的影響，進(jìn)一步豐富了具身認(rèn)知理論在人機(jī)互動方面的研究。研究結(jié)果有利于改善用戶與便攜式移動設(shè)備的互動體驗(yàn)，理解用戶的心理反應(yīng)和情感需求，提升用戶的支付與購買意愿，對交互手勢設(shè)計(jì)及界面設(shè)計(jì)亦具有一定的參考意義。

[1] SAFFER D. Designing Gestural Interfaces: Touchscreens and Interactive Devices[M]. Sebastopol: O’Reilly Media, Inc., 2008.

[2] 孫巖, 董石羽, 徐伯初, 等. 基于人類行為學(xué)的觸屏手機(jī)手勢交互設(shè)計(jì)研究[J]. 包裝工程, 2015, 36(14): 55-59.

SUN Yan, DONG Shi-yu, XU Bo-chu, et al. Gesture Interaction Design of Touch-Screen Phones Based on Human Behaviour[J]. Packaging Engineering, 2015, 36(14): 55-59.

[3] 陳子揚(yáng). 手持移動設(shè)備多點(diǎn)觸摸手勢代替點(diǎn)按交互方式研究與設(shè)計(jì)[D]. 杭州: 浙江大學(xué), 2016.

CHEN Zi-yang. Study and Design of Multi-Touch Gesture Replacing Tap-Based Interaction on Mobile Devices[D]. Hangzhou: Zhejiang University, 2016.

[4] BARSALOU L W. Grounded Cognition[J]. Annual Review of Psychology, 2008, 59: 617-645.

[5] HOMMEL B, MüSSELER J, ASCHERSLEBEN G, et al. The Theory of Event Coding (TEC): A Framework for Perception and Action Planning[J]. The Behavioral and Brain Sciences, 2001, 24(5): 849-878; discussion 878-937.

[6] NIEDENTHAL P M. Embodying Emotion[J]. Science, 2007(316): 1002–1005.

[7] 何燦群, 呂晨晨. 具身認(rèn)知視角下的無意識設(shè)計(jì)[J]. 包裝工程, 2020, 41(8): 80-86.

HE Can-qun, LYU Chen-chen. Unconscious Design from the Perspective of Embodied Cognition[J]. Packaging Engineering, 2020, 41(8): 80-86.

[8] ABRAMS R A. Embodied Seeing: The Space near the Hands[J]. Psychology of Learning and Motivation, 2015, 63: 141-172.

[9] KEYSAR B, et al. Conventional Language: How Metaphorical is It?[J]. Journal of Memory and Language, 2000, 43(4): 576-593.

[10] GAO Yuan, BIANCHI-BERTHOUZE N, MENG Hong- ying. What does Touch Tell us about Emotions in Touc-hscreen-Based Gameplay?[J]. ACM Transactions on Computer-Human Interaction, 2012, 19(4): 31.

[11] PECHER D, BOOT I, VAN DANTZIG S. Abstract Con-cepts. Sensory-Motor Grounding, Metaphors, and beyond[J]. Psychology of Learning and Motivation-Adva-nces in Research and Theory, 2011, 54: 217-248.

[12] CASASANTO D, HENETZ T. Handedness Shapes Chil-dren's Abstract Concepts[J]. Cognitive Science, 2012, 36(2): 359-372.

[13] DE LA FUENTE J, CASASANTO D, ROMáN A, et al. Can Culture Influence Body-Specific Associations between Space and Valence? [J]. Cognitive Science, 2015, 39(4): 821-832.

[14] MILHAU A, BROUILLET T, BROUILLET D. Valence- Space Compatibility Effects Depend on Situated Motor Fluency in both Right-and Left-Handers[J]. The Quarterly Journal of Experimental Psychology, 2015, 68(5): 887-899.

[15] 閆鵬. 左右空間情感效價(jià)的研究——基于極性差異假說[D]. 曲阜: 曲阜師范大學(xué), 2015.

YAN Peng. Research on the Valence of Left and Right Space Emotions—Based on the Hypothesis of Polarity Difference[D]. Qufu: Qufu Normal University, 2015.

[16] LAKENS D. Polarity Correspondence in Metaphor Con-gruency Effects: Structural Overlap Predicts Categorization Times for Bipolar Concepts Presented in Vertical Space[J]. Journal of Experimental Psychology: Learning, Memory, and Cognition, 2012, 38(3): 726-736.

[17] PROCTOR R W, CHO Y S. Polarity Correspondence: A General Principle for Performance of Speeded Binary Classification Tasks[J]. Psychological Bulletin, 2006, 132(3): 416-442.

[18] TORRES S C, FERNáNDEZ S R, LACHMAIR M, et al. Coding Valence in Touchscreen Interactions: Hand Dominance and Lateral Movement Influence Valence Appraisals of Emotional Pictures[J]. Psychological Research, 2020, 84(1): 23-31.

[19] REED P, MORGAN T A. Resurgence of Response Sequences during Extinction in Rats Shows a Primacy Effect[J]. Journal of the Experimental Analysis of Behavior, 2006, 86(3): 307-315.

[20] ABRAMS R A III. Altered Vision near the Hands[J]. Cognition, 2008, 107(3): 1035-1047.

[21] BROCKMOLE J R, DAVOLI C C, ABRAMS R A, et al. The World within Reach[J]. Current Directions in Psychological Science, 2013, 22(1): 38-44.

[22] WEIDLER B J, ABRAMS R A. Enhanced Cognitive Control near the Hands[J]. Psychonomic Bulletin & Review, 2014, 21(2): 462-469.

[23] KRANZ J, IMHOF B. Learning Art History on Multi- Touch-Tables: Metaphorical Meaning of Interaction Gestures matters[C]. France:Laboratoire des Sciences de l‘Education Université Pierre-Mendès-France, 2012.

[24] BRUCKER B, et al. Touching Digital Objects Directly on Multi-Touch Devices Fosters Learning about Visual Contents[J]. Computers in Human Behavior, 2021, 119: 106708.

[25] CERVERA-TORRES S, RUIZ FERNáNDEZ S, LACHMAIR M, et al. Altering Emotions near the Hand: Approach- Avoidance Swipe Interactions Modulate the Perceived Valence of Emotional Pictures[J]. Emotion (Washington, D C), 2021, 21(1): 220-225.

[26] MARKMAN A B, BRENDL C M. Constraining Theories of Embodied Cognition[J]. Psychological Science, 2005, 16(1): 6-10.

[27] PECHER D, VAN DANTZIG S, ZWAAN R A, et al. Short Article: Language Comprehenders Retain Implied Shape and Orientation of Objects[J]. Quarterly Journal of Experimental Psychology, 2009, 62(6): 1108-1114.

[28] DE LA VEGA I, et al. Keep your Hands Crossed: The Valence-by-Left/Right Interaction is Related to Hand, not Side, in an Incongruent Hand-Response Key Assignment[J]. Acta Psychologica, 2013, 142(2): 273-277.

[29] BAUMEISTER R F, BRATSLAVSKY E, MURAVEN M, et al. Ego Depletion: Is the Active Self a Limited Resource?[J]. Journal of Personality and Social Psychology, 1998, 74(5): 1252-1265.

The Influence of Interactive Gestures on Users' Emotional Cognition from the Perspective of Embodied Cognition

WANG Xin-yan

(Nanhang Jincheng College, Nanjing 211156, China)

Based on the relevant theories of Embodied Cognition and combined with the operating habits of modern people using portable mobile devices, this paper discusses the differences in the influence of manipulators, picture valance, and swiping direction on users' emotional cognition in a touchscreen environment, providing a reference for interface design and gesture design of portable mobile devices.The experiment adopted a mixed design of hand (left/right) × swiping direction (from left to right/from right to left) × valence (positive/negative). The stimulus pictures were all selected from the International Affective Picture System. Sixty right-handed college students were randomly divided into four groups. Two groups of participants used their right hand and the other two used their left. They swiped affective pictures either from left to right or right to left on a touchscreen device. Participants rated the pictures on a Likert scale of one to five based on how they felt in real-time.The swiping direction has a significant impact on users' emotional cognition. The left-to-right swiping mode can bring users a more positive emotional experience and increase users' preference for images. This effect is even more pronounced when the user is using the dominant right hand. Meanwhile, the study found that users' emotional perception of the picture was more positive when the manipulation hand was aligned with the polarity of the spatial position, but this result did not apply to the negative pictures.

Embodied Cognition; Polarity Coding Correspondence Hypothesis; the near-hand effect

TB472

A

1001-3563(2022)24-0153-06

10.19554/j.cnki.1001-3563.2022.24.017

2022–07–15

2020年度江蘇高校哲學(xué)社會科學(xué)研究項(xiàng)目（2020SJA2221）；2022年度江蘇高校哲學(xué)社會科學(xué)研究項(xiàng)目（2022SJYB0722）；南航金城學(xué)院2021年教育教學(xué)改革研究項(xiàng)目（2021-D-17）

王新燕（1982—），女，碩士，副教授，主要從事產(chǎn)品設(shè)計(jì)與人機(jī)互動方面的研究。

責(zé)任編輯：馬夢遙