口語(yǔ)加工中的韻律信息*

高 晗 任桂琴 沈 莉 王 露

中國(guó).遼寧師范大學(xué)心理學(xué)院(遼寧大連) 116029 △通訊作者 E-mail:renguiqin@126.com

我們常用到的語(yǔ)言包括書面語(yǔ)言和口頭語(yǔ)言(口語(yǔ))。與書面語(yǔ)言相比較，口語(yǔ)是我們應(yīng)用更多、接觸更頻繁的一種語(yǔ)言形式。而口語(yǔ)更為靈活多變，更容易傳達(dá)一些語(yǔ)言信息，例如韻律信息。語(yǔ)言的每個(gè)音節(jié)都包含兩部分信息即音段信息和超音段信息，其中，超音段信息也叫韻律信息。音段信息是指可以形成字詞的音位或音素。例如，/f//c://r//b//e//r/這些音素，通過(guò)特殊的順序可以組成“Forebear”(祖先、忍耐)這個(gè)單詞。超音段信息即由音位或音位群負(fù)載，包括音高、強(qiáng)度、時(shí)長(zhǎng)等聲音線索，如聲調(diào)，重音等［1］。

在口語(yǔ)中韻律信息發(fā)揮著重要作用，往往相同的書面語(yǔ)在口語(yǔ)中卻可以表達(dá)不同的意思。如:“Present”，重讀第一個(gè)音節(jié)時(shí)表達(dá)的是“禮物”的意思，而重讀第二個(gè)音節(jié)時(shí)表達(dá)的是“呈現(xiàn)”的意思。又如，“今天小明去買書。”重讀“今天”、“小明”或“書”分別強(qiáng)調(diào)不同的內(nèi)容，傳遞的主要信息也不同。在口語(yǔ)中語(yǔ)言變得更加靈活多樣，韻律的作用也得以體現(xiàn)，因此，關(guān)于口語(yǔ)中的韻律，近年來(lái)學(xué)者們給予了廣泛的關(guān)注。

1 口語(yǔ)韻律中的重音

重音是韻律的主要特征之一，表現(xiàn)為在詞、短語(yǔ)或者句子中一些成分的發(fā)音突出。在詞與句子中重音都發(fā)揮著重要作用。

1.1 重音對(duì)詞匯激活的影響

Wilma van Donselaar 等人［2］采用跨通道的啟動(dòng)范式來(lái)研究在荷蘭語(yǔ)中重音的作用。目標(biāo)刺激為視覺(jué)呈現(xiàn)的詞，啟動(dòng)刺激為聽(tīng)覺(jué)呈現(xiàn)的詞匯片段(目標(biāo)刺激的一部分)。當(dāng)啟動(dòng)刺激為目標(biāo)刺激的前兩個(gè)音節(jié)，只有當(dāng)啟動(dòng)刺激的重音位置正確時(shí)才對(duì)目標(biāo)刺激有促進(jìn)作用，啟動(dòng)刺激的重讀位置不正確時(shí)對(duì)目標(biāo)刺激起抑制作用。當(dāng)啟動(dòng)刺激僅為目標(biāo)刺激的首個(gè)音節(jié)時(shí)，正確的重音模式促進(jìn)目標(biāo)刺激的激活，不正確的重音模式對(duì)目標(biāo)刺激既不促進(jìn)也不阻礙。認(rèn)為詞匯在語(yǔ)音水平上的激活包括韻律信息和音段信息兩方面的調(diào)節(jié)。

來(lái)自西班牙語(yǔ)的研究也得到了相似的結(jié)論［3］，認(rèn)為重讀模式的不同與元音和輔音的不同對(duì)詞匯激活的抑制作用是相同的，即在詞匯激活中重音也發(fā)揮作用，并且和音段信息沒(méi)有差別。音段和超音段信息在詞匯激活中發(fā)揮的作用是相同的。在口語(yǔ)詞匯識(shí)別模型中，應(yīng)考慮重音的影響作用［3-4］。

1.2 重音對(duì)語(yǔ)篇理解的影響

把重音放到句子中，形成對(duì)句子內(nèi)部詞或短語(yǔ)的重讀，重讀一般表示對(duì)內(nèi)容的強(qiáng)調(diào)，引起聽(tīng)者的注意。重讀對(duì)于被重讀信息的理解有促進(jìn)作用。程婷［5］的實(shí)驗(yàn)研究表明，重讀可以促進(jìn)信息的激活，在重讀條件下，無(wú)論是重讀的新信息還是舊信息，被試對(duì)重讀內(nèi)容的反應(yīng)時(shí)和正確率都有所提高。另外，李曉慶［6］的研究表明，不一致性重讀(新信息不重讀而重讀舊信息)雖然可以促進(jìn)舊信息的加工，但是會(huì)相對(duì)影響新信息的加工，從而阻礙了對(duì)語(yǔ)句內(nèi)容的理解，也反應(yīng)出重讀對(duì)語(yǔ)篇理解的重要性。有關(guān)眼動(dòng)的研究也驗(yàn)證了以上觀點(diǎn)，當(dāng)新信息重讀而舊信息不重讀時(shí)，被試會(huì)更容易理解聽(tīng)到的內(nèi)容［7］。來(lái)自腦電的研究也表明，重音可以即時(shí)的對(duì)聽(tīng)者的話語(yǔ)理解產(chǎn)生影響［8］，重讀能夠加深聽(tīng)者對(duì)焦點(diǎn)信息的理解［9］。

對(duì)于重讀對(duì)口語(yǔ)理解加工的影響，早在1976年Culter 就曾指出，重讀會(huì)加速焦點(diǎn)信息的加工。那么重讀是如何發(fā)揮作用的呢?對(duì)于重讀影響口語(yǔ)加工的機(jī)制還有不同觀點(diǎn)。一種解釋認(rèn)為重讀直接傳達(dá)語(yǔ)義，與句子的焦點(diǎn)分布有關(guān)。改變重讀模式(改變重讀的位置)，可以改變?cè)捳Z(yǔ)的意思［7，10］，聽(tīng)者對(duì)于重讀和不重讀的信息的加工方式是不同的。對(duì)于重讀的信息，聽(tīng)者是從分析聲音信號(hào)開(kāi)始加工的，是一種自下而上的加工。而對(duì)于不重讀的信息，聽(tīng)者是依據(jù)已經(jīng)激活了的語(yǔ)篇信息來(lái)加工的，是一種自上而下的加工［10］。聽(tīng)眾解釋一個(gè)重讀詞時(shí)把重讀詞作為一個(gè)新信息，而解釋一個(gè)非重讀的詞時(shí)則認(rèn)為是前文內(nèi)容的重復(fù)或與前文相對(duì)應(yīng)的信息。另外一種解釋認(rèn)為重讀可以通過(guò)調(diào)節(jié)一般的認(rèn)知過(guò)程來(lái)影響語(yǔ)言加工的過(guò)程［8］。有研究者認(rèn)為重讀可以調(diào)節(jié)聽(tīng)眾的選擇性注意［11-12］。X Q Li 和G Q Ren［13］以漢語(yǔ)為實(shí)驗(yàn)材料采用腦電技術(shù)研究重音如何影響口語(yǔ)理解，結(jié)果表明，在即時(shí)的語(yǔ)音加工中，重音能夠迅速地調(diào)節(jié)選擇性注意，使被試對(duì)重讀的信息分配更多的認(rèn)知資源，因此能夠影響隨后語(yǔ)義加工的深度和廣度。重讀對(duì)注意力的分配和語(yǔ)義加工影響的程度隨重讀程度的不同而不同。

2 口語(yǔ)韻律中的聲調(diào)

聲調(diào)是韻律的另外一個(gè)重要特征，并且，聲調(diào)還是聲調(diào)語(yǔ)言一個(gè)特有的韻律特征。聲調(diào)就是聲音的高低升降的變化，是音節(jié)的高低升降形式，和音長(zhǎng)、音強(qiáng)都有關(guān)系，但它主要是由音高決定的。

聲調(diào)的作用，首先，聲調(diào)具有區(qū)別語(yǔ)義的作用，音段信息完全相同的兩個(gè)音節(jié)，聲調(diào)不同時(shí)，含義也不同。如:些(xie1)、斜(xie2)、寫(xie3)、謝(xie4)。此外，在詞匯識(shí)別的早期，聲調(diào)就能對(duì)詞匯的語(yǔ)義激活起到制約的作用。曲延軒［14］研究了漢語(yǔ)聽(tīng)覺(jué)中聲調(diào)的加工，利用雙字詞為實(shí)驗(yàn)材料，采用跨通道語(yǔ)義啟動(dòng)范式，首先給被試呈現(xiàn)聲音啟動(dòng)刺激，啟動(dòng)刺激呈現(xiàn)完后在刺激間隔為0ms 的情況下呈現(xiàn)視覺(jué)目標(biāo)刺激。要求被試判斷呈現(xiàn)的目刺激是真詞還是假詞。聲音刺激分為3種類型，分別為與目標(biāo)刺激語(yǔ)義相關(guān)詞，如:奔跑(當(dāng)目標(biāo)詞為跳躍時(shí));與目標(biāo)刺激音段信息相同但聲調(diào)不同的雙字詞，如:條約;控制條件，即語(yǔ)音啟動(dòng)詞與目標(biāo)詞無(wú)任何語(yǔ)義和語(yǔ)音上的關(guān)聯(lián)。結(jié)果在語(yǔ)義相關(guān)詞條件下出現(xiàn)了明顯的啟動(dòng)效應(yīng)，而音段信息相同只是聲調(diào)不同的啟動(dòng)詞并沒(méi)有啟動(dòng)效應(yīng)。音段信息相同聲調(diào)不同并不能激活目標(biāo)詞。說(shuō)明聲調(diào)信息能夠在詞匯識(shí)別中及時(shí)有效的區(qū)分詞匯的語(yǔ)義。此外，一些采用眼動(dòng)技術(shù)的相關(guān)研究也表明，聲調(diào)有制約詞匯語(yǔ)義激活的作用［15-16］。

既然聲調(diào)在詞匯加工過(guò)程中也發(fā)揮著重要作用，那么，與音段信息相比，聲調(diào)作用的大小，發(fā)揮作用的先后順序也引起了廣泛關(guān)注。A Cutler［17］對(duì)于廣東話的研究認(rèn)為，如果假詞和真詞只有聲調(diào)不同時(shí)，被試更多的把假詞誤認(rèn)為真詞，而假詞和真詞的音段信息不同時(shí)被試更容易識(shí)別出來(lái)。因此，認(rèn)為與聲調(diào)相比音段信息在詞匯加工中更重要。聲調(diào)信息的加工要比音段信息困難。在一些快速進(jìn)行的任務(wù)中，聲調(diào)信息還未獲得，被試就已經(jīng)依據(jù)音段信息做出了反應(yīng)。在一項(xiàng)關(guān)于啟動(dòng)的研究中也認(rèn)為元音和輔音在詞匯加工中發(fā)揮了主要作用［18］。而來(lái)自腦電的研究則認(rèn)為聲調(diào)和音段信息發(fā)揮的作用是相同的。趙晶晶等人［19］調(diào)查了漢語(yǔ)口語(yǔ)單音節(jié)詞匯加工的時(shí)間進(jìn)程，使用ERP 來(lái)記錄大腦的即時(shí)反應(yīng)。在實(shí)驗(yàn)中，讓被試比較先出現(xiàn)的目標(biāo)圖畫和后來(lái)出現(xiàn)的目標(biāo)圖畫表達(dá)的是不是同一個(gè)意思。聽(tīng)覺(jué)刺激即目標(biāo)詞在兩個(gè)圖畫之間出現(xiàn)，當(dāng)聲音出現(xiàn)時(shí)被試不需要對(duì)聲音作出反應(yīng)，目標(biāo)詞有五種類型:與第一張圖畫的讀音完全匹配、輔音不匹配、元音不匹配、聲調(diào)不匹配、音節(jié)不匹配。研究表明，3種不匹配(輔音，元音，聲調(diào))引起了相同波幅和潛伏期的N400。然而，音節(jié)的不匹配引發(fā)了一個(gè)波幅更大潛伏期更長(zhǎng)的N400。結(jié)果揭示了音節(jié)在漢語(yǔ)口語(yǔ)識(shí)別中的重要作用，同時(shí)表明聲調(diào)、元音和輔音的作用和時(shí)間進(jìn)程是相似的。Annett Schirmer［20］采用更接近現(xiàn)實(shí)生活中口語(yǔ)表達(dá)的場(chǎng)景，把聲調(diào)放在句子中來(lái)研究，也得出相似的結(jié)論，認(rèn)為聲調(diào)和音段信息發(fā)揮的作用相似，和音段信息同時(shí)發(fā)揮作用。

雖然對(duì)于聲調(diào)發(fā)揮作用的大小和發(fā)揮作用的時(shí)間進(jìn)程問(wèn)題還存在不同的觀點(diǎn)，但是普遍認(rèn)為聲調(diào)在語(yǔ)義加工中發(fā)揮了作用，是不可缺少的。

3 小 結(jié)

韻律信息在口語(yǔ)詞匯識(shí)別和句子語(yǔ)義理解中都發(fā)揮了重要作用。雖然對(duì)于一些背后的加工機(jī)制以及韻律信息作用大小和作用的時(shí)間點(diǎn)等問(wèn)題依然存在爭(zhēng)議，但是，口語(yǔ)韻律的作用越來(lái)越受到人們的認(rèn)可與重視。對(duì)于存在的問(wèn)題仍有待于進(jìn)一步的研究，同時(shí)，對(duì)于口語(yǔ)韻律的研究需要進(jìn)一步的細(xì)化或分類研究，例如，不同類型的語(yǔ)言，聲調(diào)語(yǔ)言和語(yǔ)調(diào)語(yǔ)言;音強(qiáng)重音型語(yǔ)言(英語(yǔ))和音高重音型語(yǔ)言(日語(yǔ))。超音段信息在不同類型的語(yǔ)言中發(fā)揮的作用可能是不同的，例如，雖然同為聲調(diào)語(yǔ)言，但重音在漢語(yǔ)和日語(yǔ)詞匯加工中發(fā)揮的作用可能就是不同的。細(xì)化每類不同語(yǔ)言中各種超音段信息的研究，有利于全面理解超音段信息的作用。

［1］任桂琴，劉穎，于澤.漢語(yǔ)口語(yǔ)韻律的作用及其神經(jīng)機(jī)制［J］.心理科學(xué)進(jìn)展，2012，20(3):338-353

［2］Van Donselaar W，Koster M，Cutler A.Exploring the role of lexical stress in lexical recognition［J］.The Quarterly Journal of Experimental Psychology Section A，2005，58(2):251-273

［3］Soto－Faraco S，Sebastián－Gallés N，Cutler A.Segmental and suprasegmental mismatch in lexical access［J］.Journal of Memory and Language，2001，45(3):412-432

［4］Friedrich C K，Kotz S A，F(xiàn)riederici A D，et al.Pitch modulates lexical identification in spoken word recognition:ERP and behavioral evidence［J］.Cognitive Brain Research，2004，20(2):300-308

［5］程婷，楊玉芳.重讀對(duì)語(yǔ)篇表征中的信息的激活的影響［J］.心理科學(xué)，2008，31(1):83-84

［6］李曉慶，楊玉芳.重讀與信息結(jié)構(gòu)對(duì)語(yǔ)篇理解加工的影響［J］.心理學(xué)報(bào)，2005，37(1):34-40

［7］Dahan D，Tanenhaus M K，Chambers C G.Accent and reference resolution in spoken－ language comprehension［J］.Journal of Memory and Language，2002，47(2):292-314

［8］Li X，Hagoort P，Yang Y.Event－ related potential evidence on the influence of accentuation in spoken discourse comprehension in Chinese［J］.Journal of Cognitive Neuroscience，2008，20(5):906-915

［9］Zhao J J，Yang X H，Yang Y F，et al.The influence of discourse hierarchy on the acoustic manifestation of focus in standard Chinese［J］.Chinese Journal of Acoustics，2011，30(4):437-452

［10］Terken J，Nooteboom S G.Opposite effects of accentuation and deaccentuation on verification latencies for given and new information［J］.Language and Cognitive Processes，1987，2(3-4):145-163

［11］Cutler A.Phoneme－monitoring reaction time as a function of preceding intonation contour［J］.Perception ＆ Psychophysics，1976，20(1):55-60

［12］Sanford A J S，Sanford A J，Molle J，et al.Shallow processing and attention capture in written and spoken discourse［J］.Discourse Processes，2006，42(2):109-130

［13］Li X，Ren G.How and when accentuation influences temporally selective attention and subsequent semantic processing during on－line spoken language comprehension:An ERP study［J］.Neuropsychologia，2012，50(8):1882-1894

［14］曲延軒.漢語(yǔ)聽(tīng)覺(jué)詞匯識(shí)別中的聲調(diào)加工［D］.北京:北京師范大學(xué)，2000

［15］Zhou X.Phonology in lexical processing of Chinese:Priming tone neighbors［J］.Psychological Science，2000，23(2):133-140

［16］唐浩，韓玉昌，于愛(ài)華.漢語(yǔ)雙字詞超音段信息在語(yǔ)義激活中的作用［J］.心理科學(xué)，2013，50(1):4-6

［17］Cutler A，Chen H C.Lexical tone in Cantonese spoken－word processing［J］.Perception ＆ Psychophysics，1997，59(2):165-179

［18］Shuai L，Li B，Gong T.Priming Effects of Tones and Segments in Lexical Processing in Mandarin［C］//Speech Prosody 2012.2012

［19］Zhao J，Guo J，Zhou F，et al.Time course of Chinese monosyllabic spoken word recognition:Evidence from ERP analyses［J］.Neuropsychologia，2011，49(7):1761-1770

［20］Schirmer A，Tang S L，Penney T B，et al.Brain responses to segmentally and tonally induced semantic violations in Cantonese［J］.Journal of Cognitive Neuroscience，2005，17(1):1-12