節(jié)奏在言語(yǔ)加工中的時(shí)間進(jìn)程：來(lái)自元分析的證據(jù) *

晏 芹 張清芳,3

(1 中國(guó)人民大學(xué)心理學(xué)系，北京 100872) (2 中國(guó)人民大學(xué)心理學(xué)系實(shí)驗(yàn)室，北京 100872)(3 中國(guó)人民大學(xué)哲學(xué)與認(rèn)知科學(xué)跨學(xué)科交叉平臺(tái)，北京 100872)

1 引言

韻律是語(yǔ)言的一種音系結(jié)構(gòu)，主要包括語(yǔ)調(diào)、重音、韻律邊界和節(jié)奏等。語(yǔ)調(diào)和重音屬于韻律在頻率域上的特征，表現(xiàn)為聲音頻率和幅度的變化；韻律邊界和節(jié)奏屬于韻律在時(shí)間域上的特征，表現(xiàn)為音系單元長(zhǎng)短的變化。已有研究主要關(guān)注韻律中的語(yǔ)調(diào)、重音、韻律邊界等對(duì)言語(yǔ)加工的影響（方嵐 等, 2021; Tooley et al., 2018），有關(guān)節(jié)奏的研究較少。

言語(yǔ)節(jié)奏指言語(yǔ)聲學(xué)事件在時(shí)間上按照一定規(guī)則進(jìn)行組織的方式（Cason & Sch?n, 2012）。人們能感知節(jié)奏構(gòu)成的節(jié)律時(shí)間信息，形成節(jié)律時(shí)間期待，進(jìn)而將注意力內(nèi)隱地指向與節(jié)律序列時(shí)間模式一致的時(shí)間點(diǎn)，提高對(duì)出現(xiàn)在節(jié)律點(diǎn)上刺激的加工（Teki & Griffiths, 2014）。研究者主要關(guān)注言語(yǔ)節(jié)奏何時(shí)得到加工以及是否和其他語(yǔ)言層面存在相互作用。

在言語(yǔ)加工（尤其是語(yǔ)言理解）領(lǐng)域，一直存在模塊論與交互論的理論之爭(zhēng)。模塊論認(rèn)為在句子理解中句法加工具有相對(duì)獨(dú)立性，句法加工優(yōu)先于語(yǔ)義加工，句法和語(yǔ)義信息獨(dú)立起作用，互不影響（Friederici, 2011; Snedeker & Trueswell,2003）；交互論認(rèn)為在句子加工過(guò)程中，哪一類信息先被提取，哪一類信息就先被用來(lái)進(jìn)行加工，信息間存在相互作用（Clahsen & Felser, 2018;Clifton & Duffy, 2001）。早期理論關(guān)注句法和語(yǔ)義加工的獨(dú)立性，后期加入了韻律信息，考察句法、語(yǔ)義和韻律這三類信息的相互作用（Snedeker &Trueswell, 2003）。 馮勝利（2002）在考察古今漢語(yǔ)的韻律句法現(xiàn)象的基礎(chǔ)上，提出了“韻律制約句法”觀點(diǎn)，認(rèn)為韻律制約句法信息的提取。也有研究者提出韻律并不會(huì)制約句法信息，支持句法優(yōu)先的觀點(diǎn)（Miyamoto & Johnson, 2002）。

綜上，在模塊論和交互論的爭(zhēng)論中，研究者認(rèn)為言語(yǔ)加工涉及句法、語(yǔ)義和韻律信息的提取，韻律是否早于句法加工以及不同層面是否存在相互作用是兩類理論的爭(zhēng)論焦點(diǎn)。本研究整理言語(yǔ)節(jié)奏相關(guān)的事件相關(guān)電位（event-related potential, ERP）研究，通過(guò)元分析進(jìn)行跨實(shí)驗(yàn)總結(jié)，探究影響節(jié)奏加工的關(guān)鍵因素，為兩大理論爭(zhēng)論提供證據(jù)支持。具體研究問(wèn)題包括：言語(yǔ)節(jié)奏影響言語(yǔ)加工的哪些階段，其影響發(fā)生在句法加工之前還是之后？哪些因素調(diào)節(jié)節(jié)奏在言語(yǔ)加工中的作用？言語(yǔ)節(jié)奏加工的機(jī)制是什么？

2 文獻(xiàn)綜述與假設(shè)

以往研究通過(guò)操縱言語(yǔ)節(jié)奏的違反來(lái)探測(cè)節(jié)奏加工的時(shí)間進(jìn)程。操縱方式包括：第一，在字符串或句子情境中操縱關(guān)鍵詞本身節(jié)奏模式的正確性（Domahs et al., 2013）；第二，采用啟動(dòng)范式，操縱目標(biāo)詞節(jié)奏模式和啟動(dòng)節(jié)奏模式一致性（Cason & Sch?n, 2012）。研究發(fā)現(xiàn)言語(yǔ)節(jié)奏的加工體現(xiàn)在早期（N100 和P200）、中期（LAN、P300和N400）和后期腦電成分上（P600 和LPC）。

2.1 言語(yǔ)節(jié)奏加工的時(shí)間進(jìn)程

2.1.1 言語(yǔ)節(jié)奏的早期加工

早期言語(yǔ)節(jié)奏加工主要體現(xiàn)在N100 和P200成分上。與言語(yǔ)節(jié)奏有關(guān)的N100 成分在節(jié)奏違反信息呈現(xiàn)后100～150 ms 左右出現(xiàn)。羅一麗（2018）和Lee 等（2015）以漢語(yǔ)為研究材料，采用短語(yǔ)合理性判斷任務(wù)考察書面閱讀中音節(jié)數(shù)目的搭配方式對(duì)語(yǔ)言理解的影響，發(fā)現(xiàn)當(dāng)音節(jié)數(shù)目的搭配方式違反漢語(yǔ)節(jié)奏模式時(shí)，在中央頭皮區(qū)域誘發(fā)了N100 成分。在不同實(shí)驗(yàn)范式（音樂(lè)啟動(dòng)范式、 純音啟動(dòng)范式）和不同語(yǔ)言中（英語(yǔ)、法語(yǔ)）都誘發(fā)了N100 波（Breen et al., 2019; Cason & Sch?n,2012; Zhang & Zhang, 2019）。

P200 成分一般在言語(yǔ)節(jié)奏違反信息呈現(xiàn)后200～350 ms 左右出現(xiàn)。與N100 相比，P200 更多地出現(xiàn)在需關(guān)注節(jié)奏信息的聽(tīng)覺(jué)實(shí)驗(yàn)中。Henrich等（2014）以英語(yǔ)為研究材料，采用聽(tīng)覺(jué)言語(yǔ)節(jié)奏判斷任務(wù)，發(fā)現(xiàn)當(dāng)相鄰兩個(gè)音節(jié)違反英語(yǔ)中輕重交替的節(jié)奏規(guī)則時(shí)，在額區(qū)誘發(fā)了P200 成分。Marie 等（2011）通過(guò)變化句末單詞的音節(jié)時(shí)長(zhǎng)來(lái)調(diào)節(jié)句子的韻律節(jié)奏，發(fā)現(xiàn)音樂(lè)訓(xùn)練者對(duì)節(jié)奏信息的變化更為敏感，主要表現(xiàn)在P200 波形上。

2.1.2 言語(yǔ)節(jié)奏的中后期加工

與節(jié)奏有關(guān)的中后期腦電成分中，研究者主要關(guān)注的是P300、LAN、N400、P600 和LPC。受注意的調(diào)控，P300 更易出現(xiàn)在需關(guān)注言語(yǔ)節(jié)奏的實(shí)驗(yàn)中。P300 出現(xiàn)的時(shí)間窗口在250～500 ms 或者更大的范圍內(nèi)變化（Polich, 2007），當(dāng)違反節(jié)奏模式的重音出現(xiàn)的位置越早時(shí)，P300 效應(yīng)的時(shí)間窗越靠前（Domahs et al., 2014）。

言語(yǔ)節(jié)奏的違反也會(huì)誘發(fā)一個(gè)主要位于中央-額部區(qū)域的負(fù)波，發(fā)生在節(jié)奏違反信息出現(xiàn)后的300～600 ms 之間（Magne et al., 2016），對(duì)這一負(fù)波的認(rèn)知含義存在爭(zhēng)議。部分研究者認(rèn)為這一負(fù)波是語(yǔ)言非特異性的、基于規(guī)則的錯(cuò)誤檢測(cè)機(jī)制的左前負(fù)波（left anterior negativity, LAN）（Magne et al., 2016）。也有研究者提出這一負(fù)波是語(yǔ)言特異性的、與言語(yǔ)節(jié)奏預(yù)期有關(guān)的N400 成分（Zhang & Zhang, 2019），不合理的節(jié)奏模式會(huì)增加語(yǔ)義通達(dá)和整合難度（Bohn et al., 2013）。由于實(shí)驗(yàn)中的語(yǔ)言類型、任務(wù)要求等會(huì)對(duì)結(jié)果解釋產(chǎn)生影響，對(duì)這一負(fù)波認(rèn)知含義的解釋并不互斥（Magne et al., 2016），本質(zhì)都體現(xiàn)了對(duì)節(jié)奏的加工。

節(jié)奏也參與到言語(yǔ)加工的后期階段。研究發(fā)現(xiàn)，在關(guān)鍵信息出現(xiàn)后500～1200 ms 之間，言語(yǔ)節(jié)奏違反一般會(huì)在中央頂葉區(qū)域誘發(fā)一個(gè)晚期正波（Bohn et al., 2013; McCauley et al., 2013）。對(duì)這一成分的定義在不同的研究方向中存在差異。研究句法和韻律之間關(guān)系的研究者將這一正波認(rèn)定為P600 成分，也有研究者用LPC 指代這一正波。不論將這一正波定義為何種成分，研究者一致認(rèn)同這一正波體現(xiàn)了對(duì)不合理的韻律再分析或修復(fù)的過(guò)程（Bro? et al., 2021; Henrich et al., 2014）。

綜上，節(jié)奏在語(yǔ)言的早期和中后期均可能得到加工。因此提出假設(shè)1：節(jié)奏在言語(yǔ)加工的早期、中后期均發(fā)揮著穩(wěn)定作用。

2.2 潛在的調(diào)節(jié)因素

2.2.1 任務(wù)類型

任務(wù)要求影響大腦對(duì)言語(yǔ)節(jié)奏的追蹤（Luo &Ding, 2020; Zion Golumbic et al., 2013）。研究者主要采用外顯任務(wù)、內(nèi)隱任務(wù)以及混合任務(wù)探究節(jié)奏在言語(yǔ)加工中的作用，混合任務(wù)是指同時(shí)包含節(jié)奏和其他語(yǔ)言層面信息的判斷任務(wù)。研究表明，當(dāng)被試的注意力集中在言語(yǔ)節(jié)奏方面時(shí)，對(duì)節(jié)奏的加工程度會(huì)更深（Luo & Zhou, 2010; Magne et al., 2007），混合任務(wù)對(duì)言語(yǔ)節(jié)奏加工的作用強(qiáng)度可能介于外顯和內(nèi)隱任務(wù)之間。因此提出假設(shè)2：任務(wù)類型調(diào)節(jié)言語(yǔ)節(jié)奏在言語(yǔ)加工過(guò)程中的作用。

2.2.2 呈現(xiàn)通道

早期研究主要從聽(tīng)覺(jué)通道來(lái)探究言語(yǔ)節(jié)奏信息加工（Domahs et al., 2008），后來(lái)也從視覺(jué)通道（Breen et al., 2019）、視聽(tīng)通道來(lái)探究節(jié)奏信息的加工（Fotidzis et al., 2018）。相較于視覺(jué)中的韻律信息，口語(yǔ)韻律能讓聽(tīng)者感知到語(yǔ)流上輕重緩急的變化，口語(yǔ)中的韻律信息所起的作用更明顯（Holcomb et al., 1992），視聽(tīng)通道下的節(jié)奏效應(yīng)可能介于二者之間。因此提出假設(shè)3：呈現(xiàn)通道調(diào)節(jié)言語(yǔ)節(jié)奏在言語(yǔ)加工過(guò)程中的作用。

2.2.3 言語(yǔ)節(jié)奏類型

言語(yǔ)節(jié)奏類型會(huì)影響語(yǔ)音處理（Li et al.,2019）。不同言語(yǔ)節(jié)奏類型在音節(jié)突出可變性方面有差異，重音計(jì)時(shí)語(yǔ)言比音節(jié)計(jì)時(shí)語(yǔ)言有更大的可變性（Lee & Todd, 2004），莫拉計(jì)時(shí)語(yǔ)言和音節(jié)計(jì)時(shí)語(yǔ)言的可變性類似（Kubozono, 2015）。音節(jié)突出的可變性越低，言語(yǔ)節(jié)奏的預(yù)期效應(yīng)可能就越強(qiáng)（Schmidt-Kassow & Kotz, 2009a）。因此提出假設(shè)4：言語(yǔ)節(jié)奏類型調(diào)節(jié)言語(yǔ)節(jié)奏在言語(yǔ)加工過(guò)程中的作用。

3 研究方法

3.1 文獻(xiàn)搜集與納入標(biāo)準(zhǔn)

文獻(xiàn)檢索涵蓋中英文文獻(xiàn)，檢索時(shí)間截止到2022 年5 月。中文檢索使用中國(guó)知網(wǎng)、萬(wàn)方、維普數(shù)據(jù)庫(kù)，檢索詞為：節(jié)奏、節(jié)奏模式、韻律、腦電、語(yǔ)言、成人；英文檢索使用 EBSCO，PubMed，ISI Web，ProQuest 數(shù)據(jù)庫(kù)，檢索詞為：rhythm，metrical pattern，prosodic pattern，ERP，evoked potentials，language，adults。

文獻(xiàn)篩選標(biāo)準(zhǔn)為：（1）言語(yǔ)節(jié)奏有關(guān)的實(shí)證研究；（2）提供樣本量、均值、標(biāo)準(zhǔn)差，t值、F值等信息；（3）與言語(yǔ)節(jié)奏有關(guān)的ERP 成分對(duì)應(yīng)的時(shí)間窗零點(diǎn)為違反言語(yǔ)節(jié)奏出現(xiàn)的時(shí)間點(diǎn)。納入符合標(biāo)準(zhǔn)的文獻(xiàn)36 篇，共43 個(gè)獨(dú)立效應(yīng)量，樣本量為885。

3.2 文獻(xiàn)編碼

文獻(xiàn)編碼包括：作者和年份、樣本量、語(yǔ)言、節(jié)奏類型、實(shí)驗(yàn)任務(wù)、任務(wù)類型、呈現(xiàn)通道、時(shí)間窗、效應(yīng)值g。在任務(wù)類型編碼中，如實(shí)驗(yàn)僅要求關(guān)注言語(yǔ)節(jié)奏信息，編碼為外顯任務(wù)；如要求關(guān)注言語(yǔ)節(jié)奏之外的信息，編碼為內(nèi)隱任務(wù)；如需同時(shí)關(guān)注言語(yǔ)節(jié)奏和其他語(yǔ)言層面信息，編碼為混合任務(wù)。

效應(yīng)值計(jì)算：（1）獨(dú)立效應(yīng)量只編碼一次，若同一文獻(xiàn)存在多個(gè)獨(dú)立效應(yīng)量，則分別編碼。（2）用于計(jì)算效應(yīng)量的數(shù)據(jù)若以多種情況（如左半球和右半球）分開(kāi)報(bào)告，則多組數(shù)據(jù)合并成一組數(shù)據(jù)。（3）當(dāng)節(jié)奏違反條件比對(duì)照條件誘發(fā)更正的波幅，效應(yīng)值為正；節(jié)奏違反條件比對(duì)照條件誘發(fā)更負(fù)的波幅，效應(yīng)值為負(fù)。

3.3 元分析過(guò)程

效應(yīng)量計(jì)算：選用Hedge’sg計(jì)算效應(yīng)值（Hedges & Olkin, 1985）。當(dāng)Hedge’sg為0.2、0.5 和0.8 時(shí)，分別代表小、中、大效應(yīng)量（Cohen,1988）。

模型選定與異質(zhì)性分析：根據(jù)異質(zhì)性檢驗(yàn)確定模型選擇。當(dāng)Q檢驗(yàn)顯著或I2值高于25%，表明數(shù)據(jù)呈異質(zhì)性，采用隨機(jī)效應(yīng)模型；反之，采用固定效應(yīng)模型（Higgins et al., 2003）。

發(fā)表偏差檢驗(yàn)：采用Egger’s 回歸檢驗(yàn)法評(píng)估是否存在發(fā)表偏倚。若結(jié)果不顯著，說(shuō)明發(fā)表偏倚可以忽略（Egger et al., 1997）。

所有數(shù)據(jù)采用R.4.0.5 的metafor 數(shù)據(jù)包執(zhí)行。

4 結(jié)果

4.1 早期腦電成分

第一，異質(zhì)性檢驗(yàn)結(jié)果表明，言語(yǔ)節(jié)奏N100和P200 效應(yīng)的Q檢驗(yàn)不顯著[N100:Q(5)=1.98,p=0.85; P200:Q(5)=7.11,p=0.21]，異質(zhì)性較低（N100:I2=0%, P200:I2=29.7%），故采用固定效應(yīng)模型。

第二，進(jìn)行發(fā)表偏差檢驗(yàn)。Egger’s 的檢驗(yàn)結(jié)果表明，言語(yǔ)節(jié)奏N100 和P200 效應(yīng)均不存在嚴(yán)重的發(fā)表偏差（N100:t=-0.45,p=0.68; P200:t=1.88,p=0.13）。

第三，進(jìn)行主效應(yīng)檢驗(yàn)。結(jié)果顯示言語(yǔ)節(jié)奏的N100 和P200 的效應(yīng)量均為大效應(yīng)量（N100:g=-0.87, 95% CI=[-1.15, -0.60],p＜0.001; P200:g=0.91, 95% CI=[0.66, 1.17],p＜0.001）。因每個(gè)水平下的效應(yīng)量數(shù)目不滿足不少于4 個(gè)的標(biāo)準(zhǔn)（Takacs &Kassai, 2019），故不進(jìn)行調(diào)節(jié)變量分析。

4.2 中期腦電成分

第一，異質(zhì)性檢驗(yàn)結(jié)果表明，言語(yǔ)節(jié)奏LAN和P300 效應(yīng)的Q檢驗(yàn)不顯著[LAN:Q(8)=3.86,p=0.87; P300:Q(10)=4.35,p=0.93]，無(wú)異質(zhì)性（LAN和P300:I2=0%）；言語(yǔ)節(jié)奏N400 效應(yīng)的Q檢驗(yàn)顯著[Q(25)=38.26,p=0.04]，存在異質(zhì)性（I2=34.7%）。因此，采用固定效應(yīng)模型分析言語(yǔ)節(jié)奏LAN 和P300 效應(yīng)，采用隨機(jī)效應(yīng)模型分析言語(yǔ)節(jié)奏N400 效應(yīng)。

第二，進(jìn)行發(fā)表偏差檢驗(yàn)。Egger’s 檢驗(yàn)結(jié)果表明，言語(yǔ)節(jié)奏LAN、P300 和N400 效應(yīng)均不存在嚴(yán)重的發(fā)表偏差（LAN:t=0.86,p=0.42; P300:t=-0.73,p=0.48; N400:t=-0.61,p=0.55）。

第三，進(jìn)行主效應(yīng)檢驗(yàn)。結(jié)果顯示言語(yǔ)節(jié)奏LAN、P300 和N400 的效應(yīng)量均為大效應(yīng)量（LAN:g=-1.01, 95% CI=[-1.25, -0.83],p＜0.001; P300:g=1.11, 95% CI=[0.91, 1.31],p＜0.001; N400:g=-0.88,95% CI=[-1.04, -0.71],p＜0.001）。

第四，對(duì)言語(yǔ)節(jié)奏N400 效應(yīng)進(jìn)行調(diào)節(jié)變量分析。由于節(jié)奏類型下的莫拉計(jì)時(shí)僅有兩個(gè)效應(yīng)量，因而在節(jié)奏類型亞組分析時(shí)僅納入重音計(jì)時(shí)和音節(jié)計(jì)時(shí)。

亞組分析結(jié)果表明，任務(wù)類型的調(diào)節(jié)作用邊緣顯著[Q(2)=5.47,p=0.06]，三種任務(wù)類型效應(yīng)量均為大效應(yīng)量（外顯任務(wù):g=-1.04; 混合任務(wù):g=-0.80; 內(nèi)隱任務(wù):g=-0.73），外顯任務(wù)對(duì)言語(yǔ)節(jié)奏N400 效應(yīng)的影響顯著大于內(nèi)隱任務(wù)的影響（p=0.04），外顯任務(wù)對(duì)言語(yǔ)節(jié)奏的N400 效應(yīng)的影響與混合任務(wù)的影響差異不顯著（p=0.26），混合任務(wù)對(duì)言語(yǔ)節(jié)奏N400 效應(yīng)的影響與內(nèi)隱任務(wù)的影響差異不顯著（p=0.68）。言語(yǔ)節(jié)奏類型的調(diào)節(jié)作用不顯著[Q(1)=0.22,p=0.64]，每種節(jié)奏類型效應(yīng)量均為大效應(yīng)量（重音計(jì)時(shí):g=-0.93; 音節(jié)計(jì)時(shí):g=-0.84）；呈現(xiàn)通道的調(diào)節(jié)作用不顯著[Q(2)=3.53,p=0.17]，其中聽(tīng)覺(jué)和視聽(tīng)通道的效應(yīng)量是大效應(yīng)量（聽(tīng)覺(jué)通道:g=-1.01; 視聽(tīng)通道:g=-0.96），視覺(jué)通道的效應(yīng)量是中等效應(yīng)量（視覺(jué)通道:g=-0.58）。

4.3 后期腦電成分

基于P600 和LPC 認(rèn)知含義的一致性，本研究將言語(yǔ)節(jié)奏P600 和LPC 有關(guān)的文獻(xiàn)進(jìn)行合并，統(tǒng)稱為與言語(yǔ)節(jié)奏有關(guān)的晚期正成分。

第一，異質(zhì)性檢驗(yàn)結(jié)果表明，與言語(yǔ)節(jié)奏有關(guān)的晚期正成分的Q檢驗(yàn)不顯著[Q(19)=14.80,p=0.74]，無(wú)異質(zhì)性（I2=0%），故采用固定效應(yīng)模型。

第二，進(jìn)行發(fā)表偏差檢驗(yàn)。Egger’s 的檢驗(yàn)結(jié)果表明，與言語(yǔ)節(jié)奏違反有關(guān)的晚期正成分不存在嚴(yán)重的發(fā)表偏差（t=1.46,p=0.16）。

第三，進(jìn)行主效應(yīng)檢驗(yàn)。結(jié)果顯示與言語(yǔ)節(jié)奏違反有關(guān)的晚期正成分的效應(yīng)量為大效應(yīng)量（g=0.95, 95% CI=[0.81, 1.10],p＜0.001）。

第四，進(jìn)行調(diào)節(jié)變量分析。由于刺激類型下的“視聽(tīng)通道”僅有一個(gè)效應(yīng)量，因而在刺激類型亞組分析時(shí)，僅納入“聽(tīng)覺(jué)”和“視覺(jué)”這兩種類型。

亞組分析結(jié)果表明，任務(wù)類型的調(diào)節(jié)作用不顯著[Q(2)=3.70,p=0.16]，三種任務(wù)類型效應(yīng)量均為大效應(yīng)量（外顯任務(wù):g=1.07; 混合任務(wù):g=0.85;內(nèi)隱任務(wù):g=0.74）；言語(yǔ)節(jié)奏類型的調(diào)節(jié)作用不顯著[Q(1)=0.19,p=0.67]，兩種節(jié)奏類型效應(yīng)量均為大效應(yīng)量（重音計(jì)時(shí):g=0.93; 音節(jié)計(jì)時(shí):g=1.00）；呈現(xiàn)通道的調(diào)節(jié)作用不顯著[Q(1)=0.05,p=0.82]，聽(tīng)覺(jué)通道和視聽(tīng)通道的效應(yīng)量均為大效應(yīng)量（聽(tīng)覺(jué)通道:g=0.94; 視覺(jué)通道:g=0.99）。

5 討論

本研究采用元分析獲得以下結(jié)果：（1）節(jié)奏在言語(yǔ)加工的早期、中期和后期具有穩(wěn)定且大的效應(yīng)量；（2）任務(wù)類型調(diào)節(jié)了節(jié)奏對(duì)N400 成分波幅的影響；（3）節(jié)奏類型和呈現(xiàn)通道的調(diào)節(jié)作用均不顯著。以上結(jié)果表明言語(yǔ)節(jié)奏影響了言語(yǔ)加工的早期和中后期過(guò)程，這種影響受任務(wù)類型的調(diào)節(jié)。

5.1 節(jié)奏信息影響言語(yǔ)加工的時(shí)間進(jìn)程

言語(yǔ)節(jié)奏預(yù)期違反在早期和中后期均發(fā)揮穩(wěn)定作用，與前人研究一致（Magne et al., 2007），說(shuō)明節(jié)奏影響了言語(yǔ)加工的早期和中后期過(guò)程，驗(yàn)證了假設(shè)1。

對(duì)節(jié)奏信息的監(jiān)測(cè)在言語(yǔ)加工的早期階段就已經(jīng)穩(wěn)定發(fā)生，節(jié)奏自身的特性是言語(yǔ)節(jié)奏早期效應(yīng)發(fā)生的前提。相較于其他韻律特征，言語(yǔ)節(jié)奏整體結(jié)構(gòu)較簡(jiǎn)單，在自然語(yǔ)流中保持相對(duì)穩(wěn)定性（Poeppel & Assaneo, 2020），這種穩(wěn)定性有助于形成特定的概率信息（Saffran et al., 1996），使大腦很早就能監(jiān)測(cè)到節(jié)奏的違反（Jones, 2019）。

本研究還發(fā)現(xiàn)節(jié)奏信息影響了言語(yǔ)加工的中后期過(guò)程。在言語(yǔ)加工的中后期階段，主要是對(duì)不同層面，如句法、語(yǔ)義、韻律等信息進(jìn)行整合的過(guò)程（Eckstein & Friederici, 2005），由于節(jié)奏信息擔(dān)負(fù)著語(yǔ)義整合、句法建構(gòu)等重要的語(yǔ)言學(xué)功能，節(jié)奏模式的違反會(huì)制約中后期的語(yǔ)義和句法整合（Magne et al., 2007; Roncaglia-Denissen et al., 2013）。

言語(yǔ)節(jié)奏加工是發(fā)生在句法加工之前還是之后？研究表明，句法信息在早期階段會(huì)得到加工，主要表現(xiàn)在150～250 ms左右出現(xiàn)的左前負(fù)波（early left anterior negativity）（徐曉東, 劉昌,2008）。本研究發(fā)現(xiàn)，言語(yǔ)節(jié)奏信息在更早的階段（表現(xiàn)為N100 成分）就已經(jīng)得到了穩(wěn)定加工。現(xiàn)有腦電研究發(fā)現(xiàn)，在時(shí)間進(jìn)程上言語(yǔ)節(jié)奏信息的加工要早于句法信息加工（Schmidt-Kassow & Kotz,2009a），因而本研究認(rèn)為言語(yǔ)節(jié)奏的影響發(fā)生在句法加工之前。

此外，研究表明節(jié)奏會(huì)影響語(yǔ)義（Li et al.,2019）和句法信息的加工（Roncaglia-Denissen et al.,2013）。Magne 等（2007）提出如果輸入詞的節(jié)奏信息違反會(huì)增加語(yǔ)義整合代價(jià)。Schmidt-Kassow 和Kotz（2009a）發(fā)現(xiàn)言語(yǔ)節(jié)奏的違反會(huì)影響句法加工。鑒于對(duì)韻律信息發(fā)揮作用的時(shí)間點(diǎn)以及韻律是否和其他層面之間有交互作用是模塊論和交互論的爭(zhēng)論點(diǎn)，本研究發(fā)現(xiàn)的穩(wěn)定的早期節(jié)奏效應(yīng)以及現(xiàn)有節(jié)奏和句法加工時(shí)間進(jìn)程的結(jié)果，支持交互論的觀點(diǎn)。

5.2 任務(wù)類型對(duì)言語(yǔ)加工過(guò)程的影響

任務(wù)類型的調(diào)節(jié)作用顯著，支持假設(shè)2。任務(wù)類型的調(diào)節(jié)作用主要表現(xiàn)在言語(yǔ)節(jié)奏N400 效應(yīng)上。外顯和內(nèi)隱任務(wù)的調(diào)節(jié)強(qiáng)度不同，外顯任務(wù)下的言語(yǔ)節(jié)奏N400 效應(yīng)更強(qiáng)，這可能是由于外顯任務(wù)能調(diào)動(dòng)更多注意資源去處理節(jié)奏信息（Magne et al., 2007）。此外，混合任務(wù)的平均效應(yīng)量介于外顯和內(nèi)隱任務(wù)之間，這與預(yù)期一致，這可能是由于混合任務(wù)中需要被試同時(shí)關(guān)注節(jié)奏和其他語(yǔ)言層面的信息，因而分配給節(jié)奏的注意就相對(duì)有限。

呈現(xiàn)通道的調(diào)節(jié)作用均不顯著，未能支持假設(shè)3，這表明言語(yǔ)節(jié)奏效應(yīng)存在跨通道的一致性。Fodor（2002）提出“內(nèi)隱韻律假設(shè)”，認(rèn)為韻律信息在視覺(jué)通道中也可以被激活，在默讀狀態(tài)下讀者會(huì)將默認(rèn)的韻律輪廓投射到所看到的詞或句子信息上。核磁研究發(fā)現(xiàn)，聽(tīng)覺(jué)和視覺(jué)韻律信息共享神經(jīng)基礎(chǔ)（Yao et al., 2011）。未來(lái)可以采用同種語(yǔ)言材料，利用核磁的手段驗(yàn)證節(jié)奏是否具有跨通道的一致性。

言語(yǔ)節(jié)奏類型的調(diào)節(jié)作用均不顯著，未能支持假設(shè)4，從兩點(diǎn)探討這一結(jié)果。第一，言語(yǔ)節(jié)奏效應(yīng)可能存在跨言語(yǔ)節(jié)奏類型的一致性。Nolan 和Asu（2009）采用成對(duì)變異指數(shù)（Pairwise Variability Index）區(qū)分言語(yǔ)節(jié)奏類型，發(fā)現(xiàn)語(yǔ)言可以同時(shí)具有重音計(jì)時(shí)和音節(jié)計(jì)時(shí)的特點(diǎn)，語(yǔ)言間的節(jié)奏規(guī)律是類似的（Poeppel & Assaneo, 2020）。第二，要對(duì)節(jié)奏類型做更細(xì)致的區(qū)分才能體現(xiàn)出節(jié)奏類型的調(diào)節(jié)作用。Gasparini 等（2021）采用元分析來(lái)探究節(jié)奏在嬰兒語(yǔ)言區(qū)分中的作用，結(jié)果發(fā)現(xiàn)相較于節(jié)奏類型，元音和輔音的間隔變異性更能預(yù)測(cè)嬰兒的語(yǔ)言辨別能力。未來(lái)研究可以從以上兩種視角驗(yàn)證節(jié)奏類型在言語(yǔ)節(jié)奏加工中的作用。

5.3 言語(yǔ)節(jié)奏加工的內(nèi)在機(jī)制

本研究表明在言語(yǔ)加工過(guò)程中，對(duì)節(jié)奏的加工在言語(yǔ)的早期和中后期過(guò)程中均穩(wěn)定存在，注意和預(yù)期是言語(yǔ)節(jié)奏加工的內(nèi)在神經(jīng)機(jī)制。研究者主要采用動(dòng)態(tài)注意理論（dynamic attending theory）來(lái)說(shuō)明注意在言語(yǔ)節(jié)奏加工中的作用。動(dòng)態(tài)注意理論認(rèn)為，大腦固有的內(nèi)源性神經(jīng)振蕩會(huì)與外部節(jié)律性信息發(fā)生夾帶（entrainment），當(dāng)外界出現(xiàn)具有節(jié)律性的刺激時(shí)，內(nèi)部神經(jīng)振蕩會(huì)以與外部刺激相似的振蕩展開(kāi)，形成同步振蕩（Jones,2019; Large & Jones, 1999）。當(dāng)注意按照一定的周期波動(dòng)時(shí)（Schmidt-Kassow & Kotz, 2008），便形成了注意節(jié)律。當(dāng)外界刺激停止呈現(xiàn)時(shí)，內(nèi)部注意振蕩模式也能夠按照內(nèi)外夾帶的振蕩形式保持一段時(shí)間（Canette et al., 2020）。

另一種解釋是：知覺(jué)言語(yǔ)節(jié)奏后會(huì)產(chǎn)生預(yù)期，進(jìn)而促進(jìn)對(duì)言語(yǔ)的加工。預(yù)期機(jī)制在語(yǔ)言的不同層面，如語(yǔ)音、語(yǔ)義和句法等層面均存在（Beier & Ferreira, 2018; Emmendorfer et al., 2020;Rothermich & Kotz, 2013），其中對(duì)節(jié)奏的處理包括根據(jù)聽(tīng)覺(jué)事件的時(shí)間層次結(jié)構(gòu)建立預(yù)期（Emmendorfer et al., 2020），感知到的節(jié)奏和預(yù)期的節(jié)奏會(huì)形成預(yù)測(cè)誤差，進(jìn)而會(huì)被用來(lái)更新感知到的節(jié)奏（Bouwer & Honing, 2015）。綜上，注意和預(yù)期是言語(yǔ)節(jié)奏加工的內(nèi)在機(jī)制。

5.4 不足與展望

首先，由于早期成分的總效應(yīng)量數(shù)目不滿足調(diào)節(jié)變量的分析條件（Takacs & Kassai, 2019），未來(lái)需在研究進(jìn)一步豐富后，探究任務(wù)類型是否影響與言語(yǔ)節(jié)奏有關(guān)的早期成分。其次，在調(diào)節(jié)變量檢驗(yàn)中，本研究?jī)H對(duì)言語(yǔ)節(jié)奏類型、任務(wù)類型和呈現(xiàn)通道這三個(gè)變量進(jìn)行檢驗(yàn)，未來(lái)研究可以考察其他潛在變量，如訓(xùn)練因素。最后，本研究主要從言語(yǔ)節(jié)奏的時(shí)間進(jìn)程為交互論提供支持，未來(lái)可以運(yùn)用元分析手段對(duì)比言語(yǔ)節(jié)奏和其他語(yǔ)言層面的發(fā)生時(shí)間先后，為交互論提供更直接的證據(jù)。

6 結(jié)論

本研究支持言語(yǔ)加工交互論的觀點(diǎn)。具體而言，言語(yǔ)節(jié)奏在言語(yǔ)加工的早期已經(jīng)開(kāi)始發(fā)揮作用，言語(yǔ)節(jié)奏加工早于句法信息加工；在言語(yǔ)加工的中后期階段，言語(yǔ)節(jié)奏與語(yǔ)義和句法發(fā)生交互。任務(wù)類型調(diào)節(jié)言語(yǔ)節(jié)奏對(duì)言語(yǔ)加工過(guò)程的影響，在外顯任務(wù)中，言語(yǔ)節(jié)奏對(duì)言語(yǔ)加工過(guò)程的影響大于內(nèi)隱任務(wù)和混合任務(wù)，注意和預(yù)期是言語(yǔ)節(jié)奏加工的內(nèi)在機(jī)制。