語境信息對面部表情加工的影響

4

(1.寧波大學心理學系暨研究所，寧波 315211；2.菏澤學院，菏澤 274015；3.中國科學技術大學人文與社會科學學院，合肥 230022；4.深圳大學心理學院，深圳市情緒與社會認知科學重點實驗室(深圳大學),深圳 518060)

1 引 言

語境(language context)是由語言文字描述的情境，即描述某一情境的一句話或一段文字。近年來研究發現，面部表情的識別不僅依賴于面部本身固有的構型特征，面孔所處的背景如場景、身體姿勢、聲音、語言文字等同樣影響面部表情的識別，具體表現為背景與面孔情緒一致時的促進作用以及不一致時的阻礙作用，即面部表情識別中的背景效應(context effects)(Ran,Aviezer,& Bentin,2013)。語境作為背景信息的一種，其情緒屬性影響面部表情的識別，個體對情緒面孔的知覺一定程度上依賴于對語義信息自上而下的加工(Lindquist,2017)。除了情緒以外，語境中還存在其他信息，如語義的自我相關性。有研究發現，語境信息的情緒性和自我相關性均影響了個體對面部表情的加工(Wieser et al.,2014)。然而以往的研究大多分離了語境的情緒性和自我相關性，僅獨立探討情緒信息或者自我相關性信息對面孔加工的影響(Diéguez-Risco et al.,2015)。本研究使用具有情緒性與自我相關性的語境材料，探討語境信息對中性情緒面孔和不同情緒強度恐懼面孔識別的影響，以揭示面部表情加工中情緒性信息和自我相關性信息的作用。

以往研究者認為，面孔所表達的情緒意義與某一面部構型特征有著穩固的聯系，面部構型特征是影響面部表情識別的主要因素(Ekman,1993)。因此，個體對于面部表情的識別依靠對面部構型自下而上的加工。作為背景因素之一，語境提供了更加復雜的信息，個體需要調動更多的認知資源對其進行加工。因此，個體對面部表情的識別不僅包括對面部構型的自下而上的加工，還受到了來自語境情緒信息的自上而下加工的影響(Diéguez-Risco et al.,2015;Schwarz et al.,2013)。Wieser等人(2014)發現，當中性情緒面孔呈現于情緒性語境之后，被試更傾向于對中性情緒面孔做出與情緒語境一致的積極或消極評價。Diéguez-Risco等人(2015)考察了語境信息對快樂和憤怒面孔加工過程的影響，結果發現語境與面孔情緒的一致性影響了面孔加工的編碼與情緒評估。研究者認為，對語境情緒性信息的處理能夠促使個體對面部表情進行快速、準確的識別，這是自上而下加工的作用(Lindquist,2017)。

除情緒屬性外，語境中還包含了自我相關的信息，這種信息具有較高的社會價值和適應價值，更容易被個體識別和加工(Dar et al.,2016)。個體對自我相關信息的加工速度更快，且能喚起更強的情緒反應(Kim,2012)。與評估他人的情緒相比，評估自我情緒引起情緒相關腦區更強的活動(Herbert et al.,2013)。另外，語境的情緒性信息和自我相關性信息存在相互影響。Herbert等人(2013)的研究發現，在自我相關情緒語境的啟動下，個體對情緒面孔的喚醒度評分更高。Wieser等人(2014)發現，作為情緒敏感腦電指標的EPN和LPP成分同樣會受到自我相關性的影響。相比于他人相關語境，自我相關語境下的面孔誘發了更加顯著的EPN和LPP成分。另外，相比于他人相關語境，個體對自我相關語境下的面孔情緒評分更極端。總之，以往的研究表明，語境的自我相關性是一個重要變量，調節了個體對面部表情的行為和神經生理反應。但該類研究大多獨立探討情緒或自我相關性信息對面孔識別的作用，尚不清楚兩者如何共同調節面部表情的探測。因此，本研究采用結合了情緒性和自我相關性的語境材料，探討其對面部表情識別的影響。

有研究發現，在面部表情的強度越低，情緒意義越模糊的情況下，背景情緒性信息更容易影響面部表情的識別(Leleu et al.,2015)。中性面孔也是一種特殊的模糊情緒面孔，當中性面孔與積極、消極情緒語句配對呈現時，個體對中性面孔的情緒識別會受到語句情緒性的影響，而將其判斷為更加積極或更加消極(Wieser et al.,2014)。然而，語境情緒性與自我相關性信息的整合在中性面孔識別中發揮了怎樣的作用，目前并不清楚。因此，本研究實驗1通過操縱語境情緒性和自我相關性信息，觀測語境信息對無明確情緒意義的中性面孔識別的影響，并提出假設：語境情緒信息對中性面孔的識別起到情緒誘發的作用，并更多影響效價評分；相比于他人相關，當語境與自我相關時，個體對面部表情的效價評分更極端、喚醒度評分更高。

實驗1主要探討了語境對中性面孔加工的影響。相比于中性面孔，情緒性面孔在構型特征上存在更多變化。因此，在情緒面孔識別過程中，來自語境信息的自上而下加工的影響同樣值得關注。在現實生活中，面部表情從出現到消失是一個逐漸變化的過程。在面孔情緒強度增加，情緒意義逐漸清晰的過程中，語境情緒性和自我相關性信息如何影響面部表情的識別仍有待考察。因此，實驗2在實驗1的基礎上，進一步探討了語境信息在蘊含情緒信息的漸變面孔情緒識別中的作用。作為負性情緒面孔的一種，恐懼面孔更容易吸引注意(Taylor & Barton,2015)。Neath-Tavares和Itier(2016)認為，這是由于恐懼表情包含著潛在的威脅信息，對于個體的生存具有重要意義。國內外關于面孔表情加工模型的相關研究均發現，在對面孔進行結構化編碼過程中，與恐懼情緒相關的突顯刺激會被快速的提取(Adolphs,2002;張丹丹,羅文波,羅躍嘉,2013)。基于恐懼面孔具有負性情緒突出、吸引注意、易于提取等特點，本研究實驗2將使用漸變面孔(morphed face)，通過操縱面孔恐懼情緒的強度，探討語境信息對漸變面部表情加工的影響，并提出假設：語境的情緒性信息影響漸變恐懼面部表情識別，當語境情緒與面部表情的情緒類型一致時，語境信息會促進個體對面部表情的加工；語境情緒和語境自我相關性可能在不同方面影響了個體對漸變恐懼面孔的識別。

綜上，本研究通過兩個實驗來探討語境情緒及其自我相關性在面部表情加工中的作用。由于實驗1中使用的均為中性情緒面孔，故采用面孔情緒效價喚醒度判斷任務來考察語境信息的情緒性和自我相關性對中性面孔的效價和喚醒度評定的影響。實驗2以漸變恐懼面孔為材料，由于漸變情緒面孔本身識別的難度更大，為節省認知資源并更直接地探討語境信息的影響，實驗2采用了情緒類型判斷任務。

2 實驗1 語境信息對中性情緒面孔加工的影響

2.1 方法

2.1.1 被試

招募某大學在校大學生28名參加實驗(其中女生15名)，平均年齡為19.85歲(SD=1.16歲)，所有被試視力或矯正視力正常，右利手，無類似實驗的經歷，無精神或心理疾病。所有被試均自愿參加實驗，實驗后獲得一定報酬。

2.1.2 實驗材料

實驗中使用的面部表情圖片選自中國化面孔情緒圖片系統(Chinese Facial Affective Picture System,CAFPS)，選取中性面孔40張，男女各半(龔栩,黃宇霞,王妍,羅躍嘉,2011)。圖片統一采用PhotoShop CS 6軟件進行黑白處理，所有面孔材料去除其頭發、耳朵等，僅保留面孔內特征(如眼鼻口、臉頰等)。

2.1.3 實驗設計與程序

采用2(語境情緒類型：積極/消極)×2(語境自我相關性：自我相關/他人相關)被試內實驗設計，因變量為被試對面孔刺激的效價和喚醒度9點評分結果。

本實驗使用E-prime 2.0軟件進行編程。實驗指導語為“在屏幕上會隨機呈現描述某人的一句話和這個人的面孔，請您對這張面孔的情緒效價和自己的情緒被喚醒程度進行評分”。具體流程見圖1。該實驗一共包括8個練習試次和120個正式實驗試次，每種實驗條件下面孔與句子隨機組合呈現。練習階段所用刺激材料不在正式實驗階段中出現。

圖1 實驗1流程圖

2.2 數據分析與結果

所有數據采用SPSS 21.0軟件整理與分析，并采用JASP軟件進行貝葉斯因子的分析。不同語境信息下中性面孔的情緒效價和喚醒度評分的描述統計結果見表1。

表1 不同語境信息下中性面孔的效價和喚醒度評分(n=28)(M±SD)

以上結果表明，語境的情緒性和自我相關性信息在不同方面影響中性面部表情的識別。語境的情緒類型影響了效價評定，與積極語境配對呈現的中性面孔效價評分顯著高于與消極語境配對呈現的評分。語境的自我相關性影響了喚醒度評定，與自我相關語境配對呈現的中性面孔喚醒度評分顯著高于與他人相關語境配對呈現的評分。

3 實驗2 語境信息對不同情緒強度恐懼面孔加工的影響

3.1 方法

3.1.1 被試

招募某大學在校大學生31名參加實驗(其中女生20名)，平均年齡為20.02歲(SD=1.03歲)，所有被試視力或矯正視力正常，右利手，無類似實驗的經歷，以往無精神或心理疾病。所有被試均自愿參加實驗，實驗后獲得一定報酬。

3.1.2 實驗材料

語境材料為實驗1自編情境句子中的16個句子，其中自我相關積極語境、他人相關積極語境、自我相關消極語境、他人相關消極語境各4句。

圖2 漸變恐懼情緒面孔樣例

3.1.3 實驗設計與程序

采用2(語境情緒類型:積極/消極)×2(語境自我相關性:自我相關/他人相關)×6(面孔情緒強度:0%、20%、40%、60%、80%、100%)被試內實驗設計，因變量為被試報告為“恐懼”面孔的比率。

在本實驗中，刺激呈現在屏幕中央，背景為白色。實驗中首先呈現500ms的注視點“+”，接著呈現3000ms的語境材料，之后呈現2000ms的面孔刺激，不同情緒強度的面孔隨機呈現。然后呈現500ms的掩蔽刺激，最后出現反應屏，被試需對剛剛出現的面孔的表情進行判斷，并進行按鍵反應(中性“F”鍵、恐懼“J”鍵)。待被試按鍵反應后，隨機間隔600～800ms，開始下一個試次，具體流程見圖3。實驗二共包括8個練習試次和384個正式實驗試次，每種實驗條件下面孔與句子隨機組合呈現。練習階段所用刺激材料不在正式實驗階段中出現。

圖3 實驗2流程圖

3.2 數據分析與結果

所有數據采用SPSS 21.0軟件整理與分析，并采用JASP軟件進行貝葉斯因子的分析。以面孔被識別為恐懼表情的概率為因變量，進行2(語境情緒類型:積極/消極)×2(語境自我相關性:自我相關/他人相關)×6(面孔情緒強度:0%、20%、40%、60%、80%、100%)的重復測量方差分析。

結果表明，語境情緒類型會影響不同強度的恐懼情緒面孔的識別，個體更容易將與消極情緒語境配對呈現的面孔識別為恐懼面孔。另外，面孔的情緒強度越高則越容易被識別。語境信息的自我相關性沒有表現出顯著的影響。

圖3 實驗2流程圖

4 討 論

本研究考察了語境信息的情緒性和自我相關性對中性面孔以及不同強度恐懼面孔加工的影響。結果表明，語境的情緒性和自我相關性信息在不同方面影響了面部表情的識別。在中性面孔加工中，語境情緒信息和自我相關信息分別對面孔的效價評分和喚醒度評分產生影響；而在漸變恐懼面孔加工中，語境情緒性信息產生了更多作用。

實驗1發現，中性面孔效價評分會受到語境信息的情緒類型的影響，消極語境下更偏向于將中性面孔識別為消極情緒，而積極語境下則更偏向于識別為積極情緒。這說明情緒語境可以賦予中性面孔與語境本身情緒相似或一致的情緒意義(Wieser et al.,2014)。除語境信息以外，有研究表明其他背景信息(如場景、語音等)也能對中性面孔起到情緒誘發的作用(楊亞平等,2015)。研究者認為，中性面孔的加工易受到背景信息的影響可能是由于中性面孔的情緒意義不明確，個體需要通過面孔所處的背景來判斷其情緒狀態(Leleu et al.,2015)。

本研究發現，中性面孔的喚醒度會受到語境信息自我相關性的影響，自我相關語境下的中性面孔喚醒度顯著高于他人相關語境。評估和判斷他人面部表情是一種高度個體化過程(Schwarz et al.,2013)，語境在誘發個體情緒狀態的同時也提供了來自情緒概念的信息，對面孔進行自上而下的加工(Diéguez-Risco et al.,2015)。當語境中所蘊含的情緒概念與自我相關時，其誘發作用更強，并且激活與表情刺激深層加工相關的內側前額葉等腦區(Schwarz et al.,2013)，可能因此而影響了面部表情的喚醒度判斷。另外，實驗一中沒有發現語境自我相關性和情緒性信息的相互影響，這可能由于情緒性和自我相關性信息的作用條件是不同的。在語義加工過程中，情緒性信息更容易被提取并影響面部表情的探測，而自我相關性信息可能需要更多認知資源的參與(Wieser et al.,2014)。總之，實驗一發現，個體對語境中的情緒信息和自我相關性信息進行自上而下的加工影響了對中性面孔的識別。這說明面孔的情緒意義模糊時，個體更多地依靠語境中的背景信息對面部表情進行加工，此時語境情緒性和自我相關性均產生影響。

實驗2在實驗1的基礎上進一步探討了面孔情緒強度逐漸增加、情緒意義逐漸清晰的情況下，語境信息在漸變面孔情緒識別中的作用。因此語境信息與面孔情緒強度均為實驗2的自變量。由于漸變情緒面孔識別的難度較大且試次較多，參考以往使用漸變情緒面孔為實驗材料的研究(Qiu et al.,2018)，實驗2選用了較為簡單的情緒類型判斷任務，以更加直接地獲得實驗操縱條件對面部表情識別的影響。結果發現，恐懼面部表情的判斷受到語境情緒類型的影響，消極語境下的面孔更容易被判斷為恐懼表情，表現出面孔與語境情緒一致性效應。另外，面孔情緒強度越高，判斷其為恐懼面孔的概率也越大，即更容易被識別。

以往研究認為，對自我相關的知覺信息(如自我面孔)的加工發生在知覺的早期階段，是優先的甚至自動化的加工，后來有研究發現，相比于知覺層面，語義和概念層面上自我相關信息的優勢并不明顯，其提取需要更多的意識參與(Tacikowski & Ehrsson,2016)。實驗二中自我相關性信息的影響不顯著，且未發現語境情緒類型和自我相關性的交互作用，可能由于漸變面部表情探測的任務負荷較大，而語境情緒信息與面部表情之間的聯系較強，從而導致語境的自我相關性信息沒有得到充分的認知資源進行加工。這與實驗一的結果也是一致的。在實驗2中，面孔情緒強度主效應極其顯著，這也在一定程度上影響了語境信息的作用。另外，在實驗2中，重復測量方差分析結果表明語境情緒類型主效應顯著(p<0.05)，然而其貝葉斯因子為0.80，根據Jeffreys(1961)提出的分類標準，該結果說明支持零假設(即效應不存在)的證據較弱。這兩種分析方法在結果上表現出的差異也是后續研究需要進一步關注和思考的地方。總之，實驗2表明，當面部恐懼情緒漸變時，對語境信息的加工依然影響面部表情的判斷，在此過程中，語境情緒類型發揮了更加重要的作用。

總之，本研究從中性面孔的評定和漸變恐懼面孔的判斷兩方面探討了面部表情加工中的語境效應。研究發現語境情緒性的影響更多體現在情緒類型的識別上，如對中性面孔的情緒誘發和對情緒一致條件下面部恐懼情緒探測的促進作用；語境自我相關性信息的影響主要體現為中性面孔的情緒增強作用，如在自我相關條件下對中性面孔的情緒喚醒度評價更高。另外，相比與自我相關性，語境情緒性信息對面部表情的識別發揮了更大的作用，這也為進一步了解面孔識別中情緒性和自我相關性信息的作用條件提供了基礎。本研究通過操縱語境的情緒與自我相關性，提供了更加復雜的語義信息。情緒信息與自我相關性信息對面部表情識別的不同影響，也為自上而下的加工方式提供了證據。

本研究仍然存在一些不足之處有待改進。首先，研究使用了情緒語境和不同強度的恐懼面部表情，未來研究可以增加恐懼以外的其他情緒類型以及中性語境，更加全面地探討語境信息對于面部表情加工的影響；其次，本研究結果主要集中在行為學數據上，未來研究有必要采取認知神經科學的研究方法，進一步探討語境信息對面部表情加工影響的腦機制。

5 結 論

本研究獲得如下主要結論：

(1)語境信息的情緒性和自我相關性會影響個體對中性情緒面孔的加工。個體對中性面孔的效價評分會受到語境情緒類型的影響，相比于消極語境，積極語境下的中性面孔效價更高；個體對中性面孔的喚醒度評分會受到語境自我相關性的影響，相比于他人相關語境，自我相關語境下的中性面孔喚醒度更高。

(2)語境信息的情緒性會影響漸變恐懼面部表情的判斷，在不同情緒強度條件中，消極語境下的面部恐懼情緒均更容易被識別。