一項旨在復(fù)制心理學研究結(jié)果的大規(guī)模努力反駁了這樣的說法,即再現(xiàn)社會科學發(fā)現(xiàn)的失敗可能歸結(jié)于研究人群的差異。
該研究招募了來自世界各地的實驗室,試圖再現(xiàn)28項經(jīng)典和當代心理學實驗的結(jié)果。利用被設(shè)定為P < 0.0001(P是判斷科學證據(jù)力度的常見測試)的嚴格的顯著性閾值,僅有一半實驗被成功再現(xiàn)。
此項努力對來自6個大陸的人群進行了取樣。研究團隊介紹說,總體發(fā)現(xiàn)表明,參與者群體的文化或者背景在決定結(jié)果能否被重現(xiàn)方面并非重要因素。
研究成果的再現(xiàn)性,尤其是心理學領(lǐng)域,近年來一直受到仔細審查。若干努力曾試圖重復(fù)各領(lǐng)域已發(fā)表的發(fā)現(xiàn),但結(jié)果不一。
被稱為“眾多實驗室2”的最新努力由位于美國弗吉尼亞州夏洛茨維爾的開放科學中心心理學家Brian Nosek主導(dǎo)。
他和同事設(shè)計了該項目,旨在回應(yīng)對此前再現(xiàn)努力的重要批評,包括關(guān)于取樣的問題以及研究框架可能未在再現(xiàn)努力中被正確執(zhí)行的斷言。
研究人員獲得了每項實驗中利用的初始材料,并且讓專家(在很多情形下是研究的初始作者)提前評審其實驗框架。隨后,來自36個國家和地區(qū)的60個不同實驗室重新開展了每項實驗,并且提供了組合起來的樣本大小——平均比初始樣本大62倍。此項努力的結(jié)果日前作為預(yù)印本發(fā)表,并且即將發(fā)表于《心理科學方法和實踐進展》。
“人們總是覺得,再現(xiàn)努力失敗當然是因為條件改變了,人也不同了。我們就是想消除這種常見的反應(yīng)。”Nosek說,“雖然這可能是一種解釋,但并非令人滿意,因為我們不知道為何差異如此重要。”
即便在這些條件下,在28項實驗中,也僅有14項的結(jié)果被再現(xiàn)出來。研究人員據(jù)此斷定,研究人群的多樣性對失敗產(chǎn)生的影響很小。