心理學(xué)研究方法元分析

1、1,一、相關(guān)概念,1、顯著性(significance)2、效應(yīng)量(effect size)3、原因量(cause size),2,,1、顯著性(significance)： 反映結(jié)果或結(jié)論的可靠性。 I型錯(cuò)誤與II型錯(cuò)誤 統(tǒng)計(jì)功效 邊緣顯著（marginally significant）,3,,2、效應(yīng)量(effect size)： 反映實(shí)驗(yàn)處理效應(yīng)或變量間相關(guān)程度的大小。均值差異的效應(yīng)量： 以控制組

2、的標(biāo)準(zhǔn)差或聯(lián)合標(biāo)準(zhǔn)差為單位表示實(shí)驗(yàn)組和控制組之間的差異。,4,效應(yīng)量大小與實(shí)際意義,,5,效應(yīng)量大小與實(shí)際意義,,6,,顯著性 = 效應(yīng)量×研究規(guī)模,7,3、原因量(cause size)： 反映研究中實(shí)施自變量的力度或難易程度。 服藥一天 vs. 服藥一年 教改實(shí)驗(yàn)一月 vs. 教改實(shí)驗(yàn)三年,,8,小的效應(yīng)量也可能具有重要意義：1. 自變量的操縱代價(jià)極小 一塊餅干與助人行為2. 因變量的改變

3、極為困難 Milgram（1963）的服從實(shí)驗(yàn),,9,二、元分析的含義,primary analysis: 第一手分析，對(duì)單項(xiàng)研究中得到的數(shù)據(jù)進(jìn)行分析以驗(yàn)證假設(shè)。Secondary analysis: 第二手分析，對(duì)研究進(jìn)行再分析(re-analysis)以驗(yàn)證新的假設(shè)或者運(yùn)用更適合的分析方法。,10,Glass（1976）：以綜合已有的發(fā)現(xiàn)為目的，對(duì)單個(gè)研究結(jié)果進(jìn)行綜合的統(tǒng)計(jì)學(xué)分析方法。Ell

4、enberg(1988)：對(duì)具有共同研究目的相互獨(dú)立的多個(gè)研究結(jié)果給予定量分析、合并分析，剖析研究間差異特征，綜合評(píng)價(jià)研究結(jié)果。Sacks（1987）：對(duì)以往的研究結(jié)果進(jìn)行統(tǒng)計(jì)學(xué)的合并和嚴(yán)謹(jǐn)?shù)南到y(tǒng)綜述方法。,,11,元分析就是應(yīng)用特定的設(shè)計(jì)和統(tǒng)計(jì)學(xué)方法對(duì)以往的研究結(jié)果進(jìn)行整體的和系統(tǒng)的定性與定量分析。它是回顧性的，是對(duì)傳統(tǒng)綜述的一種改進(jìn)，是概括以往研究結(jié)果的一種方法，包括大量的方法和技術(shù)，具有全面、系統(tǒng)和定量的特點(diǎn)，可以用以對(duì)以前的具

5、有不同研究設(shè)計(jì)的和不同時(shí)期收集到的資料進(jìn)行整合。,,12,一般研究以單個(gè)被試為最小的分析單位；元分析以單個(gè)研究為分析單位。從研究中能夠獲取何種分析數(shù)據(jù)？,,13,在用樣本信息推斷總體參數(shù)時(shí)，是存在抽樣誤差的，并且抽樣誤差的大小與樣本量的大小有關(guān)。 統(tǒng)計(jì)學(xué)用抽樣分布的理論來描述樣本統(tǒng)計(jì)量的變化規(guī)律。,元分析所依據(jù)的統(tǒng)計(jì)學(xué)思想,14,從一個(gè)均數(shù)為1.5，標(biāo)準(zhǔn)差為0.7的正態(tài)總體中進(jìn)行隨機(jī)抽樣，樣本量分別為20，50，100，2

6、00，300，500，1000，不同的樣本量均進(jìn)行20次抽樣，共得到140個(gè)樣本。 分別計(jì)算每個(gè)樣本的均數(shù)，標(biāo)準(zhǔn)差和標(biāo)準(zhǔn)誤。 以樣本的均數(shù)為橫坐標(biāo)，以樣本量為縱坐標(biāo)作散點(diǎn)圖,,15,,從均數(shù)為1.5，標(biāo)準(zhǔn)差為0.7的正態(tài)總體的140次隨機(jī)抽樣結(jié)果,,16,由于抽樣過程存在抽樣誤差，樣本量較大時(shí)抽樣誤差較小。所以從圖中可以看出所有的點(diǎn)以樣本量較大時(shí)的均數(shù)為軸，左右是基本對(duì)稱的。用方差分析的方法對(duì)不同的樣本所對(duì)應(yīng)的總體

7、均數(shù)是否相等進(jìn)行檢驗(yàn)，方差分析的結(jié)果為F=0.862,P=0.878。 說明140個(gè)樣本對(duì)應(yīng)的總體均數(shù)是相同的。用這140個(gè)樣本的信息來估計(jì)總體的均數(shù)和標(biāo)準(zhǔn)差，?=1.501,?=0.699。這樣做的結(jié)果是提高了估計(jì)的精度。,17,,理想狀態(tài) 我們可以把不同作者對(duì)相同問題進(jìn)行的研究看作是從同一總體中進(jìn)行抽樣得到的一個(gè)隨機(jī)樣本，如果他們都是按照相同的設(shè)計(jì)得到的研究結(jié)果，并且我們可以找到每一項(xiàng)研究的結(jié)果，這樣就可以根據(jù)上面的

8、原理得到一個(gè)更為可靠的結(jié)果。,18,,實(shí)際情況 不同作者所使用的設(shè)計(jì)方案會(huì)有一定的差別；選擇的實(shí)驗(yàn)對(duì)象有所不同；研究結(jié)果不一定都能發(fā)表到專業(yè)雜志上。 因此實(shí)際能夠得到的資料可能是不完整的，甚至是有偏性的，如陽性結(jié)果的文章、和目前普遍能夠接受的觀點(diǎn)一致的文章可能更容易發(fā)表在專業(yè)雜志上。 重復(fù)發(fā)表。 人為地修改數(shù)據(jù)。,19,三、元分析的目的和意義,傳統(tǒng)文獻(xiàn)綜述存在的一些問題：①以定性分析或描述為主，難以給出

9、一個(gè)定量的結(jié)論。當(dāng)所涉及的實(shí)驗(yàn)數(shù)量不斷增加時(shí)，得出錯(cuò)誤結(jié)論的機(jī)率也隨之增加。②如果有關(guān)研究的數(shù)量眾多如有500個(gè)，那么要從這么多的研究結(jié)果中得出一個(gè)一般性的結(jié)論已超出了個(gè)人的能力。,20,③綜述者究竟使用了哪些文獻(xiàn)常常不得而知。④傳統(tǒng)綜述中沒有足夠重視研究質(zhì)量、樣本大小等因素對(duì)研究結(jié)論帶來的影響。⑤使用同樣的文獻(xiàn)，不同的綜述者可以得出不同的結(jié)論。,,21,元分析具有以下作用：①解決研究結(jié)果的矛盾，定量估計(jì)研究效應(yīng)的平均水平，為進(jìn)

10、一步的研究和做出決策提供全面的文獻(xiàn)總結(jié)。 ②提高統(tǒng)計(jì)分析的功效。 ③揭示和分析多個(gè)同類研究的分歧。,,22,④為確定新的研究問題和對(duì)新實(shí)驗(yàn)的設(shè)計(jì)提供幫助。 ⑤具有處理大量文獻(xiàn)的能力，不受研究數(shù)目的限制。 ⑥節(jié)省研究費(fèi)用。 ⑦研究發(fā)表偏向(publication bias)等問題。,,23,四、元分析的基本過程,一、提出問題，制定計(jì)劃有意義一般來自于當(dāng)前存在爭(zhēng)論的研究問題目前或近期有沒有發(fā)表的系統(tǒng)性綜述目前有沒有一定數(shù)量

11、的可供使用的原始文獻(xiàn),24,,二、檢索相關(guān)文獻(xiàn)確定檢索主題詞確定檢索數(shù)據(jù)庫確定檢索年限非發(fā)表文獻(xiàn)的搜集方法 會(huì)議 網(wǎng)站 同行了解 準(zhǔn)備與作者聯(lián)系的相關(guān)文件,25,,三、對(duì)文獻(xiàn)進(jìn)行編碼，并根據(jù)納入標(biāo)準(zhǔn)，選出符合要求的納入文獻(xiàn)確定納入標(biāo)準(zhǔn)和排除標(biāo)準(zhǔn)根據(jù)納入標(biāo)準(zhǔn)和排除標(biāo)準(zhǔn)篩選收集的原始文獻(xiàn)確定原始文獻(xiàn)質(zhì)量的評(píng)價(jià)標(biāo)準(zhǔn)兩個(gè)人分別完成篩選和質(zhì)量評(píng)價(jià),26,四、納入研究的質(zhì)量評(píng)價(jià)內(nèi)部效度：其研究方

12、法是否合理，統(tǒng)計(jì)分析是否正確，結(jié)論是否可靠，研究結(jié)果是否支持作者的結(jié)論等。,,27,五、正確進(jìn)行數(shù)據(jù)提取六、資料的統(tǒng)計(jì)學(xué)處理七、結(jié)果的敏感性分析八、元分析結(jié)果的分析和討論九、根據(jù)統(tǒng)計(jì)結(jié)果作出正確、全面的結(jié)論,,28,元分析資料的統(tǒng)計(jì)學(xué)處理,1. 明確資料類型，選擇恰當(dāng)?shù)男?yīng)指標(biāo),d = ( )/S,S =,29,,2．檢驗(yàn)納入研究的異質(zhì)性,Q =,,,=,30,,3．根據(jù)異質(zhì)性檢驗(yàn)結(jié)果選擇統(tǒng)計(jì)模型，進(jìn)行統(tǒng)計(jì)

13、分析，得到效應(yīng)合并值的點(diǎn)估計(jì)和區(qū)間估計(jì)值。,,,=,31,,如何判斷效應(yīng)合并值的大?。?Cohen（1977)提出了一個(gè)對(duì)效應(yīng)量大小的經(jīng)驗(yàn)解釋，即0.2是“小”效應(yīng)，0.5是“中”效應(yīng)，0.8是“大”效應(yīng)。,32,,4．合并假設(shè)檢驗(yàn)統(tǒng)計(jì)量 Fisher法分為兩步：①如果文獻(xiàn)中沒有給出確切的P值的話，將各檢驗(yàn)統(tǒng)計(jì)量如t值、 X2值轉(zhuǎn)為P值。②將P值轉(zhuǎn)為X2值。,X2 = -2ΣlnPidf=2k,33,,

14、5．根據(jù)情況進(jìn)行亞組分析 亞組分析（subgroup analysis）就是根據(jù)不同的研究特征如被試的年齡、職業(yè)，將各獨(dú)立研究分為不同組，然后再分別進(jìn)行合并分析，比較各組及其與總的合并效應(yīng)間有無顯著性差異。,34,五、元分析的局限性,（一）各種偏向及其控制（二）收集到的資料中缺少元分析所需的數(shù)據(jù)（三）關(guān)于各獨(dú)立研究的質(zhì)量評(píng)價(jià)問題（四）“桔子與蘋果問題”及其控制（五）異質(zhì)性的處理問題（六）元分析本身的質(zhì)量控制問題