心理學研究方法元分析

1、1,一、相關概念,1、顯著性(significance)2、效應量(effect size)3、原因量(cause size),2,,1、顯著性(significance)： 反映結果或結論的可靠性。 I型錯誤與II型錯誤 統(tǒng)計功效 邊緣顯著（marginally significant）,3,,2、效應量(effect size)： 反映實驗處理效應或變量間相關程度的大小。均值差異的效應量： 以控制組

2、的標準差或聯(lián)合標準差為單位表示實驗組和控制組之間的差異。,4,效應量大小與實際意義,,5,效應量大小與實際意義,,6,,顯著性 = 效應量×研究規(guī)模,7,3、原因量(cause size)： 反映研究中實施自變量的力度或難易程度。 服藥一天 vs. 服藥一年 教改實驗一月 vs. 教改實驗三年,,8,小的效應量也可能具有重要意義：1. 自變量的操縱代價極小 一塊餅干與助人行為2. 因變量的改變

3、極為困難 Milgram（1963）的服從實驗,,9,二、元分析的含義,primary analysis: 第一手分析，對單項研究中得到的數(shù)據(jù)進行分析以驗證假設。Secondary analysis: 第二手分析，對研究進行再分析(re-analysis)以驗證新的假設或者運用更適合的分析方法。,10,Glass（1976）：以綜合已有的發(fā)現(xiàn)為目的，對單個研究結果進行綜合的統(tǒng)計學分析方法。Ell

4、enberg(1988)：對具有共同研究目的相互獨立的多個研究結果給予定量分析、合并分析，剖析研究間差異特征，綜合評價研究結果。Sacks（1987）：對以往的研究結果進行統(tǒng)計學的合并和嚴謹?shù)南到y(tǒng)綜述方法。,,11,元分析就是應用特定的設計和統(tǒng)計學方法對以往的研究結果進行整體的和系統(tǒng)的定性與定量分析。它是回顧性的，是對傳統(tǒng)綜述的一種改進，是概括以往研究結果的一種方法，包括大量的方法和技術，具有全面、系統(tǒng)和定量的特點，可以用以對以前的具

5、有不同研究設計的和不同時期收集到的資料進行整合。,,12,一般研究以單個被試為最小的分析單位；元分析以單個研究為分析單位。從研究中能夠獲取何種分析數(shù)據(jù)？,,13,在用樣本信息推斷總體參數(shù)時，是存在抽樣誤差的，并且抽樣誤差的大小與樣本量的大小有關。 統(tǒng)計學用抽樣分布的理論來描述樣本統(tǒng)計量的變化規(guī)律。,元分析所依據(jù)的統(tǒng)計學思想,14,從一個均數(shù)為1.5，標準差為0.7的正態(tài)總體中進行隨機抽樣，樣本量分別為20，50，100，2

6、00，300，500，1000，不同的樣本量均進行20次抽樣，共得到140個樣本。 分別計算每個樣本的均數(shù)，標準差和標準誤。 以樣本的均數(shù)為橫坐標，以樣本量為縱坐標作散點圖,,15,,從均數(shù)為1.5，標準差為0.7的正態(tài)總體的140次隨機抽樣結果,,16,由于抽樣過程存在抽樣誤差，樣本量較大時抽樣誤差較小。所以從圖中可以看出所有的點以樣本量較大時的均數(shù)為軸，左右是基本對稱的。用方差分析的方法對不同的樣本所對應的總體

7、均數(shù)是否相等進行檢驗，方差分析的結果為F=0.862,P=0.878。 說明140個樣本對應的總體均數(shù)是相同的。用這140個樣本的信息來估計總體的均數(shù)和標準差，?=1.501,?=0.699。這樣做的結果是提高了估計的精度。,17,,理想狀態(tài) 我們可以把不同作者對相同問題進行的研究看作是從同一總體中進行抽樣得到的一個隨機樣本，如果他們都是按照相同的設計得到的研究結果，并且我們可以找到每一項研究的結果，這樣就可以根據(jù)上面的

8、原理得到一個更為可靠的結果。,18,,實際情況 不同作者所使用的設計方案會有一定的差別；選擇的實驗對象有所不同；研究結果不一定都能發(fā)表到專業(yè)雜志上。 因此實際能夠得到的資料可能是不完整的，甚至是有偏性的，如陽性結果的文章、和目前普遍能夠接受的觀點一致的文章可能更容易發(fā)表在專業(yè)雜志上。 重復發(fā)表。 人為地修改數(shù)據(jù)。,19,三、元分析的目的和意義,傳統(tǒng)文獻綜述存在的一些問題：①以定性分析或描述為主，難以給出

9、一個定量的結論。當所涉及的實驗數(shù)量不斷增加時，得出錯誤結論的機率也隨之增加。②如果有關研究的數(shù)量眾多如有500個，那么要從這么多的研究結果中得出一個一般性的結論已超出了個人的能力。,20,③綜述者究竟使用了哪些文獻常常不得而知。④傳統(tǒng)綜述中沒有足夠重視研究質量、樣本大小等因素對研究結論帶來的影響。⑤使用同樣的文獻，不同的綜述者可以得出不同的結論。,,21,元分析具有以下作用：①解決研究結果的矛盾，定量估計研究效應的平均水平，為進

10、一步的研究和做出決策提供全面的文獻總結。 ②提高統(tǒng)計分析的功效。 ③揭示和分析多個同類研究的分歧。,,22,④為確定新的研究問題和對新實驗的設計提供幫助。 ⑤具有處理大量文獻的能力，不受研究數(shù)目的限制。 ⑥節(jié)省研究費用。 ⑦研究發(fā)表偏向(publication bias)等問題。,,23,四、元分析的基本過程,一、提出問題，制定計劃有意義一般來自于當前存在爭論的研究問題目前或近期有沒有發(fā)表的系統(tǒng)性綜述目前有沒有一定數(shù)量

11、的可供使用的原始文獻,24,,二、檢索相關文獻確定檢索主題詞確定檢索數(shù)據(jù)庫確定檢索年限非發(fā)表文獻的搜集方法 會議 網(wǎng)站 同行了解 準備與作者聯(lián)系的相關文件,25,,三、對文獻進行編碼，并根據(jù)納入標準，選出符合要求的納入文獻確定納入標準和排除標準根據(jù)納入標準和排除標準篩選收集的原始文獻確定原始文獻質量的評價標準兩個人分別完成篩選和質量評價,26,四、納入研究的質量評價內部效度：其研究方

12、法是否合理，統(tǒng)計分析是否正確，結論是否可靠，研究結果是否支持作者的結論等。,,27,五、正確進行數(shù)據(jù)提取六、資料的統(tǒng)計學處理七、結果的敏感性分析八、元分析結果的分析和討論九、根據(jù)統(tǒng)計結果作出正確、全面的結論,,28,元分析資料的統(tǒng)計學處理,1. 明確資料類型，選擇恰當?shù)男笜?d = ( )/S,S =,29,,2．檢驗納入研究的異質性,Q =,,,=,30,,3．根據(jù)異質性檢驗結果選擇統(tǒng)計模型，進行統(tǒng)計

13、分析，得到效應合并值的點估計和區(qū)間估計值。,,,=,31,,如何判斷效應合并值的大小： Cohen（1977)提出了一個對效應量大小的經(jīng)驗解釋，即0.2是“小”效應，0.5是“中”效應，0.8是“大”效應。,32,,4．合并假設檢驗統(tǒng)計量 Fisher法分為兩步：①如果文獻中沒有給出確切的P值的話，將各檢驗統(tǒng)計量如t值、 X2值轉為P值。②將P值轉為X2值。,X2 = -2ΣlnPidf=2k,33,,

14、5．根據(jù)情況進行亞組分析 亞組分析（subgroup analysis）就是根據(jù)不同的研究特征如被試的年齡、職業(yè)，將各獨立研究分為不同組，然后再分別進行合并分析，比較各組及其與總的合并效應間有無顯著性差異。,34,五、元分析的局限性,（一）各種偏向及其控制（二）收集到的資料中缺少元分析所需的數(shù)據(jù)（三）關于各獨立研究的質量評價問題（四）“桔子與蘋果問題”及其控制（五）異質性的處理問題（六）元分析本身的質量控制問題