“全球醫(yī)學(xué)教育最基本要求”評(píng)估的統(tǒng)計(jì)方法探討.pdf

1、“全球醫(yī)學(xué)教育最基本要求”評(píng)估的統(tǒng)計(jì)方法探討背景2001年國(guó)際醫(yī)學(xué)教育組織(IIME)制定了“全球醫(yī)學(xué)教育最基本要求(GMER)”。2003年IIME對(duì)我國(guó)8所大學(xué)醫(yī)學(xué)院臨床醫(yī)學(xué)專業(yè)7年制畢業(yè)生進(jìn)行了基線評(píng)估，采用多選題(MCQ)、客觀結(jié)構(gòu)化臨床考試(OSCE)和教師觀察法(OBS)3種測(cè)評(píng)方法評(píng)估了GMER7個(gè)領(lǐng)域的能力。 目的利用一次性施測(cè)的標(biāo)準(zhǔn)參照測(cè)驗(yàn)數(shù)據(jù)，分析GMER評(píng)估各測(cè)評(píng)方法(包括OSCE和OBS)的可靠性、分?jǐn)?shù)線

2、決策可靠性和有效性，以及整套評(píng)估工具的有效性，為改進(jìn)GMER評(píng)估設(shè)計(jì)和提高評(píng)估質(zhì)量提供依據(jù)。 方法根據(jù)評(píng)估數(shù)據(jù)的特點(diǎn)，采用隨機(jī)單面交叉設(shè)計(jì)、隨機(jī)雙面交叉設(shè)計(jì)和含固定面交叉設(shè)計(jì)的概化理論分析OSCE中SP考站的可靠性及分?jǐn)?shù)線決策可靠性；采用隨機(jī)雙面交叉設(shè)計(jì)、三面混雜設(shè)計(jì)的概化理論和三因子隨機(jī)雙面交叉設(shè)計(jì)的多元概化理論分析OBS的可靠性及分?jǐn)?shù)線決策可靠性；采用傳統(tǒng)多質(zhì)-多法(MTMM)矩陣分析和驗(yàn)證性因子分析(CFA)分析整個(gè)GME

3、R評(píng)估的構(gòu)念效度；采用一階和二階CFA分析OSCE的構(gòu)念效度；采用CFA分析OBS的構(gòu)念效度。 結(jié)果我校參加評(píng)估的臨床醫(yī)學(xué)專業(yè)7年制畢業(yè)生基本達(dá)到了GMER的標(biāo)準(zhǔn)。OSCE的SP考站可靠性不高，但各領(lǐng)域的分?jǐn)?shù)線決策信度很滿意；OBS測(cè)評(píng)各個(gè)領(lǐng)域的分測(cè)驗(yàn)和總的可靠性都不高，各領(lǐng)域的分?jǐn)?shù)線決策信度也較低。整個(gè)GMER評(píng)估的構(gòu)念效度不甚滿意，測(cè)評(píng)方法因素和特質(zhì)(能力)因素都對(duì)結(jié)果產(chǎn)生了不可忽略的影響，且方法因素的影響大于能力因素的作用

4、；OSCE的構(gòu)念效度較好，OBS具有很高的構(gòu)念效度。 結(jié)論概化理論可用于解決經(jīng)典測(cè)量理論下難以解決的標(biāo)準(zhǔn)參照測(cè)驗(yàn)的可靠性和分?jǐn)?shù)線的決策可靠性問(wèn)題。GMER評(píng)估中OSCE的SP考站和OBS的可靠性有待提高。驗(yàn)證性因子分析可以較好的通過(guò)定量分析實(shí)際觀測(cè)到的能力及其相互關(guān)系與預(yù)想的測(cè)量目標(biāo)間的一致性。GMER評(píng)估總的構(gòu)念效度有待提高，應(yīng)降低測(cè)評(píng)方法對(duì)評(píng)估結(jié)果的影響。建議：①增加SP長(zhǎng)考站為10個(gè)，短考站為5個(gè)，增加SP考站間的同質(zhì)性，

5、以提高SP考站可靠性。②增加OBS觀察實(shí)習(xí)階段數(shù)為6，在難度相近、實(shí)習(xí)內(nèi)容相近的科室進(jìn)行臨床觀察，在同一科室(同一階段)內(nèi)，由相同的幾位教師為不同學(xué)生評(píng)分，將有助于提高可靠性；對(duì)OBS各領(lǐng)域的分?jǐn)?shù)標(biāo)準(zhǔn)制定加以改進(jìn)。③在OBS中，著重探討“溝通技能”領(lǐng)域能力的測(cè)評(píng)條目，以提高可靠性；對(duì)教師觀察表中第13條“承認(rèn)其他醫(yī)務(wù)人員的作用”作進(jìn)一步說(shuō)明。④加強(qiáng)對(duì)評(píng)分者的培訓(xùn)，給被試學(xué)生熟悉測(cè)評(píng)方法的機(jī)會(huì)，從而降低測(cè)評(píng)方法對(duì)評(píng)估結(jié)果的影響。