多選題命題質(zhì)量控制實證研究.pdf

1、多選題因其自身的優(yōu)勢,一直受到各種考試的青睞,也是英語閱讀理解中最常見的題型。近年來,雖然開始出現(xiàn)簡答題,但多選題仍是命題人員的首選,且占據(jù)著主體地位。當然,多選題作為客觀題型也有其不足之處,使得其飽受爭議。如命題難度大,干擾項的編寫和設(shè)計等對命題人員的語言水平,知識面以及實踐經(jīng)驗都要求甚高。如控制不力,極易影響試卷的整體效度和信度。再次,多選題本身為猜測概率極高的題型,如設(shè)A、B、C、D四個選項,答案項的猜測概率即達到25％。如不精心

2、編制和設(shè)計,猜測概率將會大大提高甚至完全可猜。這樣既與考查學(xué)生閱讀理解能力的考試目標相悖,也不符合考試公平公正原則。鄧杰(2009)在深入研究多選題命題原則和猜題策略的基礎(chǔ)上,針對多選題的可猜性提出一套可控指標,并用這套指標,采用專家評判一致性的實證方法證明了其指標的效度和信度,雖然樣本量略顯不足,但其結(jié)果在很大程度上體現(xiàn)了指標的實用性和可操作性,并從這個側(cè)面證明了2008年高考卷全國卷Ⅰ和某省卷在多選題命題中存在的缺陷,同時提出了可控

3、措施。
　　 本研究即在此基礎(chǔ),采用這套指標對2009年高考全國卷(Ⅰ,Ⅱ)和某省卷閱讀理解部分多選題進行評判,以檢測在擴充樣本量的情況下,指標是否依然能有效評測出試卷命題期間的可猜測性程度,并檢驗指標的效度和信度。為了與之保持一致,本研究同樣采用專家評判一致的實證方法,通過統(tǒng)計軟件SPSS16.0對評判專家的評判采用Pearson相關(guān)系數(shù)和肯德爾協(xié)同系數(shù)予以說明。通過對各卷進行單樣本t檢驗描述各卷的可猜概率以及體現(xiàn)出的主要指標

4、,并分析干擾項和答案項在可猜性方面的分布情況以測干擾項的干擾功能和答案項的構(gòu)念效度。最后,文章在綜合以上兩個方面的分析結(jié)果并對評判指標使用頻率進行統(tǒng)計的后下,有針對性的提出在命題過程中一些具體的可控措施。
　　 實驗結(jié)果表明,在對適合的評判者使用這套指標進行足量的培訓(xùn)情況下,評判者的評判一致性能達到較為理想的狀態(tài)；全國卷Ⅰ(2009,2010)和全國卷Ⅱ(2009,2010),以及某省卷在命題期間對選項可猜性的控制情況均存在一定