基于多層面Rasch模型的CET-SET評分員效應(yīng)研究.pdf

1、語言行為測試近年來因其對交際能力和語言使用行為的考察而廣受關(guān)注?？谡Z測試作為一種典型的語言行為測試，盡管具有較高的測試效度，但由于評分受到許多因素的影響(如考生水平，題目難度，評分員效應(yīng)等)，容易產(chǎn)生偏差，影響測試信度。評分員效應(yīng)是各種因素中最不可忽視的一種，因其種類多樣且不穩(wěn)定，極易對測試結(jié)果造成影響，因此許多研究都致力于探究評分員效應(yīng)，試圖尋找其規(guī)律和特性并加以控制，以降低對測試信度的影響。多層面Rasch模型(Many-Facet

2、 RaschModel)源自心理測量學(xué)領(lǐng)域的項目反應(yīng)理論(Item Response Theory)，是原始Rasch模型的拓展，引入了更多的影響測試結(jié)果的側(cè)面(facets)，能夠?qū)Ω鲗用鏈y量值進(jìn)行獨(dú)立估計，檢驗層面間的偏性交互作用，對主觀評分質(zhì)量提供系統(tǒng)而詳細(xì)的分析。
　　 本研究對2010年11月的CET-SET某考點(diǎn)的考試評分結(jié)果進(jìn)行了分析。通過分析發(fā)現(xiàn)評分員嚴(yán)厲度有顯著差異，但總體一致性良好；評分過程中未出現(xiàn)明顯的集中