中外評分員英語寫作評分中評分表現(xiàn)的對比研究.pdf

1、在英語寫作測試中，有關(guān)中外評分員的一致性和有效性研究在國內(nèi)外引起了相關(guān)學(xué)者的思考。評分員評分時的表現(xiàn)在很大程度上影響了寫作測試的公平及其有效性。本研究采用基于項目反應(yīng)理論的多面Rasch模型，對八名中外評分員對447名中國英語學(xué)習(xí)者的評分表現(xiàn)做了詳細(xì)的對比分析旨在發(fā)現(xiàn)他們存在的差異。本文從FACETS主層面，即評分員和受試者，首先分析評分員整體評分是否存在差異，緊接著從評分嚴(yán)厲度、評分員信度即內(nèi)部一致性及其他們之間的一致性對比分析，然后

2、根據(jù)偏差分析探討兩組評分員對不同能力值的受試者評分是否一致。
　　通過分析，本研究發(fā)現(xiàn)八個評分員之間評分嚴(yán)厲度、評分一致性都存在顯著差異，而他們的內(nèi)部一致性除了一個英語為母語的評分員外都比較好。從中外兩組評分員的對比分析來看，在總體評分上，中國評分員沒有英語母語評分員嚴(yán)厲；而中國評分員的內(nèi)部一致性及其他們之間的一致性要稍高于英語母語的評分員；兩組評分員對不同能力水平的受試者也表現(xiàn)出了不同的偏差，對極高極低能力值的英語學(xué)習(xí)者，兩組評