含題組測(cè)驗(yàn)的IRT等值問(wèn)題研究.pdf

1、等值的研究對(duì)于考試的公平性、題庫(kù)建設(shè)、教學(xué)質(zhì)量評(píng)價(jià)和計(jì)算機(jī)化自適應(yīng)測(cè)驗(yàn)都具有重要的意義。隨著考試研究的深入，題組題型越來(lái)越多地出現(xiàn)在各類考試當(dāng)中，例如閱讀理解、數(shù)學(xué)、地圖填圖等測(cè)驗(yàn)。含題組的測(cè)驗(yàn)等值是我們必須面對(duì)的問(wèn)題。用項(xiàng)目反應(yīng)理論(Item Response Theory，IRT)模型進(jìn)行測(cè)驗(yàn)等值需要滿足很強(qiáng)的統(tǒng)計(jì)假設(shè)——局部獨(dú)立性(LI)假設(shè)。然而，先前的研究表明，在包含題組的測(cè)試當(dāng)中往往存在局部依賴，很可能違背LI假設(shè)。所以，采

2、用標(biāo)準(zhǔn)的IRT模型對(duì)有題組的測(cè)驗(yàn)做等值，因忽略題組的局部相依性可能導(dǎo)致等值結(jié)果的失真。為解決這個(gè)問(wèn)題，我們采用一種基于題組的模掣——兩參數(shù)題組模型(2Parameters Testlets Model，2PTM)，它由IRT兩參數(shù)邏輯斯蒂克模型(2 ParametersLogistic Model，2PLM) 加入與每個(gè)題組相關(guān)的隨機(jī)影響參數(shù)擴(kuò)展而來(lái)的。這一模型考慮了鉚題組中題目的局部依賴。本文給出了利用IRT特征曲線法求解等值系數(shù)的方

3、法和具體步驟。以等值系數(shù)估計(jì)值的誤差大小作為衡量標(biāo)準(zhǔn)，以Wilcoxon符號(hào)秩檢驗(yàn)為依據(jù)，進(jìn)行了大量的Monte Carlo模擬實(shí)驗(yàn)。實(shí)驗(yàn)分別從項(xiàng)目參數(shù)隨機(jī)誤差的大小，被試人數(shù)，題組相依性程度等方面考察對(duì)含題組的測(cè)驗(yàn)等值的效果，將2PTM與標(biāo)準(zhǔn)的IRT的2PLM進(jìn)行比較，其中2PLM并沒(méi)有考慮題組內(nèi)部的依賴關(guān)系。實(shí)驗(yàn)結(jié)果表明，考慮了局部相依性的題組模型2PTM絕大部分情況下都比2PLM等值的誤差小而且有顯著性差異，更加適用于題組測(cè)驗(yàn)的等

4、值。另外，對(duì)6種不同等值準(zhǔn)則用2PTM等值的情況也做了相應(yīng)的比較。結(jié)果表明，一般來(lái)講，等值系數(shù)A取值在0.5～0.9之間SLcrit表現(xiàn)更好，1.0～1.4之間SQRcrit表現(xiàn)突出，1.5～2.0之間Hcrit表現(xiàn)較好。隨參數(shù)估計(jì)精度的提高，SLcrit和SQRcrit的表現(xiàn)更加突出，勝出的范圍也更大。題組相依程度逐漸加強(qiáng)，SQRcrit和Hcrit勝出的情況也增多。LCcrit、Wcrit、SREcrit占優(yōu)的情況不多，勝出的范圍也