Does Slipping Matter? Applicability of the Item Response Theory Four-Parameter Logistic Model in Taiwan Student Achievement Tests
作者:
林奕宏 (國立高雄師範大學教育學系)
摘要:
選擇題為目前主要的測驗題型,常用於分析選擇題的試題反應理論之三參數模式(three-parameter logistic model, 3PLM)能估計考生的猜測行為。以 3PLM 為基礎的四參數模式(four-parameter logistic model, 4PLM),再多估計考生的粗心行為,因而能同時考量猜測及粗心行為對考生作答的影響,是較符合實務的模式。惟國內少見應用 4PLM 的已發表研究,是否國內的學生成就測驗不適用 4PLM?故本研究以國內測驗資料為例考驗 4PLM 之適用性,並比較 4PLM 與 3PLM 估計結果之差異,以表徵 4PLM 的特點,作為研究者應用 4PLM 之參考。本研究分為實徵分析及模擬分析兩部分:(1)實徵分析結果:4PLM 模式適配度顯著優於 3PLM,較能描述實徵資料,適用於我國測驗情境;與 3PLM 相較,4PLM 的試題適配度指標較接近期望值1.0,鑑別度及猜測度的估計值及標準誤較大,難度估計值及標準誤較小,能力值的標準誤較大,但較不低估高能力考生能力值;4PLM 特有的粗心度則是估計值越大,標準誤越小。(2)模擬分析結果:4PLM 之鑑別度、難度、猜測度的平均 bias 及平均root mean square error(RMSE)皆較小,能力值以平均 RMSE 顯著較小,粗心度結果合理。以上結果顯示粗心度參數的作用及 4PLM 的實用性。研究建議如下:(1)選擇適當的資料分析模式以獲得較精確結果;(2)探討粗心度參數的作用;(3)比較4PLM 不同估計法的效能及特點。
關鍵字:
四參數模式、成就測驗、粗心、試題反應理論