阶层式试题反应理论之多点计分模式探讨-ntcuir-国立台中教育大学.PDF

國立臺中教育大學教育測驗統計研究所理學碩士論文 指導教授：郭伯臣 博士 階層 式試題反應理論 之 多點計分模式探討 研究生：黃子晏 撰 中 華 民 國 一 百 年 七 月 誌謝 論文寫作的日子過得很純粹，卻又簡單的令人驚恐。完成這階段的任務， 稱不上是什麼成就，卻是許多人支撐著我走過，比起我所完成的，我所接受到 的，才是真正溫暖 無價的。 首先誠摯的感謝指導教授郭伯臣博士， 老師始終對我有著無比的信心。對 於一個討厭寫作 ，不斷在論文書寫中喪失自信的我，這樣的相信和關心讓我覺 得我還可以繼續堅持下 去。 萬分感謝 我的口試委員 －王脩斐老師以及林素微老師 ，謝謝您們在百忙之 中 ，仔細地閱讀我的論文 ，並撥冗給予我最珍貴的建議 ，這樣不成熟的作品， 能被如此深入的閱讀及思考，令我感動不已 。 本論文的完成另外得感謝典佑 學長、智為學長與佳樺學姊，這期間，不厭 其煩的指出我研究中的缺失，還有偉民 學弟的大力協助，才使我有足夠多的電 腦 ，得以有驚無險的將數據跑完。 因為有你們，此篇論文得以嚴謹而完備。 一直覺得自己是幸運的人，得以遇見我親愛的你，因為你的金援 與寬容 ， 我可以重溫學生生活；因為你的支持與鼓勵 ，我得以順利完成學業；因為你的 協助與體諒 ，我可以專心撰寫論文；因為你，我得到許多原不屬於我的幸福； 因為你，使我相信凡事終能順遂、如願。 謹以此文獻給你－我最摯愛的蔣俊彥。 黃子晏 謹致 2011.07 摘要 目前較為著名的國際大型測驗 (large-scale assessments)的評量架構多為階 層式的 (hierarchical)評量架構，測驗計分不再只是全對與全錯，而階層式試題反 應理論模式(higher-order item response theory model, HO-IRT model) 多以二元計 分之測驗資料為分析對象，對於許多大型測驗已採用的多點計分方式則較少論 及。 本研究以HO-IRT 為理論基礎，分析階層式的評量架構下多點計分的測驗 資料，透過模擬實驗方式，以總體量尺和領域量尺間的迴歸參數、試題數、受 試者人數為主要變項，探討測驗資料在 HO-IRT的估計模式下，以均方根誤差 (root mean square error, RMSE)為評估指標，評估受試者能力參數、試題參數的 估計精準度是否較以 UIRT(unidimensional item response theory) 及 MIRT(multidimensional item response theory)估計模式為佳。期望透過模擬多點 計分實驗，藉以了解不同估計模式下，總體量尺 (overall ability)和領域量尺 (domain ability)間的迴歸參數、受試者人數、測驗題數對參數估計的影響，以提 供階層式的評量架構下多點計分測驗資料 分析的參考。 由模擬實驗結果得知，在能力量尺與試題參數估計上，以 HO-IRT估計方 式的精準度較好，而迴歸參數設定愈高、測驗題數愈多，能力量尺之估計精準 度愈高；受試者人數愈多，試題參數之估計精準度愈高。 關鍵詞：大型測驗、階層式的評量架構、多點計分、 HO-IRT 、UIRT 、MIRT I Abstract The assessment framework of the many l