成就测验组合分数议题探讨.PDFVIP

國立臺南大學 119 「教育研究學報」第46 卷第 1 期（民國 101 年）：119~137 成就測驗組合分數議題探討1 凃柏原 國立臺南大學教育學系 副教授 盧思丞 國立臺南大學教育學系 博士生 摘要 本研究根據一個成就測驗題庫建置計畫的試題參數產生模擬資料來探討組合分數 計算的相關議題，文獻中曾提到的組合分數的加權數計算方法多達十餘種，本研究主要 探討信度加權法和IRT 加權法；另外以某市一般智能資優學生甄選資料來探討多元迴歸 和主成份分析法。結果發現在信度加權法的部分，用原始分數之間的相關矩陣或是用各 科能力值之間的相關矩陣所計算得到的各科分數之加權數類似，且二者所得到的組合分 數之信度係數雷同。利用四個科目的能力值所計算得到的主成份分數和組合分數與將四 科資料視為一科時利用3PL 模式所估計得到的能力值之間的相關係數，對五年級來說， 分別為.969 和.982 ，而對六年級來說，則是.971 和.990 。最後，利用團體智力測驗的三 個分測驗的資料計算主成份分數，或利用多元迴歸分析預測個別智力測驗的分數，結果 發現主成份分數與個別智力測驗分數之間的相關，和用多元迴歸所得到的預測分數與真 正的個別智力測驗分數之間的相關，二者的值非常接近，都接近.95 。 關鍵字：組合分數、信度加權、IRT 加權、主成份分析、多元迴歸 1 本文部分結果是取自 NSC 95-2413-H-024-009-的研究案，部分結果曾發表於 2007 年 11 月中國測驗學 會年會。 120 教育研究學報 壹、前言 實務上許多國內外的大型測驗計畫常會將考生在各個分測驗所得到的分數加以加 權，以得到一個加權的分數來代表考生在該測驗上面的整體表現，並將該分數報導給考 生知道，以作為考生在該測驗的得分（Peterson, Kolen Hoover, 1989 ）。比如說 Law School Admission Test （LSAT ）的分數是閱讀理解（Reading Comprehension ）、分析推理 （Analytical Reasoning ）和邏輯推理（Logical Reasoning ）三個部份的總和，而SAT II Writing Subject Test 的分數則是選擇題部份的分數與申論題得分之加權總和；ACT 的組 合分數則是English, Math, Science 和Reading 等四個分測驗的量尺分數之平均（Kolen Hanson, 1989, p. 39 ）。因此，這個加權總分的計算就成了測驗編製者在建立量尺分數時 一個重要的工作，在測驗的文獻中，這個加權的總分一般稱為composite score ，在本文 中譯為組合分數。 筆者參與一項大型成就測驗題庫建置的工作，該項成就測驗題庫的內容涵蓋二至七 等六個年級，包含國語文、數學、自然、社會與英文等五個學科或領域的試題，其中英 文只用在七年級。該項測驗題庫建置計畫也考慮將學生在各個科目上的表現，利用線性 加權的方式來得到一個組合分數，因而組合分數計算的議題就吸引了筆者的注意。 一般而言，組合分數是將原始分數或量尺分數加以線性組合得到的，很少用非直線 轉換的方式（Peterson, Kolen, Hoover, 1989 ）。根據Wainer 和Thissen （2001 ）的用語 以線性的方式得到之組合分數可以定義如下： z = ∑ w z (公式 1) c v v 其中z