試題分析.pptVIP

2005/04/20 教育評量與心理衡鑑專題研究試題分析報告 試題分析的功用 一、作為改進學生學習的參考 二、作為實施補救教學的依據 三、作為修改課程建議的憑據 四、增進教師編製測驗的經驗 五、增進測驗題庫運用的效能 試題分析前的準備工作 一、輸入試題的標準答案 二、輸入原始反應資料矩陣 三、轉換原始反應資料矩陣為二元化計分 資料矩陣 四、依序排列學生得分的高低 五、依序排列試題答對人數的多寡 試題分析的步驟 1.根據學生原始得分之高低，依序由高往低排列學生的二元化反應組型及其原始得分。 2.從原始得分最高的學生往下數，選取總人數25％（約四分之一）到33％（約三分之一）之間的學生數，當成高分組學生；並由原始得分最低的學生往上數，選取總人數25％到33％之間的學生數，當成低分組學生。 3.分別計算高分組和低分組學生在每一個試題上的答對人數及其百分比值 (即ＰiH 及ＰiL)。 4.計算每個試題的難度指標： 5.計算每個試題的鑑別度指標：Di ＝ (ＰiH -ＰiL) 。 6.如果是使用選擇題的話，檢視每個試題中錯誤選項的回答人數，以分析每個試題的誘答力。 難度指標的分析 一、答對百分比法 公式1. 計算全體學生中，答對每個試題的人數佔總人數的百分比値。 公式2. 每個試題高分組和低分組學生答對人數百分比之平均數。 難度指標的分析 二、范氏試題分析表法 △ ＝ １３　＋　４Ｚ Ｐ ＝ .9987 時 Ｚ ＝ -3 故 △ ＝ 13 + 4 (-3) ＝ 1 Ｐ ＝ .9772 時 Ｚ ＝ -2 故 △ ＝ 13 + 4 (-2) ＝ 5 Ｐ ＝ .8413 時 Ｚ ＝ -1 故 △ ＝ 13 + 4 (-1) ＝ 9 Ｐ ＝ .5000 時 Ｚ ＝ 0 故 △ ＝ 13 + 4 (0) ＝ 13 Ｐ ＝ .1587 時 Ｚ ＝ +1 故 △ ＝ 13 + 4 (+1) ＝ 17 Ｐ ＝ .0228 時 Ｚ ＝ +2 故 △ ＝ 13 + 4 (+2) ＝ 21 Ｐ ＝ .0013 時 Ｚ ＝ +3 故 △ ＝ 13 + 4 (+3) ＝ 25 難度指標的分析 一般而言， P值愈大，表示該試題愈容易，愈多數的學生答對該試題。 反之， P值愈小，表示該試題愈困難，愈少數的學生答對該試題。 而P値接近0.50時，則表示該試題難易適中，答對和答錯人數大約各佔一半。 ?0 ? P値 ? 1 鑑別度指標的分析 一、內部一致性分析法(internal consistency) ?-1.00 ? D値 ? 1.00 D=0，代表全部高分組和低分組的學生都答對 D=1，代表高分組的學生都答對，而低分組都答錯 ?反映出命題很成功 D=-1，代表低分組的學生都答對，而高分組都答錯 ?反映出命題非常失敗 (參見余民寧，2000，202頁) 鑑別度指標的分析 二、外在效度分析法(external validity) (ㄧ)點二系列相關（point-biserial correlation）法 鑑別度指標的分析 二、外在效度分析法(external validity) (二)二系列相關（biserial correlation）法 (三)φ相關（phi correlation）法 選項誘答力的分析 郭生玉教授提出兩個判斷原則： 一、至少有一位低分組學生選擇任何一個 不正確選項。 二、選擇不正確選項的低分組學生人數應 該比高分組學生人數還多。 試題分析範例 《選擇第1題》：若 a，10，b，c，31成等差數列，則a，b，31亦成等差數列，且其公差為 (1) 11 (2) 12 (3) 13 *(4) 14 選答人數 選項 1 2 3 4* 難度(P) 鑑別度(D) 誘答力* 高分組 3 2 1 162 .63 .66 適當 低分組 58 24 32 50 試題分析範例 《選擇第3題》：比例尺1：200的地圖上有一個面積為χ的矩形，則實際面積為 (1) 200χ (2) 2000χ (3) 4000χ