测验分析.pptVIP

2001/2/22 台北科大 教育學程 曾淑惠 測驗分析 ─ 測驗分數 ─ ─ 主觀分析 ─ ─ 難度、鑑別度、誘答力 ─ ─ 信度與效度 ─ 試題分析的功用 作為改進學生學習的參考 作為實施補救教學的依據 作為修改課程建議的依據 增進教師編製測驗的經驗 增進測驗題庫運用的效能 測驗分數 測驗後分數=真正分數+測驗誤差 測驗誤差的來源 考試者的身心狀況 測驗內部的誤差，如語意模糊、印刷不良等 測驗環境的誤差，如溫度、噪音、光線、施測者的態度等 測驗分數(續) 百分等級:PR=100-(100R-50)/N z分數: z=(Xi-X)/SD Z分數: Z=A+Bz T分數: T=50+10z(必需先將母群常態化) 標準九分法: STN=5+2z 主觀的題目分析 測驗計畫適當顯示教學目標與教學內容 測驗計畫標示每個教學目標與教學內容的重要性 題型適合測量學生的學習成果 題型分配適當 題目陳述清楚無誤 題目難度適當 題目的作答說明清晰 題目的取樣對教學目標而言具有代表性 題目要求學生做的反應與教學目標有關 難度指標 常模參照 答對百分比法 P=R/N*100% P=(Ph+Pl)/2 范氏試題分析表法 ?=13+4Z, Z為標準化常態分配上的標準分數 效標參照 P=R/N 難度指標合理範圍 依用途而有不同 例: 常模參照----0.5 用於評定學生是否學到所教授的基本能力-----0.8 用於選手選拔----0.9 鑑別度 常模參照 內部一致性分析法 D=Ph-Pl 值域在1─ -1, 越大越好 外在效度分析法 點二系列相關法 二系列相關法 ?相關法 效標參照 教學前後差異指標PPDI 接受與未接受教學差異指標 精熟與非精熟組差異指標 常模參照測驗的鑑別度 鑑別度指標 試題評鑑 0.40以上 非常優良 0.30-0.39 優良 0.20-0.29 尚可 0.19以下 劣 難度與鑑別度 難度與鑑別度關係呈菱形分佈 若難度值趨向兩極端 (0 或 1)，表高分組與低分組(或教學前後)的試題皆傾向於答對或答錯，則鑑別度將趨於 0 若難度值接近 0.5 ，表示高分組(或教學後)的試題傾向於答對，及低分組(或教學前)的試題傾向於答錯，則鑑別度將趨於最大 (+1, -1) 誘答力判斷原則 常模參照 至少有一位低分組學生選擇任何一個不正確的選項 選擇各不正確選項者低分組學生人數多於高分組學生人數 效標參照 至少有一位低分組學生選擇任何一個不正確的選項 選擇各不正確選項者低分組學生人數多於高分組學生人數 信度 指經由多次複本測驗測量所得結果間的一致性或穩定性，以反應真實量數程度的一種指標。 信度值介於1-0之間，優良的測驗應具有0.8以上的信度值 信度 常模參照測驗 再測信度 複本信度 內部一致性信度 折半信度 K-R法 ?法 評分者信度 等級相關係數 和諧係數 同質性信度係數 效標參照測驗 百分比一致性指標 ?係數 影響信度的因素 試題數的多寡 樣本能力分配 試題難易程度 計分的客觀性 信度估計的方法 效度 測驗能代表所要測量之潛在特質的程度，或能達到編製目的的程度 測驗分數的有效程度 信度是效度的必要條件，但非充份條件 效度種類 內容效度(含表面效度) 邏輯分析方法 實證分析方法 效標關連效度 同時效度 預測效度 效度種類(續) 建構效度 內部一致性分析法 外在效標分析法 因素分析法 多特質--多方法分析 影響效度的因素 測驗編製的過程是否得當 施測程序與情境是否良好 受試者的身心反應 外在效標品質的良窳 樣本能力分配的變異程度 挑選優良試題之原則 先挑出鑑別度指標較高的試題 再從中挑出難度指標較為適中的試題 相關公式 鑑別度 信度 效度 * * 學科專家群 評估 常模參照測驗的鑑別度指標 0.4以上 (越接近 1 越好) ，效標參照測驗的鑑別度指標 介於0.1 - 0.6 之間 (越接近 0.6 越好) 常模參照測驗的難度指標以接近 0.5 (難易適中) ，效標參照測驗的難度指標應與教學前預定的精熟標準 一致 (趨近於1, 如 0.8, 0.9) * * * * *