教育领导与评监研究所评监模式.ppt

教育領導與評鑑研究所評鑑模式 主題： 測驗在評鑑中的角色 指導教授:丁文生老師 報告者：黃馨慧 資料來源: 王振世譯（2005）。評鑑模式:教育及 人力服務的評鑑觀點。 第 六 章 測 驗在評鑑中的角色 測驗在評鑑中的角色 一、測驗是什麼? 二、評鑑使用選擇題測驗 三、評鑑中使用另類評估 四、方案評鑑中使用測驗所遭遇的問題 一、測驗是什麼? 四個中心概念 (一)一個測驗只聚焦在某特定感興趣的領域 (二)從測驗領域中抽取之行為、成果的樣本 (三)從測驗結果進行推論並用在確定結果上 (四)這些推論、決定或結果被稱為測驗效度 一、測驗是什麼? (續) (一)測驗領域 1.使用者所關心的範圍稱為測驗領域。 2.編製測驗的第一步就是界定測驗領域。 3.舉例:成就測驗及抽象特質測驗。 4.與評鑑的關係: (1)標準化測驗的適當性。 (2)名稱的隱含影響力。 。 一、測驗是什麼?(續) (二)從測驗領域中取樣 1.選取試題樣本來代表領域中的重要部分。 2.重視議題: 試題樣本是否能充分代表測驗領域？ 3.測驗藍圖(test specifications ) 一、測驗是什麼?(續) (三)從測驗結果進行推論 1.推論的概念 2.推論到不同領域(舉例:SAT測驗) 大學學業平均成績 數學 SAT 各州教育品質之優劣 語文 測 驗 大學運動員之合格性 獎學金 ※SAT測驗(補充) SAT (Scholastic Assessment Tests) 測驗是由美國大學委員會(The College Board，大約4,300所美國大學共同組成的文教組織)委託教育測驗服務(Educational Testing Service，簡稱ETS)定期舉辦的世界性測驗，做為美國各大學申請入學的重要參考條件之一。ＳＡＴ測驗分為SAT Reasoning Test 和SAT Subject Test兩種。SAT Reasoning Test主要在測驗考生的英文程度、數學推論能力及英文寫作能力，作為預測考生進入大學後成績的參考資料，同時也可作為比較不同學校畢業生程度的參考；每種能力的最高得分為800分，總分為2400分。SAT Subject Test主要在測量考生在某一學科的知識和運用這些知識的能力，共有文學、數學、生物、化學、語言及聽力測驗等二十二種學科。 一、測驗是什麼?(續) (四)測驗的效度 常見誤解: 1.沒有所謂的一般有效的測驗。 2.效度化是一個在進行的、真實的且永不 停止的累積效度證據的過程。 3.測驗的效度是一種程度問題，不二分法。 二、評鑑使用選擇題測驗 (一)評鑑使用選擇題測驗的優點 1.測驗是客觀計分的。 2.測驗是非常有效率的。 3.在很短的時間內涵蓋大部分的測驗域。 4.具有良好的信度。 5.可信賴的訊息來源。 6.使用公制方式來提供分數。 二、評鑑使用選擇題測驗(續) (二)評鑑使用選擇題測驗的缺點 1.題目常是模稜兩可的。 2.不能提供具有診斷性的資料。 3.不能提供教師有用的訊息以改善教學。 4.無法觸及學生高層次的思考技巧。 5.若關係到獎勵或資格認可，可能對課程 會有負面影響。 三、評鑑中使用另類評估 另類評估(alternative assessment): 實作評估、學習檔案評量、以及高層次思考的 選擇題等。 共通特徵: 1. 關注的是一個完整的任務，而不是獨立無 關的片面訊息。 2. 要求受測者生產作品或表演展示，而不是 做選擇。 四、方案評鑑中使用測驗所遭遇的問題 我們做測驗的目的?希望從結果得到什麼推論? 測驗所測量的領域是我們原先有興趣的領域? 測驗所提供的常模團體對我們的測驗決策適當? 我們是否用了適當的計分方式?使用者瞭解? 有任何指標可以支持所得到的結論嗎? 每個年級的每位學生都需施測，才能做決策? 我們的選擇如何貼近教師教學豐富的