课程与教学评量以纸笔成就测验编制为例.ppt

課程與教學評量以紙筆成就測驗編製為例 楊志強博士 國立台北教育大學教育學系教授 cyang@.tw.tw/~cyang 在教室中，可以測驗(test)什麼？ 可以測量(measure)什麼？可以評量(assess)什麼？ 知識（knowledge） 理解（comprehension） 應用（application） 分析（analysis） 綜合（synthesis） 評鑑（evaluation） 接受（receiving） 反應（responding） 評價（valuing） 重組（organizing） 內化（characterization by value） 感官（perception） 準備（set） 模仿（imitation） 自動化（mechanism） 複雜反應（complex overt response） 創作（origination） 如果要測生命教育課程與教學實施成效，可以測什麼？ 能知道出生、成長、老化及死亡的概念 認識身體發展的順序與個別差異 能有互助合作的工作態度 能有健全的生活態度 運用協調方式解決班級自治問題 在團體活動中能主動與人溝通、接納、分享 成就測驗的意義 凡是測量由後天學習而得到某些知識或技能之程度的測驗。 如：小考、段考、月考、 期中考、 期末考、國民中學學生基本學力測驗、大學學科能力測驗… 編製步驟 步驟一：決定測驗目的 評估學習的起點行為：安置性目的 偵知學習進步的情形：形成性目的 診斷學習困難的原因：診斷性目的 評定學習成效：總結性目的 步驟二：決定測驗目標 知識（knowledge） 理解（comprehension） 應用（application） 分析（analysis） 綜合（synthesis） 評鑑（evaluation） 人類個體最先發展的動作能力是什麼？ (1)頭 (2)軀幹 (3)四肢及大肌肉 (4)小肌肉 幼兒能握筆塗鴉是屬於何種動作能力？ (1)頭 (2)軀幹 (3)四肢及大肌肉 (4)小肌肉 若依人類個體動作能力的發展先後順序排序，下列何者正確？ （1） 轉頭、翻身 、 站立、握筆 （2） 翻身、轉頭、 站立、握筆 （3） 轉頭、站立 、翻身、握筆 （4） 轉頭、翻身 、握筆、站立 步驟三：列出教材大綱 人與自己 人與他人 人與自然 人與社會 人與宇宙 步驟四：建立雙向細目表 步驟五：確定試題目標 步驟六：選擇紙筆測驗題型 選擇型試題/客觀測驗 選擇題 是非題 配合題 補充型試題/論文測驗 填充題（亦屬客觀測驗） 簡答題（亦屬客觀測驗） 限制反應式問題（問答題） 擴展反應式問題（申論題） 步驟七：試題品質與試題編擬 關聯性：測驗能適切地評量所期望的學習結果。 平衡性：涵蓋的教材內容要符合雙向細目表預定的比率。 有效性：測驗的編製、評分方式及作答時間要經濟有效。 客觀性：該領域的專家應可得滿分或接近滿分。 特殊性：未具備該領域知識者僅能憑猜測作答。 適當的難度：測驗的難易度要適中。 良好的鑑別度：能區別高低學習成就者。 信度：測驗的結果要一致性或可靠性。 效度：測驗內容能真正測量到所欲測量的特質。 公平性：每一位受試者都有相等的機會，來表現他真正的學習成就。 步驟八：試題修整與審查 預試前之質性分析 試題內容是否能達成該題欲評量之目標？ 試題是否能清楚的表達題意？ 試題用詞是否簡短清晰？ 試題是否只問一個問題，避免同時包含太多概念？ 試題是否避免包含某一族群所特別熟悉的訊息？ 試題的英文原文或翻譯是否正確？ 試題是否與學生的生活經驗相結合？ 試題是否避免含有暗示答案的線索？ 試題是否避免歧視性別或種族的字眼？ 題幹是否保持完整，沒有中斷？ 題幹中的關鍵詞或否定句是否加上底線？ 附圖或表是否置於題幹後、選項前？ 在各選項中共同文字是否置於題幹內？ 題幹是否避免使用雙重否定？ 題幹是否完整敘述欲評量的主要概念？ 選擇正確選項是否基於受試者具備該題欲評量目標上之能力？ 答錯正確選項是否基於受試者不具備該題欲評量目標上之能力？ 選項的用詞是否與題幹一致？ 選項是否符合題幹問法的邏輯？ 選項表達方式是否保持一致？ 選項內容是否互為獨立？ 選項內容是否按邏輯順序排列？ 錯誤選項是否具有誘答力？ 是否避免「以上皆非」、「以上皆是」的選項？ 正確答案是否是公認的且不具爭議性的？ 每一題的選項數目是否一致？ 選項號碼應與選項敘述相差半型空白。 選項間次序應為垂直排列。 選項間內容敘述宜為等長。 選項間內容次序應為邏輯排列。 各類試題例舉 評量目標：能理解重要科學名詞的意義。 小文到動物園參觀，看見台灣