信度-moodlentou.ppt

信度 信度的意義 信度的性質 信度的類型與考驗方法 影響信度的因素及補救措施 信度概念在教學評量上的應用 信度的概念構圖 信度的意義 概念性的定義 一個測驗結果的一致性，信度越高表示該測驗的結果越一致。 也可說信度高的測驗有良好的穩定性。 信度的定義 計量上的定義 真分數模式 X = T + E (實得分數= 真正分數+誤差分數) 三者變異量的關係 Sx2 = St2+Se2 真實分數的變異數St2佔總變異Sx2的比率，即定義為「信度」 信度的性質 信度是指評鑑工具所獲得「結果」的可靠性，而非指工具本身。 每一個信度的估計值，僅指某一特定類型的一致性，而非泛指一般的一致性。 信度是效度的必要條件，但不是充分條件。 效度的考驗方法包括邏輯的分析與統計的應用，而信度的考驗則完全採用統計方法。 信度的類型與考驗方法 常模參照 重測信度 複本信度 折半信度 庫李信度 α係數 評分者信度 標準參照 百分比一致性 K係數 信度的類型與考驗方法 (常模參照) 重測信度 同一份測驗於不同時間對相同學生前後重複測量兩次，並根據這兩次測驗分數所求得的相關係數。通常用皮爾森積差相關(r) 代表。 信度的類型與考驗方法 (常模參照) 重測信度 例子:一份測驗在不同的時間點測驗同樣五位學生的表現 信度的類型與考驗方法 (常模參照) 複本信度 做法:根據相同編制藍本使兩份題數﹑難度﹑指導說明﹑施測時限﹑與例題舉隅等都相當的測驗拿給同一批學生施測，在依據施測後所得的兩份測驗分數來求相關係數。 信度的類型與考驗方法 (常模參照) 複本信度 例子:五位學生在正本和複本兩種測驗上的表現情形 信度的類型與考驗方法(常模參照） 重測與複本信度都必須進行兩次施測或使用兩份測驗，使用不方便。 內部一致性係數可方便得到信度 折半信度 庫李信度 α係數內部一致性信度 信度的類型與考驗方法(常模參照） 折半信度 利用單獨一次測驗結果，以隨機方式將其分成兩半，再求出這兩半測驗結果間的相關係數。 公式： 說明：rxx為完整測驗的估計信度，rh為原測驗的信度，g為測驗加長或減短題數的倍數。 折半信度舉例 五位學生在一個四個題目的測驗反映情形 信度的類型與考驗方法(常模參照） 庫李信度 須符合三種基本假設 試題的計分是使用「對或錯」的二元化計分方式 試題不受作答速度的影響 試題都是同質的，亦即都測量到一個相同的因素 公式： 說明：KR20為測驗的信度，n為測驗的題數，P為答對某一題的人數比率，q為答錯某一題的人數比率，為全部題目答對與答錯的百分比的總乘積，S2x為測驗總分的變異數。 庫李信度舉例 五位學生在是非題測驗上的表現情形 信度的類型與考驗方法(常模參照） α 係數 可適用於多元計分的測驗，如學生在五點式量表上的表現。 公式： 說明： α 係數為測驗的估計信度，n為題數，S2i為每一試題得分的變異數，S2x為測驗總分的變異數 α 係數舉例 五位學生在四題五點量表上的表現。 信度的類型與考驗方法(常模參照） 評分者信度 採用不同評分者評閱測驗券。 公式： (評分者為兩人的Spearman等級相關) ρ為評分者信度，d為評定等第之差， N為被評者的人數。 信度的類型與考驗方法(常模參照） 評分者信度 公式： (評分者不只兩位的肯德爾和諧係數) 說明：W為評分者信度,Ri為被評者之評定等第分數，k為評分者人數，N為被評者人數。 評分者信度舉例(評分者為兩人) 兩位評分者使用等第方法評定五位學生的作文成績 評分者信度舉例(評分者為兩人以上) 五位國文教師每人評定九篇作文的等第 信度的類型與考驗方法（標準參照） 百分比一致性指標 分析前後兩次分類決定結果是否為一致，並以百分比之和來表示。 公式： 說明：b和c表示兩次結果都相同的人數, N表總人數 信度的類型與考驗方法（標準參照） K係數 由Cohen(1960)所提出，分析評分者實際評定為一致的次數百分比，與評分者在理論上評定為一致的最大可能次數百分比(經校正誤差後)的比率。 公式： 說明：PA表實際的情形, Pc表預期的情形 測量標準誤 亦為表示信度的方法，只要是用來解釋個人測驗分數的意義和比較不同測驗分數的差異。 利用測量標準誤來解釋個人的測驗分數，以推估出個人真實分數的可信範圍。 公式:????????? SEmeas.為測量標準誤 Sx為測驗的