測驗的信度.ppt

測驗的信度 林陳涌 國立台灣師範大學 生物學系 信度…... 信度所關心的是測驗分數的一致性或穩定性。 一個具有良好信度的測驗，使用在不同的主試者　評分者　時間　情境或使用類似的問題，其所得的分數應該接近相同或一致。 一般而言分數愈一致，受誤差的影響愈小。所以信度主要在說明測驗分數中測量誤差所佔的成分。 效度…... 測驗有種種不同的目的， 這些目的是否能達到需視測驗效度高低而定。 測驗的效度高，則測驗能實現所欲測量的目的。如果效度低，不僅無法達成目標，甚至會提供不正確的資料而作成錯誤的決定。 信度的意義 測量的一致性 測量的誤差 測量的一致性 相同的個人在不同的時間，以相同的測驗測量，或以複本測驗測量，或在不同的情境下測量，所得結果的一致性。 兩次測驗的結果相當一致，表示測驗分數具有穩定性　可靠性　可預測性 測量的誤差 測驗或測驗的分數，反應出真實量數的程度或沒有誤差的程度。信度是在估計測量的誤差有多少，以及有多少比率是由測量誤差所造成的。 如果測驗分數中包含很多的誤差成分，信度就低；如果測驗分數中包含很少的誤差成分，信度就高。 信度的特性 一般而言，心理與教育測驗的信度比自然科學為低。 自然科學的特徵通常可以直接測量，但心教測驗只能間接測量而推論之。 自然科學的工具精確性相當高。 自然科學測量的特徵相當穩定，不像心理特徵變化很大。 信度的特性 信度不是一種普遍的特質，所以，測驗分數不可能在任何情境下都是可靠的或一致的。 信度會因情境(如受測族群)改變而變。 某測驗的信度已經建立了。 信度的特性 本質上，信度是一種統計的概念，採用邏輯的分析，無法提供有效的證據。 確定信度的兩個主要方法： 同一個測驗對單一受試者測很多次 分析受試者內在的變異，這個差異通常以測量標準誤(standard error of measurement)表示。 這個方法不可行。 同一個測驗對同一群受試者測兩次 根據他們的分數在團體中的相對位置，分析受試者相互間的變異量，以相關係數來表示。 現在常用的方法。 信度的特性 測驗的信度愈高愈好。但是沒有測驗是完全可靠的，所有測驗都有某些程度的不可靠，因為測量誤差是無法避免的。 因此信度要多高才可使用需是使用的目的和情況而定。 信度的原理--真實分數與測量誤差 X = T + E X：實得分數 T：真實分數 E：誤差分數 真實分數:普遍性分數，無法正確量到，需在多次重試求取平均數做為真實分數。 誤差分數及測量誤差，可正可負可零，理論上多次重試的結果誤差平均數為零。 信度的原理--真實分數與測量誤差 測量誤差 非系統誤差 隨機的　沒有規則　不可預測的 稱為隨機誤差，愈大則信度愈低 系統誤差 固定一致的影響測驗 稱為常誤或偏誤 通常不影響信度，但會影響效度。 信度的原理--真實分數與信度 X = T + E Ｓx 2=Ｓt 2 +Ｓe 2 Ｓx 2 　實得分數總變異量 Ｓt 2　 真實分數的變異量　　 Ｓe 2　 測量誤差的變異量 信度的原理--真實分數與信度 實得分數的總變異量是由真實分數所造成的變異比率和誤差分數所造成的變異比率之和。 Ｓx 2/Ｓx 2 =Ｓt 2/Ｓx 2 +Ｓe 2/Ｓx 2 信度rxx為真實分數的變異量與實得分數的變異量之比率。 rxx =Ｓt 2/Ｓx 2 或　 rxx =Ｓx 2/Ｓx 2 -Ｓe 2/Ｓx 2 = 1 -Ｓe 2/Ｓx 2 估計信度的方法 重測方法 複本方法 內部一致性方法 評分者方法 每種方法都在說明測量誤差的不同來源 重測方法 採用同一個測驗在不同時間，重複測量相同的一群受試者兩次，根據這兩次分數求得的相關，稱為重測信度係數。 此係數可以表明測驗結果經過一段期間後的穩定性，故又稱穩定係數。 重測方法 重測間隔時間 視工具的用途來決定間隔時間 缺點 易受練習與記憶影響 題目的性質因重測而改變，如推理變記憶 無法複製相同情境 複本方法 複本測驗　題目不同但內容相似 指兩份測驗在內容　型式　題數　難度　指導說明　時間限制　與例題等方面，必須類似或相等。通常是根據相同的設計說明表分別獨立編制而成。 兩個複本測驗實施於一群相同的受試者，依據所測量到的分數求相關，即複本信度。 此信度係數可以說明兩個複本測量相同行為或內容的程度。信度愈高，試題樣本預可靠，愈能代表所預測量之範圍。 實施複本測驗的方法 同一時間連續實施 反應工具內容所造成的誤差，無法反應受試者本身所造成的誤差，此種複本信度又稱等值係數。 間隔一段時間實施 可反應工具內容所造成的誤差與受試者本身所造成的誤差，此種複本信度又稱穩定與等值係數。 複本方法的缺點 複本測驗編製不易　費時　成本高 還