測驗信度.pptVIP

測驗的效度 林陳涌 國立台灣師範大學 生物學系 信度…... 信度所關心的是測驗分數的一致性或穩定性。 一個具有良好信度的測驗，使用在不同的主試者　評分者　時間　情境或使用類似的問題，其所得的分數應該接近相同或一致。 一般而言分數愈一致，受誤差的影響愈小。所以信度主要在說明測驗分數中測量誤差所佔的成分。 效度…... 測驗有種種不同的目的， 這些目的是否能達到需視測驗效度高低而定。 測驗的效度高，則測驗能實現所欲測量的目的。如果效度低，不僅無法達成目標，甚至會提供不正確的資料而作成錯誤的決定。 效度的意義 傳統定義　指測驗分數的正確性。指一個測驗能夠測量到他所想要測量的特質的程度。 數學測驗的分數若主要是由語文能力來決定，這樣的測驗就無效(效度低)。 以上的定義說明一個測驗只有一個效度，事實不然，效度可依不同的方法得到不同效度。 較滿意的定義　一個測驗在使用目的上的有效性。更具體的是指測驗能夠達到某種目的的程度。 效度的特性 效度無法直接測量，但可從其他資料推論。因此使用者必須審慎判斷效度的證據是否適當或令人滿意。 效度的判斷，主要依據測驗分數的使用目的，或測驗結果的解釋。因此，效度是屬於測驗的結果，而非測驗工具本身。因此，效度稱為測驗結果的效度或測驗結果解釋的效度，更為適當。 效度的特性 效度是程度上的差別，而非全有或全無的問題。因此選擇測驗時，應考慮測驗是否適合使用的需要？如果是，其效度有多高？在甚麼情境下有效？ 效度在使用的目的和情境方面具有特殊性，不宜視為普遍性的特質。對某個目的可能有很高的效度，對另一個目的可能很低。因此選擇測驗時，應依據使用的獨特目的而選用具有適當效度資料的測驗。 效度的理論 一個測驗的總變異量包含三個部分 Ｓx 2=Ｓco 2 +Ｓsp 2 +Ｓe 2 Ｓx 2 　總變異量 Ｓco 2　共同因素變異量　　 Ｓsp2　 獨特變異量　 Ｓe 2　 誤差變異量 效度的理論 共同因素 指某個測驗的變異量和其他測驗的變異量所共同分享的部分。易言之，就是指兩個或兩個以上的測驗所有的共同因素。 獨特因素 指某測驗的系統變異量，義及非由其他測驗所分享的部分。 效度的理論 Ｓx 2/Ｓx 2 =Ｓco 2 /Ｓx 2 +Ｓsp 2 /Ｓx 2 +Ｓe 2 /Ｓx 2 效度可界定為由共同因素所造成的變異量比率。 Val.=Ｓco 2 /Ｓx 2 =1-Ｓsp 2 /Ｓx 2 -Ｓe 2 /Ｓx 2 效度的種類 測驗效度既然要視測驗達到其使用目的的程度而定，評估一個測驗的效度因而不能只看效度的高低，尚需考慮資料是否適合使用的目的。 美國心理學會依目的分為 內容效度 效標關聯效度 構念效度 內容效度的意義 指測驗內容的代表性或取樣的適切性。 考量成就測驗的內容效度，需考慮題目能否代表以下因素 教學目標 教材內容 判斷內容效度的方法 內容效度沒有一個數量的表示方法，他的確定主要是採用邏輯的分析方法，仔細判斷每一個題目是否符合教材內容與教學目標。 如果測驗的題目很能代表教材內容的樣本，及所預期的行為改變，而沒有其他無關因素(如閱讀能力或指導語不清楚)的影響，則表示測驗有良好的內容效度。 所以又稱合理或邏輯的效度 。 判斷內容效度的方法 雙向細目表 教材的內容與教學的目標 專家判斷 複本的編制 兩組人編制兩套試題，如果兩份內容大致符合，則表示測驗內容適當。 內容效度的應用 內容效度最適合於成就測驗的效度考驗。 因為內容效度可以解答成就測驗效度的基本問題: 測驗是否涵蓋特定的技能與知識的代表性樣本? 測驗成績是否不受無關因素的影響? 此外，成就測驗具有獨特的教材內容與學習經驗，測驗內容從中選擇出來，較易從事邏輯的分析和合理的判斷 。 表面效度 表面效度缺乏系統的邏輯分析，他只是指測驗給人的第一個印象好像測量甚麼東西，而不是指測驗事實上能測量到甚麼東西。 一般而言，具有內容效度的測驗，通常也具有表面效度，反之卻不盡然。 但表面效度對一個測驗來說，仍然是很重要的，因為具有表面效度，可使受試者感到親切感，並願意合作。 效標關聯效度 以經驗性的方法，研究測驗分數與一些外在效標間的關係，故又可稱為經驗效度或統計效度。 如果測驗分數和外在效標的相關愈高，表示測驗愈能有效預測外在效標。 外在效標指測驗所要預測的某些行為或量數。學業性向測驗以學校的學業成績作為效標。 同時效度與預測效度 同時效度 指測驗分數與實施測驗同一個時間所取得的效標之間的相關，旨在使用測驗分數估計個人在效標方面的目前實際表現。 新編職業測驗 目前工作成績 新編生物成就測驗　 在校生物月考成績 易於取得，故較易於考驗。此種效度可用來取代收集資料的複雜方法。 預測效度 指測驗分數與實施測驗後一段時間