试题反应理论(item response theory; irt).pptVIP

試題反應理論(Item Response Theory) 課程主題 10月24日(三) 心理測驗編製與基本統計 11月28日(三) 古典測驗理論—信度理論 12月26日(三) 試題反應理論 真實分數模式 真實分數的存在並不受測量次數的影響，它代表長期測量結果「不變」的部份。而實際上，單獨一次測量所得的實得分數， 總會與真實分數間產生一段差距，這段差距即稱作「隨機誤差分數」（random error score）， 或簡稱為「誤差」（error）；誤差分數深受測量工具之精確度的影響很大，它代表某次測量結果「可變」的部份。若以數學公式來表示，這兩種分數與實得分數間的關係可以表示如下： 真實分數理論的基本假設一 χ = t ＋ e χ 代表實得分數， t 代表真實分數， e 代表誤差分數。 測量標準誤 如果我們能以同一個測驗對一個學生重複測驗多次，每次的得分有點不同，這位學生分數的變異量之大小與信度有直接的關係。信度愈低，則學生的變異量（散佈範圍）就愈大。信度愈高，則各次得分之變異量就愈小。我們可用統計的方法來預估學生測驗分數可能的變異量，此即「測量標準誤」（Standard error of measurement）。 試題統計分析：難度（通過率） 試題的難度 (P) 被定義為全體受試者答對或通過該題的百分比 (percentage passing) 鑑別度 (item discrimination) 比較高、低分組的受試者在個別試題上通過人數的百分比， D 愈大表示試題愈能鑑別出高、低分組的受試者，並且個別試題與測驗總分的一致性愈高。 地理題 (P=.8，D=.32) 下圖是北半球四座山的示意圖，圖中分別標明山腳處不月份的月均溫。平均而言，地勢每升高100公尺，氣溫降低0.6℃。請問哪一座山的山頂，最可能出現終年積雪的現象﹖ (A)甲 (B)乙 (C)丙 (D)丁? 歷史題(P=.67，D=.45)(P男＝.60，P女＝.71) 作家描述一個城市：「與倫敦人口差不多，都在五萬人上下，全世界最上等的羊毛在此地加工，織成布料後，行銷各地。許多商人集資，要在市中心建一座大教堂。工程進行中，商船隊除了帶回印度香料外，還帶回亞洲黑鼠，使全城五分之四的人在一年中相繼死亡，勞工短缺，必須緊急進口奴隸應急，教堂興建工作才得以繼續。」這座城市可能是：(A) 十世紀的君士坦丁堡 (B) 十二世紀的雅典(C) 十四世紀的佛羅倫斯 (D) 十六世紀的巴黎? 數學甲試卷難易度分布 古典測驗理論之限制 用原始分數(或衍生分數)代表能力 仰賴複本測驗(parallel forms) 古典測驗理論所採用的指標，諸如：難度、鑑別度、選擇題的誘答力、信度等，都是樣本依賴的指標。 假定所有人具有相同的的測量標準誤 試題反應理論(item response theory, IRT) 受試者在某測驗上的表現情形,可由一組因素來加以預測或解釋，這組因素稱為潛在特質(latent traits)或能力(abilities)。 受試者的表現和潛在特質之間的關係，可透過一條連續遞增(monotonicallyincreasing)的函數來解釋，把不同能力的學生在某試題的得分期望連結成線，所形成的曲線則稱為試題特徵曲線(item characteristiccure，簡稱ICC) 能力（或特質）極低的受試者(L-θ)答對的機率(p)微乎其微，我們以答對率p=.001為例來做圖. 能力（或特質）極高的受試者(H-θ)答對的機率(p)極高，我們以答對率p=.999為例來做圖. 其餘受試者答對的機率介於兩者之間，我們以答對率p=.900為例來做圖. 參數：b [beta] 試題難度 a [afa] 試題鑑別度 c 猜測度 i=1…..n，n是測驗的總題數，J是考生數 e代表以底為2.718的指數。 常數D=1.702，θj 為考生 j 的能力 pi(Θ) 為能力為ΘJ的考生答對i試題i的機率 且pi(Θ)是一種S形曲線，其值介於0與1之間 單參數對數型模式 雙參數對數型模式 三參數對數型模式 IRT基本假設 單向度(unidimensionality) :測驗中的各個試題都測量到同一種共同的能力或潛在特質 局部獨立性(local independence):考生之作答情形完全由能力（特質）所影響 非速度測驗 知道--正確假設(know--correct assumption) IRT不如CTT普遍之因 IRT是一種複雜深奧的測驗理論，