《kappa一致性系数与肯德尔和谐系数》.docx

kappa一致性係數與肯德爾和諧係數 邱國智 游美惠 詹志偉 大綱 信度 誤差越小 信度越高 穩定性(stability) 一致性(consistency) 可靠性(trustworthiness) 測量工具的： 信度-信度估計方法 kappa一致性係數（K coefficient of agreement；K） 評分者實際評定一致的次數百分比 評分者理論上評定的最大可能次數百分比 為信度(reliability)測量工具之一 兩者的比率 kappa一致性係數（K coefficient of agreement；K） 適用時機 自變項 類別變項 依變項 類別變項 再測信度 test-test reliability 內部一致性信度coefficient of internal consistency 評分者間(=2)信度inter-rater reliability kappa一致性係數（K coefficient of agreement；K） 一般Kappa公式 ； ； o c kappa一致性係數（K coefficient of agreement；K） K值落在-1與1之間，但通常介於0與1之間；當完全一致時，則K=1，當完全不一致時，則K=0 一致性 kappa一致性係數（K coefficient of agreement；K） 兩位教授評分39個申請入學徵試者書面資料是否符合入學標準，求其Kappa值並說明是否具一致性… 評分結果敘述如下： 教授1與教授2皆認定合格的有22位； 教授1與教授2皆認定不合格的有11位； 教授1認為合格但教授2認定不合格的有4位； 教授1認為不合格但教授2認定合格的有2位 kappa一致性係數（K coefficient of agreement；K） 教授1 教授2 合格 不合格 邊際總和 合格 22 2 24 不合格 4 11 15 邊際總和 26 13 39 依文字敘述可得一列聯表格 kappa一致性係數（K coefficient of agreement；K） SPSS運用 對稱性量數 數值 漸近標準誤a 近似 T 分配b 顯著性近似值 同意量數 Kappa 統計量數 .667 .124 4.189 .000 有效觀察值的個數 39 a. 未假定虛無假設為真。 b. 使用假定虛無假設為真時之 漸近標準誤。 kappa一致性係數（K coefficient of agreement；K） kappa係數不只能應用於2×2表，也能用於配對的表格(3×3、4×4、5×5…)，但只能表現一致性的百分比，本身無法表示評分者的「不一致性」是隨機還是具系統性的，因此還需對資料作進一步的檢驗。 到目前為止是屬未加權作法，亦是將所有不一致的程度都視為相等的狀況。 評論 肯德爾和諧係數（the Kendall’s coefficient of concordance；W） 實際上每個被評物件所評等級之和 與所有這些和 的平均數 的離差平方和 每個被評物件所評等級之和與所有這些和的平均數的理論上最大可能離差平方和 為信度(reliability)測量工具之一 兩者的比率 肯德爾和諧係數（the Kendall’s coefficient of concordance；W） 適用時機 自變項 次序、等距、等比變項 依變項 次序、等距、等比變項 再測信度 test-test reliability 內部一致性信度coefficient of internal consistency 評分者間(≧3)信度inter-rater reliability 肯德爾和諧係數（the Kendall’s coefficient of concordance；W） 同一評價者有相同等級者之公式 ； ； N—被評的人數或作品數； K—評分者人數； S—每個被評物件所評等級之和Ri與所有這些和的平均數 的離差平方和， 當評分者意見完全一致時，S取得最大，故0≤W≤1。 肯德爾和諧係數（the Kendall’s coefficient of concordance；W） N—被評的人數或作品數； K—評分者人數； S—每個被評物件所評等級之和Ri與所有這些和的平均數 的離差平方和， 當評分者意見完全一致時，S取得最大，故0≤W≤1。 同一評價者無相同等級評定時，W的計算公式 ； ； 肯德爾和諧係數（the Kendall’s coefficient of concordance；W） W值落在0與1之間；當完全一致時，則W=1，當完全不一致時，則W=0 一致性 肯德爾和諧係數（the Kendall’s coefficient of conco