62. 苗栗縣進行國語文競賽,要從參賽者當中選出最優秀的前三名,大會請來兩位裁判評分,請問對參賽者而言,兩位裁判哪一種評分者的信度指標較為重要?
(A)相關
(B)符合度
(C)Kappa 係數
(D)可靠性係數。

答案:登入後查看
統計: A(3256), B(763), C(1664), D(572), E(0) #97199

詳解 (共 10 筆)

#82361
Kappa一致性係數(K coefficient of agreement ; )
適用情況:二位資優鑑定委員將一群資優學生,依據診鑑工具的測量結果,將其歸屬在不同類別的資優班級中。
 
 
 
比較:
Kendall
和諧係數用於評分者可對評分對象定出等第;
Kappa
一致性係數用於評分者無法對評分對象定出等第,僅能將其分類。
169
11
#904848
Kappa係數是標準參照測驗的信度分析方法,會用在通過或精熟與否的測驗上,且可用於多名評分者。

此題要從參賽者當中選出最優秀的前三名,是常模參照測驗,
所以要選評分者信度
評分者信度又分成兩個內涵:
1.符合度: 計算評分者給予相同分數的百分比
2.相關: 評分者對受測者間的排序是否相同
這題強調的是評審選出的前三名是否一致,選相關會比符合度更適合。
 
結論:
1.如果這題的題目問的是「體育老師測量全班的發球技能(通過與不通過),保險起見測量兩次(以上)」或是
「兩位(以上)老師測量全班的發球技能(通過與不通過)」→可選Kappa係數
2.如果這題的題目問的是
「苗栗縣進行國語文競賽,要從參賽者當中選出最優秀的前三名,大會請來兩位裁判評分」→要選相關
3.如果這題的題目問的是「苗栗縣進行國語文競賽,大會請來兩位裁判評分,要計算評分者給予相同分數的百分比」→要選符合度


 
141
1
#1068366
1.斯皮爾曼等及相關  用作評分者信度
一或二位評分者評N位

ex:兩位評審評10件作品

2.肯德爾和諧係數 用作評分者信度
三位(包含)以上評分者評N位

ex:五位評審評10件作品

3.Kappa係數 
k位評分者評N位,評定為m種類別

ex:憂鬱、躁鬱、自閉、反社會,由六位心理醫生評10位病人各為何種心理疾病

ex:四位評審評15件作品風格,各為田園、人物、海洋、動物哪一種。

98
0
#831458

評分者信度的兩個概念

1.符合度:評分者所給的絕對分數是否相同,可以顯現評分者的嚴苛程度的一致性。

2.相關係數:評分者對受測者間的排序是否相同,即兩者對受測者的排序相似,評分者的相關就高。

71
0
#384692
依評分者人數區分: 兩名(名次法用Spearman等級相關係數; 分數法用Pearson的積差相關)
兩名以上(名次法用Kendall和諧係數;  分數法用 變異數分析 Hoyt法)

以上陳嘉陽下冊 p.26, 歡迎討論指教!
61
0
#178908
To 4F:kappa一致性係數只能分類,不能排等第,所以不符合題意,故不選
         而評分者間信度是從所評的分數求相關,此相關係數為評分者信度.
54
0
#60850
評分者間信度

由多位不同評分者分別獨立評閱同一份測驗卷,而估計所給分數的一致性,稱為評分者信度。

如果測驗屬於客觀試題,計分不會受到評分者主觀判斷的影響,則不必估計其評分者信度。然而測驗的計分會受到評分者主觀判斷的影響,而導致評分的誤差,則需考慮其評分者信度。例如論文式的成就測驗、投射測驗等。

評分者信度的估計方法,是從測驗卷中抽取一些樣本,單獨由兩位評分者(或若干位)對每一份試卷評分,然後根據所評的分數求相關,此相關係數即為評分者信度。多位評分者間的評分結果愈一致,表示評分者間信度越高。

如果所用的測量尺度是「順序尺度」,

51
0
#509408
相關係數為評分者信度。
47
0
#60849

評分者信度(Scorer Reliability)

其估計方法,是從測驗卷中抽取一些樣本,單獨由兩位評分者(或若干位)對每一份試卷評分,然後根據所平的分數求相關,

此相關係數即為評分者信度。(郭生玉,2000 P.65) 

35
0
#571075
符合度-=百分比一致性
標準參照測驗的信度,分析前後兩次分類結果是否一致的統計方法.
22
0

私人筆記 (共 1 筆)

私人筆記#100129
未解鎖
Kappa係數 : 多名評分者   相關...
(共 30 字,隱藏中)
前往觀看
2
0