62. 苗栗縣進行國語文競賽,要從參賽者當中選出最優秀的前三名,大會請來兩位裁判評分,請問對參賽者而言,兩位裁判哪一種評分者的信度指標較為重要?
(A)相關
(B)符合度
(C)Kappa 係數
(D)可靠性係數。
答案:登入後查看
統計: A(3256), B(763), C(1664), D(572), E(0) #97199
統計: A(3256), B(763), C(1664), D(572), E(0) #97199
詳解 (共 10 筆)
#82361
Kappa一致性係數(K coefficient of agreement ; K )
適用情況:二位資優鑑定委員將一群資優學生,依據診鑑工具的測量結果,將其歸屬在不同類別的資優班級中。
比較:
Kendall和諧係數—用於評分者可對評分對象定出等第;
Kappa一致性係數—用於評分者無法對評分對象定出等第,僅能將其分類。
Kendall和諧係數—用於評分者可對評分對象定出等第;
Kappa一致性係數—用於評分者無法對評分對象定出等第,僅能將其分類。
169
11
#904848
Kappa係數是標準參照測驗的信度分析方法,會用在通過或精熟與否的測驗上,且可用於多名評分者。
結論:
此題要從參賽者當中選出最優秀的前三名,是常模參照測驗,
所以要選評分者信度
評分者信度又分成兩個內涵:
1.符合度: 計算評分者給予相同分數的百分比
2.相關: 評分者對受測者間的排序是否相同
這題強調的是評審選出的前三名是否一致,選相關會比符合度更適合。
1.如果這題的題目問的是「體育老師測量全班的發球技能(通過與不通過),保險起見測量兩次(以上)」或是
「兩位(以上)老師測量全班的發球技能(通過與不通過)」→可選Kappa係數
2.如果這題的題目問的是「苗栗縣進行國語文競賽,要從參賽者當中選出最優秀的前三名,大會請來兩位裁判評分」→要選相關
2.如果這題的題目問的是「苗栗縣進行國語文競賽,要從參賽者當中選出最優秀的前三名,大會請來兩位裁判評分」→要選相關
3.如果這題的題目問的是「苗栗縣進行國語文競賽,大會請來兩位裁判評分,要計算評分者給予相同分數的百分比」→要選符合度
141
1
#1068366
1.斯皮爾曼等及相關 用作評分者信度
一或二位評分者評N位
ex:兩位評審評10件作品
2.肯德爾和諧係數 用作評分者信度
三位(包含)以上評分者評N位
ex:五位評審評10件作品
3.Kappa係數
k位評分者評N位,評定為m種類別
ex:憂鬱、躁鬱、自閉、反社會,由六位心理醫生評10位病人各為何種心理疾病
ex:四位評審評15件作品風格,各為田園、人物、海洋、動物哪一種。
98
0
#831458
評分者信度的兩個概念
1.符合度:評分者所給的絕對分數是否相同,可以顯現評分者的嚴苛程度的一致性。
2.相關係數:評分者對受測者間的排序是否相同,即兩者對受測者的排序相似,評分者的相關就高。
71
0
#384692
依評分者人數區分: 兩名(名次法用Spearman等級相關係數; 分數法用Pearson的積差相關)
兩名以上(名次法用Kendall和諧係數; 分數法用 變異數分析 Hoyt法)
以上陳嘉陽下冊 p.26, 歡迎討論指教!
61
0
#178908
To 4F:kappa一致性係數只能分類,不能排等第,所以不符合題意,故不選
而評分者間信度是從所評的分數求相關,此相關係數為評分者信度.
而評分者間信度是從所評的分數求相關,此相關係數為評分者信度.
54
0
#60850
評分者間信度
由多位不同評分者分別獨立評閱同一份測驗卷,而估計所給分數的一致性,稱為評分者信度。
如果測驗屬於客觀試題,計分不會受到評分者主觀判斷的影響,則不必估計其評分者信度。然而測驗的計分會受到評分者主觀判斷的影響,而導致評分的誤差,則需考慮其評分者信度。例如論文式的成就測驗、投射測驗等。
評分者信度的估計方法,是從測驗卷中抽取一些樣本,單獨由兩位評分者(或若干位)對每一份試卷評分,然後根據所評的分數求相關,此相關係數即為評分者信度。多位評分者間的評分結果愈一致,表示評分者間信度越高。
如果所用的測量尺度是「順序尺度」,
- 評分者為二人時,可以使用Spearman等級相關,或肯得爾等級相關(適用於小樣本)。
- 若有多位(兩人以上)評分者則使用肯得爾和諧係數。
51
0
#509408
相關係數為評分者信度。
47
0
#60849
評分者信度(Scorer Reliability)
其估計方法,是從測驗卷中抽取一些樣本,單獨由兩位評分者(或若干位)對每一份試卷評分,然後根據所平的分數求相關,
此相關係數即為評分者信度。(郭生玉,2000 P.65)
35
0
#571075
符合度-=百分比一致性
標準參照測驗的信度,分析前後兩次分類結果是否一致的統計方法.
標準參照測驗的信度,分析前後兩次分類結果是否一致的統計方法.
22
0