(1)提升效度方法,並說明理由:French(1996)提出測驗之前必須要有充分訓練及實際演練評分的作為,測驗單位要擬定評分流程,讓評審在評分時有共同的認知。
建立評分標準和指引,並提供評分培訓:
評分標準和指引:制定明確的評分標準和指引,以確保評分者在評估作文時有一致的準則。標準和指引應涵蓋作文的結構、內容、語言表達、創意和組織等方面,並提供具體的描述和範例,以協助評分者理解和應用評分標準。
評分培訓:提供評分者相關的培訓,使他們熟悉評分標準和指引,並能夠正確地應用它們進行評分。培訓可以包括解釋評分標準和指引的內容,進行範例作文的評分演練,討論評分者之間的差異和共識,並提供即時的反饋和指導。
理由:
一致性:建立評分標準和指引有助於確保評分者在評估作文時有一致的準則。這有助於降低主觀因素的影響,提高評分的一致性和可靠性。評分者將根據明確的標準進行評估,並能夠在不同作文之間進行客觀比較。
透明度:評分標準和指引提供了對評分者和參賽者的透明度。參賽者將能夠理解作文評分的依據,並明確知道如何提高他們的作文品質。評分者也能夠清楚地解釋評分決策,使評分結果更具可信度和可接受性。
專業性:評分培訓確保評分者具備相應的專業知識和技能,能夠準確地應用評分標準和指引進行評估。這提升了評分者的專業水平,減少了評分偏差和主觀性,並增加了評分的效度和公正性。