該試卷用途為測量學生學習成效的前後測,因此可以由授課教師列出雙向細目表,以較為主觀的方式評估該試卷之內容效度;或是邀請相關領域的專家學者來評估該份問卷,以獲得專家效度。
內容效度:利用雙向細目表等協助審查試題取樣的適切性。
同時效度:另找一份較具公信力的英文測驗,與自編測驗同時測驗,檢視兩者之間的相關程度。
參考答案:
效度為測驗分數的有效程度,只測驗能正確的測量到符合預期效果的程度,以下舉出兩種評估該試卷效度之作法:
(一)雙向細目表:以雙向細目表檢測其內容效度是否符合教學目標與教材內容,其步驟為列出教學目標、評估目標之相對重要性、建立雙向細目表,最後分析試題與雙向細目表之符合程度。
(二)效標關聯效度:其分為同時效度與預測效度,前者可藉由此測驗加以分析英語寫作能力程度之關聯;後者可藉由此測驗預測英語口說檢定之成績。
1. 內部一致性分析之團體對照法:依據學生測驗總分高低,分為高低分組,接著比較這兩組學生在每個試題上的答對百分比,若該題的高分組其答對百分比顯著的高於低分組的話,即可保留下來,用以評估此份試卷的構念效度。
2. 專家判斷:建立雙向細目表,必須先列舉出教材內容的單元與單元目標,再判斷每個單元內涵與各項目標的相對重要性,再次決定每個細格的重要性以形成完整的雙向細目表,最後測驗編製者依據此細目表來編製測驗。若雙向細目表的架構愈能顧及教材內容與教學目標,則內容效度將愈高。其次輔以測驗題目、測驗編製程序、教材分析、課程標準分析和參與測驗編製人員等指標來判斷,以評估此試卷之內容效度。
資料來源:
1. Sharon筆記
2. 國家教育研究院
1. 內容效度
2. 效標關聯效度