阿摩線上測驗
登入
阿摩線上測驗
登入
學習重點 掌握兩種參照方式的根本差異：效標參照看是否達到預定標準，常模參照看在團體中的相對位置。 能從評量目的判斷使用時機：精熟檢核、學習診斷、能力檢定偏向效標參照；排名、競爭性甄選、團體比較偏向常模參照。 區分信度的關注焦點：常模參照重視分數與相對次序的穩定；效標參照重視精熟或通過判定的一致。 申論作答須同時交代「意義、使用時機、信度考量」，並說明各種信度指標代表的意義，不能只列名稱。 核心觀念 一、效標參照測驗：以預定標準解釋表現 效標參照測驗又稱標準參照測驗，是將受試者的表現與事先界定的學習目標、能力要求或精熟標準比較，判斷其達成程度。這裡的「效標」是判斷學習表現的依據，不是其他考生的平均表現。因此個人結果不受同組其他人表現高低影響。 例如，教師依據某項計算能力的學習目標設計測驗，再依事先訂定的精熟標準，判斷學生是否具備該能力。解釋重點是「會了什麼、尚未會什麼、是否達標」，不必先知道全班排名。 常見使用時機包括： 精熟學習：確認學生是否達到單元目標，作為進入下一單元或接受補救教學的依據。 學習診斷與形成性評量：檢視特定目標的達成情形，找出學習困難，調整教學。 能力檢定與資格認定：依預定能力要求，判定是否具備最低必要能力，例如各類證照或基本能力檢核。 效標參照也可以描述不同程度的表現，不一定只呈現通過或不通過；但涉及精熟與否的決定時，切截分數及其附近判定的穩定性尤其重要。 二、常模參照測驗：以參照團體解釋表現 常模參照測驗是將個人的測驗表現，與特定參照團體（常模團體）的表現分布比較，以了解其相對位置。常模是由具代表性的參照團體測驗資料建立的解釋依據，常見表達方式包括百分等級與標準分數（如 z 分數、T 分數）。 例如，某生的百分等級為八十，表示其表現在該常模團體中約有百分之八十的人位於其下，不表示答對百分之八十的試題。解釋結果時，必須注意常模團體是否適合該受試者及評量目的，常模也需定期更新。 常見使用時機包括： 競爭性甄選：名額有限時，依相對表現選取考生，例如入學考試、甄選。 排序與比較：了解個人在班級、同年齡或同年級團體中的位置，例如標準化成就測驗、智力測驗。 依相對表現分組或安置：將相對位置作為分組、篩選或安置的參考資料。 三、兩種參照方式的比較 比較面向效標參照測驗常模參照測驗 比較依據預先界定的目標、能力要求或標準特定參照團體的表現分布 主要問題是否達標？已具備哪些能力？相較於他人，表現位於何處？ 結果解釋目標達成程度、精熟程度、通過與否相對排名、百分等級、標準分數 試題選擇重點能否適切涵蓋目標並支持達標判斷；不因鑑別度低就刪除重要目標的試題能否有效區分受試者的相對表現；偏好難度適中、鑑別度高的試題 分數分布教學有效時，可能多數人得高分，變異較小希望分數分散，以利區辨 典型用途精熟檢核、補救教學、能力檢定競爭性甄選、排名、團體比較 信度關注達標判定或絕對表現的一致性分數及相對次序的一致性 四、常模參照測驗的信度：可舉重測信度、複本信度 信度是測量結果的一致性或穩定性。常模參照用途重視能否穩定區分受試者，因此常以相關係數考察不同測量結果的相對一致性。 重測信度：同一群受試者間隔適當時間接受同一測驗，以兩次分數的相關程度考察時間上的穩定性。解釋時應注意記憶、練習及期間學習等因素。 複本信度：同一群受試者接受兩份依相同規格編製的平行測驗，以兩份分數的相關程度考察不同試題取樣下的等值性。兩份測驗須具有足夠的可比性，不能任取兩份試卷就視為複本。 內部一致性也是常見考量，例如以折半信度、KR-20 或 Cronbach's α 檢視試題反應的一致性。申論要求各舉兩個時，選擇兩種並完整說明意義即可。 五、效標參照測驗的信度：可舉分類一致率、Kappa係數 效標參照測驗的分數變異常較小，若只用傳統相關係數，信度可能被低估，也未直接回答「判定是否穩定」。當測驗用來決定「精熟或未精熟」「通過或未通過」時，重點是重複測量能否得到一致的分類決定。可讓同一群人接受重複施測或平行測驗，再依同一標準分類，考察下列指標： 分類一致率（百分比一致性）：計算兩次測量中，被判為相同類別的人數占全體人數的比例。例如，兩次均精熟或兩次均未精熟，皆屬一致判定。一致率越高，表示分類決定越穩定。 Kappa係數：比較實際觀察到的一致程度與機會因素所預期的一致程度，對偶然一致加以校正，補充分類一致率未扣除機會一致的限制。 上述兩者是分類（決策）一致性的不同指標，可以作為效標參照測驗信度的兩項考量。此外也有僅用單次施測資料估計分類一致性的方法。作答時應指出它們都在檢查達標判定是否一致，並交代 Kappa 會校正機會一致。 常考陷阱 「標準參照就是標準化測驗」：錯。標準參照談的是分數解釋依據；標準化談的是施測、計分等程序的一致規範，兩者屬不同面向。 「有及格分數就是效標參照」：須看門檻如何決定。依能力要求設定標準，才符合效標參照精神；若依排名或固定錄取比例決定通過者，仍屬常模參照的判斷邏輯。 「效標是指團體平均表現」：錯。效標是預定的目標或能力標準；與團體表現比較的是常模參照。 「常模參照可以直接證明能力達標」：錯。排名高代表相對表現較好，不能單憑排名確認是否具備指定能力；達標也不保證排名在前。 「百分等級八十＝答對百分之八十」：錯。百分等級是相對位置，答對率是絕對表現。 「效標參照一定要讓部分學生不及格」：錯。若所有人均達標，可以全部通過；通過比例不必固定。 「效標參照不能使用傳統信度方法」：過度絕對。應依分數用途選擇信度證據；涉及精熟分類時，須特別考察決策一致性，不能只看分數相關。 「兩次分數高度相關，通過判定必然一致」：錯。相關主要反映相對次序；即使次序穩定，整體分數移動仍可能讓部分學生跨越通過門檻。 「分類一致率高，就已排除偶然因素」：錯。原始一致率包含機會一致；Kappa 才進一步作校正。 「信度高代表標準合理、內容適切」：錯。結果穩定不等於測到預定能力，仍須考察效度及標準設定的適切性。 記憶口訣 「效標看達標，常模看位置；常模重測、複本，效標一致、Kappa。」 申論依「定義→使用時機→兩項信度及其意義」展開，將比較對象與信度焦點連在一起，答案才完整。