阿摩線上測驗
登入
阿摩線上測驗
登入
學習重點 效度是測驗品質的核心指標：效度是指一份測驗能測到「所欲測量的特質或行為特性」的程度。測驗分數若不能反映欲測量的特質，即使作答容易、計分穩定，仍不具備足夠效度。 先辨認效度類型，再判斷適用情境：以測驗分數與外在效標的相關來檢驗，屬於效標關聯效度；以測驗編製所依據的理論來檢驗，屬於建構效度；依教學目標與內容範圍檢核命題，屬於內容效度。 效標關聯效度依效標取得時間區分：新測驗與效標測驗同時施測，屬於同時效度；以新測驗分數預測未來的效標表現，則屬於預測效度。 不同測驗有不同效度需求：一般學科考試最需要內容效度；篩選、選才或預測未來表現的工具（如憂鬱傾向篩選、音樂班甄選），最需要效標關聯效度；以特定理論為基礎編製的心理特質測驗，則重視建構效度。 效度不等於信度、常模或效標：信度關心分數是否穩定一致；效度關心測驗是否測到想測的東西。常模與效標都只是參照標準，不是效度本身。 核心觀念 一、效度的基本意義 效度（validity）是測驗能夠測出其所欲測量的行為特性、特質或理論構念之程度。判斷效度時，要確認三件事：測驗要測什麼、實際測到什麼，以及兩者是否相符。例如，一份音樂性向測驗若主要測量與音樂無關的知識，便不是有效的音樂性向測驗。 效度不是單一指數，而是由多項證據共同支持的概念。常見類型包括內容效度、效標關聯效度、建構效度，以及較不具實證意義的表面效度。不同類型回答的問題不同，不能因為具有其中一種效度，就認為已具備所有面向的效度。 概念意義一句話辨識 效度測驗能測出所欲測量特質的程度測得「對不對」 信度測驗分數的穩定性與一致性測得「穩不穩」 常模解釋分數時用來比較的參照團體表現跟「誰比」 效標用來檢驗效度的外在參照標準拿「什麼來對照」 二、效標關聯效度：測驗分數與外在效標的關係 效標關聯效度（criterion-related validity）是以實證分析的方法，求取測驗分數與外在效標之間的相關程度，來評估測驗效度，因此也稱為實證效度或統計效度。效標是測驗之外、能代表所欲測量特質的外部表現。（注意：考題有時寫作「校標」，指的就是「效標」。） 常見的效標包括： 學生的學業成績。 專業診斷結果或臨床晤談結果。 未來的學業表現、學習成效或工作表現。 另一份已被公認具有良好效度的測驗結果。 典型情境：學習策略量表以量表得分與樣本班級學業成績之間的相關來建立效度，就是效標關聯效度。篩選憂鬱傾向的測驗，要看分數能否對應專業診斷等效標；音樂性向測驗用來篩選音樂班學生，要看分數能否預測日後的音樂學習表現。凡是「篩選、甄選、預測」用途的測驗，最需要強調效標關聯效度。 類型效標取得時間判斷重點典型例子 同時效度與新測驗同時（或幾乎同時）取得測驗分數與同時取得的效標分數之相關把新編測驗與效標測驗一併施測，求兩者分數的相關 預測效度效標在未來才取得現在的測驗分數能否預測未來表現以性向測驗分數預測入班後的學習成就 三、建構效度：測驗是否反映理論構念 建構效度（construct validity）是指測驗能測量到其編製所依據的理論構念的程度；換言之，是以測驗編製所依據的理論來考驗效度。具有建構效度的測驗，其題目內容與組成符合理論架構。 例如，若理論將學習策略分為計畫、監控與調整等面向，測驗就應設計對應題目，並以資料確認作答反應確實呈現這些面向。若宣稱測「學習策略」，題目卻只反映一般學業程度，便欠缺建構效度。 建構效度的常見證據： 聚斂效度：與測量相同構念的其他測驗應有高相關。 區辨效度：與測量不同構念的測驗應有低相關。 因素分析：實測資料的因素結構是否符合理論假設的向度。 聚斂效度與區辨效度屬於建構效度的檢驗方式；若題目只是以量表得分與學業成績求相關，並未涉及「相同構念的其他測驗」，就不能稱為聚斂效度，而是效標關聯效度。 建構效度不取決於測驗名稱或類型。人格測驗、智力測驗都可以檢驗建構效度，但「是人格測驗」並不代表具有建構效度。 四、內容效度：一般學科考試的重要條件 內容效度（content validity）是指測驗題目是否能充分且適當地代表所欲測量的教材內容與教學目標。一般學科考試（成就測驗）最需要具備內容效度，因為其目的在評量學生對該學科內容的學習成果。 判斷內容效度時，通常考量： 命題是否符合課程目標與教學內容。 重要內容是否都有適當題目涵蓋，有無偏重或遺漏。 各單元、各認知層次的題數比例是否合理。 依「教材內容 × 認知層次」編製的雙向細目表，是建立內容效度的主要工具。因此「按照雙向細目表命題」對應的是內容效度，而不是建構效度。內容效度多由專家邏輯判斷，屬於邏輯效度。 五、表面效度與其他易混淆名詞 表面效度是指測驗從外觀上「看起來」是否能測量其宣稱的特質，例如題目語意流暢、格式清楚、讓受試者覺得合理。表面效度可提高受試者的作答意願，但外觀合理不代表真正有效，不能取代其他效度證據。 複本屬於信度的概念（複本信度），檢驗兩份等值測驗分數的一致性，不是檢驗測驗是否測到正確內容，因此不是學科考試所需的效度類型。 常考陷阱 「與學業成績求相關」誤選聚斂效度或內容效度。只要題幹出現「得分與外在表現（成績、診斷、未來表現）的相關」，就是效標關聯效度。 「實證分析測驗分數與外在效標的關聯」誤選建構效度。關鍵字「外在效標」直接對應效標關聯效度。 篩選、甄選工具誤選內容效度或建構效度。憂鬱傾向篩選、音樂班甄選等用途，重點在分數能否對應實際狀況或預測未來表現，應選效標關聯效度。 「一併施測求相關」誤選預測效度。同時施測是同時效度；效標在未來才取得才是預測效度。 建構效度的敘述誤選「它是一份人格測驗」。測驗類型不是判斷依據；正確敘述是「題目內容與組成符合理論架構」。 建構效度的敘述誤選「按照雙向細目表命題」。雙向細目表對應內容效度。 建構效度的敘述誤選「語意完整流暢、結構嚴謹」。這屬於試題品質或表面效度，不能證明測到理論構念。 「以編製所依據的理論考驗效度」誤選內容效度。關鍵字「理論」對應建構效度。 一般學科考試誤選效標關聯效度、表面效度或複本效度。學科考試要代表教學內容，應選內容效度；複本屬信度概念。 「能測出所欲量度的行為特性之程度」誤選信度或效標。這是效度的定義；信度是穩定一致，效標只是檢驗效度的外在標準。 記憶口訣 效標看相關，內容看細目，建構看理論；同時一起測，預測看未來。 學科考內容，篩選看效標；表面只是「看起來」，信度是「測得穩」，效度是「測得對」。