阿摩線上測驗
登入
阿摩線上測驗
登入
學習重點 掌握內容效度的判斷核心：測驗試題是否充分涵蓋原定教學目標所界定的主要內容與範圍；若有主要教學目標未被評量，內容效度就不足。 辨認課程、教學與評量的對應性：素養導向評量應與核心素養、學習重點及學習目標相互對應，這種「評量對應目標」的要求，強調的是內容效度。 同時檢查內容範圍與能力層次：即使計算題涵蓋各種運算類型，仍可能遺漏應用、解釋或生活情境問題解決等目標。 區分內容效度與其他效度、信度：內容效度關心「考的內容是否切合且充分代表目標」；效標關聯效度看與外部效標的關聯；信度則關心測量結果的穩定性或一致性。 核心觀念 一、內容效度：考題是否充分代表預定評量的內容 內容效度是指測驗試題能否適切且充分地涵蓋預定測量的內容領域。用在學校學習評量時，就是檢查試題是否對應原定課程範圍、教學目標，以及目標要求的知識與能力。命題時考題能涵蓋原定的課程範圍，這份測驗最可能具有的就是內容效度。 判斷時要抓住兩個重點：相關性與代表性。相關性是試題確實在評量原定目標；代表性則是整份測驗對主要內容與能力有適當取樣，不能只集中在其中一小部分。因此，「每一道題目都在教學範圍內」仍不保證整份測驗有良好的內容效度。 測驗通常無法考遍所有教材細節，但應充分代表重要目標。若某項主要教學目標完全沒有相應試題，就無法根據測驗結果完整判斷學生在該單元的學習成果，屬於內容涵蓋不足。 內容效度主要透過邏輯分析與專家判斷來檢驗，也就是比對試題與教學目標、課程範圍是否相符，通常不是靠計算測驗分數與外部效標的相關係數來決定。 二、涵蓋範圍之外，也要涵蓋目標要求的能力 教學目標不只規定「教什麼」，也規定學生應該「能做什麼」。例如分數加減單元可能同時要求同分母運算、異分母運算，以及運用分數加減處理生活情境問題。這些目標彼此相關，卻不能完全互相取代。 若整份測驗只安排計算題，即使各類計算題比例合計為百分之百，也只能表示所有題目都分配給這些計算內容，不代表所有教學目標都已受到評量。當生活情境應用也是原定目標，卻完全未被納入時，試題就未能充分涵蓋原定教學目標的主要內容及範圍，內容效度便有不足。 因此，命題時應同時檢查內容面向與能力層次。不能因為學生會操作算式，就直接認定學生也能辨識生活問題中的數量關係、選擇合適運算並解決問題。 三、素養導向評量的對應性 素養導向評量設計強調評量與核心素養、學習重點及學習目標之間具有對應性。就評量概念而言，這種做法強調的是內容效度：確認評量實際蒐集到的表現，符合課程預定培養的內容與能力。 題幹若強調「依據學習目標命題」、「涵蓋原定課程範圍」、「評量內容與學習重點相符」、「評量與目標具有對應性」，都應優先聯想到內容效度。即使使用生活情境，也要檢查情境中的任務是否真正對應目標；出現生活化文字，本身並不能保證內容效度良好。 四、如何檢查與提升內容效度 列出目標：確認本次評量預定涵蓋的主要內容與能力。 規劃配置：依目標的重要性與教學重點安排題目及配分，避免過度集中於單一類型。 檢查對應：確認各主要目標是否有適當試題，以及試題是否確實要求學生展現該項能力。 審查修正：可運用雙向細目表整理教材內容與認知層次的配置，並透過熟悉課程者的審查，找出遺漏或偏重之處。 涵蓋各項目標不等於各類題目必須平均分配。合理比例應依目標的重要性與評量目的決定；不能只靠增加題數，也不能機械地讓每類題目占相同比例。 五、與其他效度、信度概念的區別 概念判斷重點辨識線索 內容效度試題是否適切且充分代表預定內容與目標課程範圍、目標對應、內容涵蓋、雙向細目表 效標關聯效度測驗結果與外部效標之間的關聯以其他表現或指標作為比較依據 同時效度測驗結果與同一時期取得之效標的關聯，屬效標關聯效度當前測驗與當前效標的關係 聚斂效度測量相同或相近構念的不同測量結果是否具有預期的高相關，屬建構效度的證據相近構念、不同測量方式的結果相互呼應 外在效度研究結果能否推廣至其他對象、情境或時間研究結果的推廣性 重測信度同一測驗於不同時間施測，結果是否穩定隔一段時間再測 內部一致性信度同一測驗內各題的測量結果是否具有一致性題目之間的一致程度 常考陷阱 「基礎題較多，學生容易得高分，所以內容效度良好」：得分高低不是內容效度的判準。若為了提高作答表現而漏掉主要目標，仍屬涵蓋不足。 「只要題目數量夠多，就能反映整個單元的成果」：題數多不等於內容有代表性。大量重複評量同一技能，無法補足其他目標完全未被評量的缺口。 「各類題目比例加總為百分之百，代表內容完整」：百分比的分母是整份測驗，不是全部教學目標。應回頭檢查是否有重要目標未被列入。 「學生能力不同、成績不一致，所以內容效度不足」：理由錯置。學生之間有分數差異是正常現象，不能據此判定內容效度不足；內容效度應由試題與目標的對應及涵蓋情形判斷。看到「內容效度不足」的選項，還要確認其理由是否為「未涵蓋原定教學目標」。 「考題都沒有超出範圍，就一定有良好內容效度」：沒有超出範圍只是檢查的一部分，還要確認重要範圍是否充分受到評量，避免只考局部內容。 「與核心素養、學習目標一致，是內部一致性信度」：此處的一致是課程目標與評量之間的對應，屬內容效度；內部一致性信度則著重同一測驗內各題測量結果的一致性。 「評量與目標對應，是外在效度」：外在效度是研究結果的推廣性，與命題是否對應學習目標無關。 「涵蓋課程範圍，應選效標關聯效度、同時效度或聚斂效度」：這些都需要外部效標或其他測量結果的比較；題幹若只是檢查命題內容與課程目標、課程範圍的對應，應判為內容效度。 記憶口訣 「內容看涵蓋，目標要對應；信度看穩定，效標看關聯。」 作答先問：「原定要教、要學的主要內容與能力，是否都有適當評量？」只要重要目標遭到遺漏，即使題目很多、學生分數很高，也不能據此認定內容效度良好。