阿摩線上測驗
登入
阿摩線上測驗
登入
學習重點 雙向細目表是教學目標×教材內容的命題藍圖，應在命題前建立，各部分比重反映教學重點。 依雙向細目表命題、請同領域教師檢視內容代表性，主要在建立內容效度；成就測驗尤其重視內容效度。 區分內容效度、效標關聯效度、構念效度、表面效度，以及強調一致性與穩定性的信度。 選擇題可評量理解、應用與分析；題組題可透過共同材料評量高層次認知；誘答選項可提供教學診斷訊息。 分清常模參照與標準參照的選題目的，並能以高低分組表現判斷鑑別度。 核心觀念 一、雙向細目表的兩個向度 雙向細目表是編製成就測驗的命題藍圖，將教學目標與教材內容交叉排列，規劃各部分的題數或配分，檢查試題是否適切涵蓋課程重點。 教材內容：要考哪些單元、主題、概念或學習內容。 教學目標：期待學生學會什麼、能做什麼。認知目標可依記憶、了解、應用、分析、評鑑、創造等層次規劃。 兩個向度分別回答「考什麼內容」與「考到什麼能力」。教學進度、教學方式、教學過程、學生反應及評量方式，都不是取代這兩個向度的答案。 各細格的題數或配分應依教學重點安排，兼顧內容的重要性及教學投入，不能只求平均分配，也不能因某部分容易命題就大量出題。涵蓋範圍強調適切取樣與代表性，不代表每項教材細節都必須出題。 二、製作時機與命題程序 界定預期學習結果：先確立教學目標，再分析教材內容及學習重點。 建立雙向細目表：交叉配置內容與目標，分配題數、配分，並依測驗目的預先規劃預期難度。 依表命題：選擇適當題型，使試題符合內容與目標層次。 審題：檢查內容代表性、目標符合程度、文字清楚程度及答案適切性。 施測與分析：依作答結果分析難度、鑑別度及誘答選項表現，作為修題依據。 關鍵是先表後題：雙向細目表應在命題前製作；編製題庫時，也應先建立此命題架構，再進行供題、編碼與審核。 三、功能與限制：能規劃，不保證難易適中 雙向細目表能作為命題依據，使試題配合教材內容與教學目標，讓比重反映教學重點，主要有助於建立內容效度。 命題前可以規劃預期難度，但預期難度不等於實際難度。實際難度須依學生作答結果判斷，因此「讓試題難易適中」不是雙向細目表本身能保證的功能；它也不能直接算出信度或鑑別度。 段考、期末考等總結性測驗通常範圍較廣，宜運用雙向細目表規劃。形成性評量也可以使用，但若只是針對少數目標即時檢核，不一定每次都須製作正式的雙向細目表。「無論形成性或總結性測驗都必須使用」過於絕對。 四、效度與信度的判別 概念判斷重點典型線索 內容效度測驗內容是否充分且適切代表預定的內容與目標雙向細目表、依課綱命題、領域教師審題、涵蓋重要概念與學習表現 效標關聯效度測驗分數與外在效標的關聯程度，傳統上亦稱實徵效度與其他適當評量成績求相關，或檢驗對未來表現的預測能力 構念效度分數是否能依理論解釋為所欲測量的心理特質或能力理論假設、因素結構、相關證據 表面效度從表面看起來是否像在測量所宣稱的內容外觀印象，不能取代實質效度證據 信度測驗結果的一致性與穩定性重複施測、不同評分者、測驗內各題的一致程度 效標關聯效度可再區分：與同一時期適當效標的關聯，屬同時效度；對未來表現的預測，屬預測效度。將定期評量成績與全校共同評量成績求相關，主要是在蒐集效標關聯效度證據。 同領域教師審題不等於評分者信度。檢視題目是否代表教學內容，是內容效度；不同教師對同一份作答評分是否一致，才是評分者信度。同一測驗前後施測的一致性屬再測信度；測驗內各題的一致程度則涉及內部一致性信度。 成就測驗用來檢核已教內容及學習目標，故在本單元的測驗類型比較中，成就測驗最重視內容效度。 五、試題類型與認知層次 是非題、配合題、填充題：常用於記憶、辨認及基本知識檢核，但不能說只能測記憶。 選擇題：設計適當情境、資料或推理要求，可以評量理解、應用與分析。相較上述題型，較能廣泛評量這些能力。 誘答選項：若依學生常見錯誤或迷思概念設計，可由選答情形了解錯誤原因，提供教學診斷訊息。 題組題：以共同文本、圖表、實驗資料或生活情境搭配多個子題，可評量推論、分析與統整等高層次認知能力。 題組題是一種組題方式，子題仍可採選擇題。相較一般獨立選擇題，其主要優點是運用共同材料評量高層次認知；評分容易、評分客觀並非特有優點，命題也未必容易。認知層次最終仍取決於作答所需的思考歷程。 六、常模參照與標準參照 比較常模參照測驗標準參照測驗 主要目的區分學生在團體中的相對位置判斷是否掌握特定知識、技能或達到標準 選題考量通常偏好難度中等、鑑別度高的試題重視試題與學習目標、精熟標準的符合程度 標準參照測驗不以中等難度、高鑑別度為一律要求。教學後多數學生都能答對的核心目標試題，仍可能具有檢核學習成果的價值。 七、難度與鑑別度 難度看答對多寡，鑑別度看高低分組差異。二元計分試題以答對率表示難度指數時，答對率越高，題目越容易。 計算高低分組鑑別度時，先按測驗總分排序，再分出高分組與低分組。例如將考生分成高、中、低三組後，比較高低兩組的單題表現： D＝高分組答對率－低分組答對率。 若試題不是單純對錯計分，高分組單題平均得分減去低分組單題平均得分，也是在比較鑑別表現；若要轉為標準化指數，可再除以該題滿分。 以答對率相減所得的 D，介於－1 至＋1。正值代表高分組表現較好；零表示兩組答對率相同；負值表示低分組反而較好，應檢查答案、題意或內容是否有問題。 全班全錯或全對，鑑別度都是零，因為高低分組答對率相同。全錯表示題目極難，但不代表鑑別度高；全對表示題目極易，也無法藉此區分學生。 常考陷阱 把「雙向」換成教學進度或教學過程：認準「教學目標＋教材內容」；教學目標與行為目標也不是兩個獨立向度。 看到多位教師就選評分者信度：審查題目代表性是內容效度；比較實際評分是否一致才是評分者信度。 把涵蓋課程重點判成表面效度：充分反映目標、重要概念與學習表現，屬內容效度，不能只看「看起來適合」。 混淆兩種效度程序：檢視內容代表性對應內容效度；與外在成績求相關對應效標關聯效度。 把難度規劃當成難度保證：命題前可決定預期難度；雙向細目表不能保證實際難易適中。 將常模與標準參照對調：團體排名、強調區辨看常模；特定技能掌握、精熟與否看標準。 認為選擇題只能考記憶：良好設計能考理解、應用與分析；誘答選項也能協助診斷。 把高低組平均得分相減判成難度：相減是在看鑑別度；全對、全錯均無法區分高低組。 記憶口訣 目標乘內容，先表再命題。 審題看內容，相關找效標；一致與穩定，信度來判斷。 常模看排名，標準看精熟。 高減低看鑑別，全對全錯都是零。