學習指南 /

教育評量:讓判斷對應證據與規則

評量連線目的、證據任務與決策規則。百分比算對不證明任務測到了目標;反饋要能引導下一步才有形成性用途。本路線將設計、評分與決定一起檢查。

課程主題: 教育評量與測驗

學習計畫與例題由 University Reading List 編輯整理。 編輯與選書方法 · 來源確認日期:

本頁目錄

這份指南適合誰

適合能辨識學習成果並計算百分比的教育學生與教師。McConlogue屬高等教育,Wiliam側重課堂證據與響應,Brookhart/Nitko涵蓋測量和任務構建。下方分數與政策均虛構,無真實學生資料或機構規則。

選擇你的起點

需要講解評量與評分設計的免費教材

用McConlogue學習對齊、學業標準、校準與反饋;移到其他教育階段須調整情境。

需要改變下一課的證據

用Wiliam設計提問、解釋回答並選擇教學行動;記錄分數本身不說明行動。

需要測量與分數解釋

用Brookhart/Nitko理解效度、信度、題目、任務與評分,逐步註明分數要怎樣用。

三本書如何取捨

Assessment and Feedback in Higher Education: A Guide for Teachers

Teresa McConlogue · 2020

免費教材,介紹大學評量與評分設計

什麼情況下適合讀
想連線成果、任務、共享標準與評分。
什麼情況下選別本
需要所有學校通用手冊,或希望量規消除判斷。
建議閱讀範圍
2020免費PDF的3章課程設計、6評分者信度、7同伴評量、8反饋。
限制與取捨
ISBN 9781787353640為PDF而非平裝;完整免費閱讀有具體轉載條件,大學情境不能無調整移植。

選書前試做

寫兩項量規,並描述一項須校準而非求平均的分歧。

檢查標準: 標準寫可見證據與質量區別,數字總計不能解釋分歧。

官方免費閱讀 ↗

書目資訊與取得方式 →

Embedded Formative Assessment(融入教學的形成性評量)

Dylan Wiliam · 版次: 2 · 2017

形成性證據與響應配套

什麼情況下適合讀
要在教學中取得理解證據並用來調整。
什麼情況下選別本
要以技術清單代替核查用途和成效。
建議閱讀範圍
2017第2版ISBN 9781945349225,按標題選提取證據、反饋及學習者參與策略。
限制與取捨
課堂實踐不同於心理測量專書,另行出版的handbook不是同一本;不猜頁碼或稱全書免費。

選書前試做

設計一個短答提示,為兩種可能反應分別寫下一步教學。

檢查標準: 題目能辨識目標誤解,響應在學習尚可改變時使用證據。

書目資訊與取得方式 →

Educational Assessment of Students(學生教育評量)

Susan M. Brookhart; Anthony J. Nitko · 版次: 8 · 2018

測量與任務構建主線

什麼情況下適合讀
需要區分效度、信度、反饋、表現任務與評分。
什麼情況下選別本
期待一個信度值或及格線證明所有用途。
建議閱讀範圍
所選2018第8版紙書ISBN 9780134807072;3–4章效度/信度、7–8形成性評量/反饋、15評分。
限制與取捨
同頁也有較晚數字產品,須匹配所選紙書年份;訪問碼與課件許可權另計。

選書前試做

算原題加權分,再寫任務設計能和不能支援的解釋。

檢查標準: 分開算術、成就證據與門檻,三者不能互代。

書目資訊與取得方式 →

開始前需要會什麼

判斷什麼?

列學習成果及能證明它的證據。回憶測驗與應用專案即使都給百分比,也可能承擔不同角色。

效度還是信度?

效度關乎特定解釋/用途的證據,信度關乎結果一致性;一致地獎勵錯誤物件仍有問題。

下方區間是什麼?

題定可能分數集合,不是置信區間、標準誤或及格機率;穩健決定須對集合中每個分數相同。

六步學習計畫

勾選用於自我記錄,並非成績評定;標記不會傳送給本站。

  1. 從目的到證據

    建議閱讀範圍: 設計或目標/效度章節。

    要做的練習: 畫成果→任務→標準→決定。

    檢查標準: 每個所稱成果都須有實際證據。

  2. 明定規則

    建議閱讀範圍: 評分討論。

    要做的練習: 列滿分、得分、權重、門檻及關鍵部分要求。

    檢查標準: 權重合1,原始滿分不暗變指定權重。

  3. 算兩種彙總

    建議閱讀範圍: 原創分數包。

    要做的練習: 算指定加權與原始合計百分比。

    檢查標準: 解釋各自實際實施的權重。

  4. 檢查評分割槽間

    建議閱讀範圍: 評分者信度和變式。

    要做的練習: 將專案分數區間傳到決策規則。

    檢查標準: 題定集合不可稱統計置信區間。

  5. 設計校準反饋

    建議閱讀範圍: 校準/反饋或形成性策略。

    要做的練習: 寫一個評分比較及按標準可執行的反饋。

    檢查標準: 比較針對分歧,反饋給下一步而非另一數字。

  6. 審計決定

    建議閱讀範圍: 評分與效度。

    要做的練習: 說明分類是否穩定、需要什麼證據和分數限制。

    檢查標準: 不能平均掉分歧或從總分推出未測能力。

原創例題與解析

原創分數包:滿分不是指定權重

虛構課程測驗18/20、專案48/80,指定權重測驗40%、專案60%。及格須總分≥70%且專案≥60%。求總分和結論,再與原始分合計比較。

前提假設

原題分數精確,決定前不四捨五入,等於門檻也透過。測驗題定測回憶,專案測應用,不提供經驗效度或信度估計。規則純屬虛構。

  1. 測驗90%、專案60%,加權0.40×90+0.60×60=72%。
  2. 總72≥70且專案60≥60,按題設及格;須逐項查兩個條件。
  3. 原始合計66/100=66%,對應測驗20%、專案80%的另一權重,不是指定40/60。
  4. 分數本身不證明任務支援所有學習主張;必要時分別報告回憶與應用證據。

答案與解釋

指定總分72%、專案60%,滿足雙門檻及格;原始合計66%實施不同權重。

檢驗結果

核權重合1;若測驗權重為w,同樣作品總分60+30w。改權重是改決策基礎,不是改作品。

改變假設,再做一題

改變假設:可能評分跨過門檻

專案真實得分僅知介44至52(含端點)/80,測驗18/20精確,仍用40/60及原雙門檻。求總分範圍和及格是否穩健。

  1. 專案55%至65%;若原始專案分p,總分36+0.75p,範圍69%至75%。
  2. 總分門檻要求p≥45⅓;關鍵專案門檻要求p≥48,故後者約束更強。
  3. p44不透過,p48總72透過,p52總75透過。允許區間跨48,不能對所有可能分數作同一分類。

答案與解釋

總分69–75%,決定在原始專案48切換;現有證據不足以穩定分類,需要校準/複核確定分數。

檢驗結果

核端點和關鍵門檻。區間不是機率分佈,不能據此算及格機率。

常見誤區

原始合計冒充權重

加總點數讓滿分變成隱含權重。

一個總分代替學習主張

總分可能遮住不同成果或關鍵部分的證據。

把不確定性平均掉

爭議分數求平均不證明判斷合理,應看標準與作品。

進入下一階段之前

  • 能把學習主張對應任務及規則。
  • 能復算權重與約束門檻。
  • 能區分穩定決定、條件分數及複核所需證據。

參考來源與版本

來源確認日期:

這些是本站建議的學習活動,並非大學官方作業,也不代表對每本書逐頁通讀。

編輯與選書方法 →