1、評量學生的學習 教學發展工作坊第四次上課,政治大學教學發展中心 李昌雄,工作坊主題,1.教學內容的統整 2.分析學生的學習 3.發展教學策略 4.評量學生的學習 5.評量教學及改進,評量的主要議題,高階思考如何評量 技能如何評量 大班成績如何評量 小組成績如何評量 如何增加多位助教成績的可靠度 如何處理更改成績的要求 如何客觀地給成績,Agenda,評量和理解學生的學習 案例研討 其他重要的評量概念 學員完成學習成果的評量指標,理解學生是如何學習的 Creating significant learning experience,Source: L.D. Fink, Creating sign
2、ificant learning experience, 2003.,Designing courses that support knowledge construction,Engage students to learn, Practice decision making in the learning process, Reflect on what is being learned, Articulate and share with others the new ideas and knowledge that Is being acquired.Source：Oliver and
3、 Harrington, Teaching and Learning Online, 2001, available online.,Learning Centered Approach Towards Web-mediated Engaged Learning,Vision of Engaged Learning Tasks for Engaged Learning Assessment of Engaged Learning Instructional Models & Strategies for Engaged Learning Learning Context of Engaged
4、Learning Grouping for Engaged Learning Teacher Roles for Engaged Learning Student Roles for Engaged Learning,Source: Technology Effectiveness Framework,Principles From Goals to Assessment,Grading is most effective when it is integrated with student activities and has a clear, explicitly stated purpo
5、se. Assessment works best when it is ongoing, with continual feedback to the learner.,個案研討 971研究方法的課程目標與教學設計,學習目標一:深度學習 訓練論述推理的作業練習和貴人對話 強調預習和聚焦在作業練習的討論 在真實情境的解決問題挑戰中做中學 形塑學習社群 學習目標二:自主學習 學習模組和形成性評量促成漸進式自主學習 經營學習歷程檔案,課程概念圖 971研究方法,成為獨立研究者,解 構 - 看 見 自 己 的 樣 子,課 後 行 動,將科學思維 融入生活,做中學 強調以學習 為中心的 碩博士論文 工
6、作坊,經營 學習歷程 及檔案,行動中反思問題解決的 反思框架 + Think aloud + 學習貴人,研究方法論知識典範 科學研究 方法,研究社群 實體線上,課 內 行 動,促 進 學 習 的 活 動 和 機 制,Sample test design,971研究方法學習模組一開書考 第一階段考試、時間：40分鐘,試針對開學至今妳的學習歷程進行研究分析 請用一張投影片及概念圖描繪妳的學習樣子 請用另一張投影片舉呈關鍵事實佐證上圖的推論邏輯 最後請利用第三張投影片，根據上圖及佐證，深入解析妳潛藏的學習問題和解決之道，假定這麼做背後的目的在尋求妳的學習精進 以上，使用Powercam說明並將壓縮檔
7、案上傳至指定位置,971研究方法學習模組一開書考 第二階段考試、時間：30分鐘,請根據妳在第一階段考試所寫的答案，選擇（指明）一種研究取向（Actor, Systems, or Analytical Approach），定義一個研究問題並提出兩組該問題的可能答案 說明為甚麼妳的上述答案（研究問題及可能答案）符合妳所選擇的研究取向的特徵 以上，使用Powercam說明並將壓縮檔案上傳至指定位置,Grading scales,傑出 91, 優 8690, 良 8185, 可 7680, 尚可 7075, 差 6069, 劣 59 Less-then-desired（表現不及格，落後一般水準、必須急
8、起直追）, Acceptable（表現雖屬及格，但仍有許多地方有待改進）, Good（表現不錯，但還有進步空間）, Excellent（表現卓越，請繼續保持）絕對分數 充分理解學習材料並提出自己的見解和具挑戰性的問題, 已能掌握若干材料內涵但尚未能深入並提出自己獨特的見解 問題意識明確、主要論點清楚、論證邏輯嚴密、引用資料詳實、寫作格式有組織, 報告內容很不錯、但仍有改進空間, 報告品質有很大的改進空間 Rubrics,學習成果及評量的方法 971研究方法,週作業、學習記錄及反思、模組開書考及精進學長姐論文計畫書 自評、互評、師評 互評：經常性的 貴人作業回饋 師評：抽樣、立即回饋 課堂上抽樣
9、進行深度案例分析回饋 抽樣、量表回饋 師評：批次回饋 教學空檔時評分 請教學助理協助 期末一對一輔導,期末學習反思 971研究方法,一對一輔導對談,練習一,請在小組內討論 請說明自選課程使用了哪些評量方法 請討論各種不同的評量方法移植到自選課程的教學情境的利弊得失,重要的評量概念,確保學習評量和成果間的統合一致 形成性（formative）和總結性（summative）評量 非正式和正式評量 可靠度和效度 平均成績參照（norm）和標準參照（criterion-referenced）評量 傳統和創新的評量方法,學習評量和成果間的統合一致,評量項目即是學生眼中的課程 如果我們強調獨立思考，則我們
10、不僅需要看最終的成果，更在乎過程中所運用的推理及方法 所謂統合一致，包括教學內容、方法及評量都要支持學生最終學習成果的達成,形成性和總結性評量,定義 形成性評量目的在幫助學習過程中的診斷、改進和促進發展 總結性評量目的則在協助判斷到達某一時間點時學習成果是否有達成 用法 視妳的評量目的決定使用上述兩種評量方式的哪一種，或兩種並用 較佳的作法 視評量為教學過程中理解學生學習所不可少的一部份 善加運用形成性評量以持續地、動態地（根據最新的學習狀況）、引導性地幫助學生學習 Evaluation done to students vs. done with students vs. done for
11、students,非正式和正式評量,非正式評量通常不使用分數 例：Wiki學習歷程檔案紀錄 確實且完整（繼續保持） 尚可接受（有進步空間） 不確實或有遺漏（請立即改進、詳實記錄） 近乎沒有紀錄（請來找老師談） 鼓勵多使用非正式的形成性評量 例：立即查知全班學習狀況（Moodle意見調查功能） 例：One-minute paper（Moodle心得報告功能，老師立即檢視全班同學的學習狀況分佈並做出教學調整） 請摘要說明妳剛剛學到的是 甚麼是或為甚麼 例：允許作業在回饋及修訂後再繳,可靠度和效度,可靠度 Inter-rater Intra-rater 效度 妳所使用的評量指標能代表學習成果或程度嗎
12、？ 鼓勵多使用標準參照（criterion-referenced）評量,平均成績參照和標準參照評量,平均成績參照評量 效度的問題 比較基礎的問題 標準參照評量 評量基礎較為多元綜合 學習之初說明清楚較能激發學生的學習動機 鼓勵學生自評及互評,標準參照評量（Rubrics）的例子,傳統和創新的評量方法,傳統的紙筆測驗評量的是學習的最終產品（product of learning） 創新的評量方法 評量在真實情境中如何運用所學的知識和能力 重視學習的進展（progress of learning） 強調自評及互評（可以讓同學參與訂定評分標準）,練習二,請和學習貴人討論 請根據自選課程準備一張表，左側是妳期望學生達成的學習成果，右側則是妳預計使用的評量方法 請說明為甚麼妳預計這樣做的理由,
