Transcript 評估表格的設計與應用
提升學生學習成效：評估表格 (rubrics)的設計與運用 史美瑤 博士 麻州大學教學與教師發展中心副主任 Center for Teaching & Faculty Development University of Massachusetts Amherst July 17, 2012 認養寵物原理 2 主題 甚麼是「評估表格」(“rubric)?” 為何要用評估表格？ - advantages and concerns? Constructing a rubric Apply to your disciplines Parting thoughts and questions 3 甚麼是 rubric? A scoring scheme that articulates (描寫/描述) the expectations for an assignment Using a continuum to assess the “authentic” learning outcomes (情境學習) or complex tasks Answering parents or students “why I got a B on this paper?” 4 為何要用評估表格？ Advantages? 對學生: oimprove their performance by clearly showing them how their work will be evaluated and what is expected. ohelp students become better judges of the quality of their own works. oprovide students with more informative feedback about their strengths and areas in need of improvement. oallow assessment to be more objective and consistent. 5 為何要用評估表格？ 對教師 – force the teacher to clarify his/her criteria in specific terms provide useful feedback to the teacher regarding the effectiveness of the instruction reduce the amount of time teachers spend evaluating student work allow assessment to be more objective and consistent. 6 評估表格的挑戰 Can’t substitute for good instruction Formulization (公式化) and may discourage creativity (例 如：寫作) Validity, reliability and fairness of the rubrics It takes time to develop a good one 7 設計評估表格 三分法的設計： 分類 分數 分析 8 設計評估表格 分類： create a list of the most significant qualities or dimensions (primary traits – 主要特質,準則) of the work product or performance 9 設計評估表格 分數： 1.由高至低 2.根據每項特質，分列幾個分數點(scale)， 以偶數為佳 3. 分數之間的差異是有連續性的 10 設計評估表格 分析： 1. 詳細陳述每一個層級相對的最高的 表現情境 2. 「表現情境」反映從課程重心的特 質上來 評量學生程度的差異 3. 盡量使用正面性的描述 4. Yes and more, yes, yes but, no 11 Huh? 12 設計評估表格的步驟 分類 1. 從過去學生的作業或測試中找線索 2. 這個作業或測試是測試了主要的課程重心 3. 從中列舉學生表現出來的主要的特質(例如：條理分析、 掌握變數、接受挑戰) 分數 分析 1. 根據每項特質，分列3~5個分數點(scale)。 1. 每一個分數點下，詳細陳述相對的最高的表現情境 2. 「表現情境」反映從課程重心的特質上來評量學生程度的 差異，不是直接描述學生的實際表現。 13 設計評估表格的步驟 將設計的評估表格與同事分享並修改 用評估表格來評量學生作業並修改 讓同事(或教學助理)使用評估表格測試它的信 度並修改 14 評估表格類別 Holistic/General (全面性的) Analytic/Specific 15 「心得報告」的評估表格 Holistic/General (全面性的) 分類：組織架構、邏輯清楚、文筆流暢 分數：極佳、優良、可以、待改進 分析：以分類為基準，詳細描述整體文章的表現─ (極佳、優良、可以、待改進) 16 Holistic/General (全面性的) rubric 極佳: 讀者可以很清楚的掌握文章的重心，也能投入作 者舖陳的相關細節。文章的結構與邏輯清楚。文筆流暢， 只有兩個以下的小筆誤。 優良：讀者可以掌握文章的重心。讀者可以跟著作者的 文章邏輯。只有些許的筆誤但不影響讀者閱讀的順暢。 可以：讀者可以掌握文章的重心，文章陳述還算清楚， 有些筆誤，但對整篇文章讀來影響還不算嚴重。 待改進：讀者無法掌握文章的重心.文章的結構不清楚， 讓讀者很難了解作者的陳述。文章內有許多筆誤，使讀 者無法順利讀下去。 17 「心得報告」的評估表格 Analytic/Specific 分類：組織架構、邏輯清楚、文筆流暢 分數：極佳、優良、可以、待改進 分析：以分類為基準，詳細描述每一項代表分數的 (極佳、優良、可以、待改進)內涵意義 18 Analytic/Specific 組織架構 (40%) 極佳 (4) 優良 (3) 可以 (2) 待改進 (1) 文章的主旨非常清 楚，陳述的意見主 張都相連結。相關 的細節使整篇文章 更出色 文章的主旨清楚， 陳述的意見主張絕 大多數都相連結。 作者也詳述相關的 細節來支援他(她) 的論點 文章的主旨 清楚，陳述 的意見主張 一般還算相 連結 文章的主旨不 清楚，陳述的 意見主張也不 相連結 邏輯清楚 (30%) 文筆流暢 (30%) 19 Analytic/Specific 極佳 (4) 優良 (3) 可以 (2) 待改進 (1) 組織架構 (40%) 文章的主旨非常清 楚，陳述的意見主 張都相連結。相關 的細節使整篇文章 更出色 文章的主旨清楚， 陳述的意見主張絕 大多數都相連結。 作者也詳述相關的 細節來支援他(她) 的論點 文章的主旨清 楚，陳述的意 見主張一般還 算相連結 文章的主旨不 清楚，陳述的 意見主張也不 相連結 邏輯清楚 (30%) 讀者可以很清楚了 解文章的陳述順序 與邏輯也可以很投 入作者的思維 讀者可以清楚了解 文章的陳述順序與 邏輯 讀者還可以了 解文章的陳述 順序與邏輯 讀者很難理解 文章的陳述順 序與邏輯 文筆流暢 (30%) 20 Analytic/Specific 極佳 (4) 優良 (3) 可以 (2) 待改進 (1) 組織架構 (40%) 文章的主旨非常清 楚，陳述的意見主 張都相連結。相關 的細節使整篇文章 更出色 文章的主旨清楚， 陳述的意見主張絕 大多數都相連結。 作者也詳述相關的 細節來支援他(她) 的論點 文章的主旨清 楚，陳述的意 見主張一般還 算相連結 文章的主旨不 清楚，陳述的 意見主張也不 相連結 邏輯清楚 (30%) 讀者可以很清楚了 解文章的陳述順序 與邏輯也可以很投 入作者的思想 讀者可以清楚了解 文章的陳述順序與 邏輯 讀者還可以了 解文章的陳述 順序與邏輯 讀者很難理解 文章的陳述順 序與邏輯 文筆流暢 (30%) 文章內有不到兩個 的筆誤 文章內有不到三個 的筆誤，文章的可 讀性不受影響 文章內有不到 六個的筆誤， 讀者有些困難 讀懂文章 文章內有八個 以上的筆誤， 讀者很難讀懂 文章 21 Creating a Rubric for the Poster Evaluation 22 分類 分數 分析 23 Reflections What just happened? How was your approach different from when you developing other grading methods? What would you do differently next time? Any take away lessons for you? 24 運用評估表格評量學生作業 並幫助他們學習 25 評估表格的運用 Rubrics can teach as well as evaluate Hand out and explain before the assignment begins Do involve students 26 Additional Resources Rubi Star iRubric Sample rubrics http://course1.winona.edu/shatfield/air/rubrics.htm A large collection of rubric websites of many different colleges and universities http://www.csub.edu/tlc/options/resources/handouts/ Rubric_Packet_Jan06.pdf 27 Parting Thoughts Be a teacher first, a gatekeeper last Be open to change Seize the teachable moment Emphasize student involvement 28 Let your intentions create your methods and not the other way around 29 Questions? Mei-Yau Shih Email: [email protected] 30