1、工程教育專業論證如何評估課程大綱大綱一、一、引言引言二、二、國內外趨勢國內外趨勢三、課程三、課程效效果果評評價方價方法法1 1、課程大綱課程大綱2 2、課程設計課程設計3 3、課程、課程評評估估四、四、結語結語一、一、引言引言蔣丙煌蔣丙煌（國立臺灣大學教務長國立臺灣大學教務長） 大部分老師或許都曾有過這樣的經驗：老師在臺上說到流汗，學生在臺下睡到流涎。老師費盡心力大部分老師或許都曾有過這樣的經驗：老師在臺上說到流汗，學生在臺下睡到流涎。老師費盡心力的教學，并不一定等同于學生的學習，的教學，并不一定等同于學生的學習， 只有當學生學習確實發生，教師的教學才謂之有效。另一方只有當學生學習確實發生，教

2、師的教學才謂之有效。另一方面，由于績效責任，高等教育也逐漸由重視資源的輸入與過程（面，由于績效責任，高等教育也逐漸由重視資源的輸入與過程（input & processinput & process） 轉為重視產出與轉為重視產出與學生學習成果（學生學習成果（output & learning outcomesoutput & learning outcomes） ，由學生學習成效檢視大學辦學績效。由此可知，由學生學習成效檢視大學辦學績效。由此可知，協助學生達成學習成效是教育最終的目的，而如何檢測學生是否確實具備各種能力，值得大家再次重協助學生達成學習成效是教育最

3、終的目的，而如何檢測學生是否確實具備各種能力，值得大家再次重視與討論。視與討論。 學校面臨的最大挑戰：改變教職員生的觀念、心態與作法學校面臨的最大挑戰：改變教職員生的觀念、心態與作法。 為落實學生學習成效評量，臺大校方除了展現重視教學質量的態度，建置完整的基礎建設與機制之為落實學生學習成效評量，臺大校方除了展現重視教學質量的態度，建置完整的基礎建設與機制之外，還需要花費相當多的時間與心力，進行宣傳與說明，希冀逐步改變全校教職員生的觀念與心態。外，還需要花費相當多的時間與心力，進行宣傳與說明，希冀逐步改變全校教職員生的觀念與心態。如何讓全校各單位人員凝聚共識，愿意跳脫原本已經習慣的舒適圈，額外花

4、時間適應新的想法與模式如何讓全校各單位人員凝聚共識，愿意跳脫原本已經習慣的舒適圈，額外花時間適應新的想法與模式，是校方面臨的挑戰。尤其是學校規模愈大，參與的人員愈多，愈是不容易。臺大正戰戰兢兢，如臨，是校方面臨的挑戰。尤其是學校規模愈大，參與的人員愈多，愈是不容易。臺大正戰戰兢兢，如臨深淵，如履薄冰地踏出每一腳步。謹將目前臺大的作法及進度與外界分享，希望能拋磚引玉，引發更深淵，如履薄冰地踏出每一腳步。謹將目前臺大的作法及進度與外界分享，希望能拋磚引玉，引發更好的想法與作法，共同為提升學生學習成效而努力。好的想法與作法，共同為提升學生學習成效而努力。二、二、國內外趨勢國內外趨勢 國際高等教育發展

5、趨勢國際高等教育發展趨勢input & process output & learning outcomesteacher-centered student-centered 國外趨勢國外趨勢 ：USUS1 1）績效責任績效責任 (accountability)(accountability)2 2）1990 1990 年代學習成果評量公認為最有效、最具體年代學習成果評量公認為最有效、最具體之教學績效評量方案之教學績效評量方案3 3）聯邦政府要求各區認證評鑒機構，加強運用各校聯邦政府要求各區認證評鑒機構，加強運用各校提供之評鑒結果，作為重要認證指標提供之評鑒結果，作為重要認證指

6、標8 國外趨勢國外趨勢：EUEU 1 1）1999 Bologna Declaration1999 Bologna Declaration（19991999博洛尼亞宣言，是博洛尼亞進程的綱領博洛尼亞宣言，是博洛尼亞進程的綱領性文件，由性文件，由2929個歐洲國家的教育部長于個歐洲國家的教育部長于19991999年在意大利的博洛尼亞正式簽署。年在意大利的博洛尼亞正式簽署。）宣示到了宣示到了 2010 2010 年時，各國大學都要根據學生學習成效來決定是否承認其所年時，各國大學都要根據學生學習成效來決定是否承認其所頒授的學位頒授的學位2 2）八大核心能力八大核心能力 (core competenc

7、e)(core competence)3 3）調整與對應調整與對應 (tuning & alignment)(tuning & alignment) 核心能力、課程、教學、評量均要相互對應核心能力、課程、教學、評量均要相互對應博洛尼亞進程博洛尼亞進程(Bologna Process)(Bologna Process)，是，是2929個歐洲國家于個歐洲國家于19991999年在意大利博洛尼亞提出的歐洲高等教育改革計年在意大利博洛尼亞提出的歐洲高等教育改革計劃，該計劃的目標是整合歐盟的高教資源，打通教育體制。劃，該計劃的目標是整合歐盟的高教資源，打通教育體制。 博洛尼亞進程博洛尼亞

8、進程 的發起者和參與國家希望，到的發起者和參與國家希望，到20102010年，歐洲年，歐洲 博洛尼亞進程博洛尼亞進程 簽約國中的任何一個國家的大學畢業生的畢業證書和成績，都將獲得其他簽約簽約國中的任何一個國家的大學畢業生的畢業證書和成績，都將獲得其他簽約國家的承認，大學畢業生可以毫無障礙地在其他歐洲國家申請學習碩士階段的課程或者尋找就業機會，實現國家的承認，大學畢業生可以毫無障礙地在其他歐洲國家申請學習碩士階段的課程或者尋找就業機會，實現歐洲高教和科技一體化，建成歐洲高等教育區，為歐洲一體化進程做出貢獻。歐洲高教和科技一體化，建成歐洲高等教育區，為歐洲一體化進程做出貢獻。 國內趨勢國內趨勢：臺

9、灣：臺灣2011 2011 年起高教評鑒，著重年起高教評鑒，著重“學生學習成效學生學習成效”評評價價 培養什么樣的學生培養什么樣的學生 ( (具備哪些核心能力具備哪些核心能力)?)? 開授哪些課程，以培養核心能力開授哪些課程，以培養核心能力? ? 如何檢視學生具備核心能力如何檢視學生具備核心能力? ? 如何協助未具備核心能力者如何協助未具備核心能力者? ?國內趨勢國內趨勢 ：大陸：大陸教育部：教育部：1 1）我國的）我國的高等教育高等教育量的擴張基本完成，由數量向質量轉移，標志著一量的擴張基本完成，由數量向質量轉移，標志著一個時代的結束和一個新時代的開始。重視質量將是以供時代的命題，個時代的結

10、束和一個新時代的開始。重視質量將是以供時代的命題，誰不重視質量，誰將付出沉重的代價。誰不重視質量，誰將付出沉重的代價。2 2）什么是合格的工程教育專業？我國的教育質量有標準嗎）什么是合格的工程教育專業？我國的教育質量有標準嗎? ?3 3）原來我們從未有真正意義上的標準，現在我們有了標準，而且是國）原來我們從未有真正意義上的標準，現在我們有了標準，而且是國際等效的，也可以說就是際等效的，也可以說就是“國際標準國際標準”。三、課程三、課程效效果果評評價方價方法法12 1 1、課程大綱課程大綱反反 饋饋教學教學目標目標教學教學過程過程教學教學評評估估Why(畢業要求畢業要求)Whom教學對象教學對象

11、What (Curriculum)How (Instruction)Whether or not How much(Assessment)教學教學對象對象 課程大綱課程大綱- -教學目標與教學目標與畢業要求（畢業要求（核心能力核心能力）這門課的主要目的為：這門課的主要目的為： Set of skill, knowledge or attitude which should be learned or acquired by each student in order to facilitate personal development, socialization and employabil

12、ity (Holmes & Hooper, 2000)What is expected as the student progress through the course? What does the student know? (knowledge) What can the student do? (skill) What does the student care about? (attitude)Decision Making Decision Making 決策能力決策能力教學目標教學目標指標指標 (indicators)(indicators)評評估估 ( (收集證據收集

13、證據) )What does the student What does the student knowknow? ?1.1.決策能力的過程決策能力的過程2.2.決策質量決策質量3.3.外在因素的影響外在因素的影響What can the student What can the student dodo? ?1.1.收集有用的資料收集有用的資料2.2.替公司做出好的商業判斷替公司做出好的商業判斷What does the student What does the student care aboutcare about? ?1.1.與他人共識并合作與他人共識并合作2.2.接受不同的意見接

14、受不同的意見3.3.承接后果承接后果Teaching for learning: Outcome-based assessment, Mei-Yau Shih, Presentation at National Taiwan University 2010/12/30教學目標與核心能力 cont. 約3-6項 以學生的角度描寫 明確具體，可測量成果的動詞 (action verbs) 教學目標與核心能力 cont. Blooms taxonomy教學目標與核心能力 cont. 修完這門課以后，學生能夠：Q: 為什么教學目標與核心能力如此重要?A: 對老師而言-與學生溝通教學目的師生之間有共通語

15、言有較清楚的評量標準 對學生而言-有清楚的學習目標及努力方向加強學生對于學習的重心，參與與投入更主動 2、課程設計 Backward design 倒序設計 From the very last day 以終為始課程設計 cont.Step 1. 定義課程期望達成的目標Step 2. 安排有效的評量計劃Step 3. 擬定教學方案與活動課程設計 cont. 實例說明 3、課程評估1. 評估模式2. 直接 vs. 間接評估3. 質化 vs. 量化評估4. 評估指標 (rubric)5. 教學意見調查6. 他評 vs. 自評 Assessment as Learning Assessment fo

16、r improvement, not proof241. 評估模式 常模參照評常模參照評估估 (norm-referenced evaluation) 個人分數和全體學生分數作比較 采相對性比較觀點看待個別學生的測驗結果 如：段考成績排名、心理測驗原始分數轉換成標準分數或是百分等級 1. 評估模式 標準參照評量標準參照評量估估(criterion-referenced evaluation) 依教學前界定清楚的標準，描述某生表現達到何種程度 采絕對比較的觀點來看待個別學生的測驗結果 不需注意排名或與別人分數比較，旨在了解學生學到什么 學習結果導向的評學習結果導向的評估估2. 直接 vs. 間接

17、評估 直接評估 (direct assessment)評估學生實際表現例如：考試測驗、學生作業、證照考試、專題2. 直接 vs. 間接評估 間接評估 (indirect assessment)評估學生對于學習的感受例如：問卷調查3. 質化 vs. 量化評估 質化評估(qualitative assessment)描述例如：觀察、訪查、寫作、問卷調查3. 質化 vs. 量化評估 量化評估 (quantitative assessment)數字例如：考試成績、累計積分4. 評估指標 (rubric)評估指標是一套建立評分的準則，可作為評估學生作業的標準。每個標準都明列達成程度，目的是以學生表現為依

18、據 (performance-based)，正確反映學生學習成果 4. 評估指標 (rubric)可分為分析型與整體型兩種： 分析型：評量成品或表現的個別要素 (面向)，每一面向列出各種等級描述整體型：著重于完成作品的整體表現，沒有面向，只有等級描述優優佳佳可可劣劣開場與介紹開場與介紹一開始就清楚快速地呈現報告重點，贏得觀眾注意。結束前呈現報告重點，但稍有偏題。取得觀眾注意。觀眾對報告內容有概念，但講者未在開場闡明報告重點。觀眾完全不明白報告重點。清晰度與架清晰度與架構組織構組織清楚說明并解釋要點，組織具邏輯性且平順。要點清晰，但稍有疏漏。觀眾需自行推斷要點，缺縫明顯。要點模糊。內容內容證據清

19、楚呈現。內容完整有趣且富邏輯性與教育性。假設與詮釋清楚明白。證據、假設，以及對證據的解讀未能完全分隔，但故事尚具邏輯性。證據、假設，以及對證據的解讀糾結，未能清楚分隔。缺乏證據與觀察，內容多取自于自己的看法與意見。報告風格與報告風格與呈現方式呈現方式觀眾能清楚看見與聽見講者。報告中有適當的停頓與音調。觀眾能清楚看見與聽見講者。報告中大部份的停頓與音調合宜。觀眾大致上能清楚地看見與聽見講者，但講者態度稍有遲疑與不確定。講者只對屏幕或單一觀眾講。時間掌控差。明顯缺乏演練。視覺輔助視覺輔助影像與文字選擇佳。使用的圖像明顯對應主題，沒有不必要的信息。影像與文字選擇合理，但有時呈現時機不夠理想。使用的圖

20、像對應主題，有不必要的信息或信息不足。影像與文字不完全對應主題。額外的信息太多或太少。影像與文字不對應主題。額外的信息太多或太少。與主題不相關。結語結語清楚闡明結論。結語結合所有要點，并歸納出具邏輯性的有效結論。闡明結論。所呈現證據不完全支持結論，但主要重點皆清楚。結論未能完整解釋與呈現，觀眾需自行收尾。沒有結論，缺乏整合性?；卮饐栴}回答問題確實回答問題，且處理問答的態度有信心。且講者對主題有除報告內容之外的深度見解。有回答問題，但處理問答的態度稍有遲疑。講者對主題有除報告內容之外的深度見解。講者努力回答問題，但明顯缺乏對主題的深度見解。講者對觀眾的提問沒有答案，無法將答案與報告內容連貫?？陬^

21、報告之分析型評量指標http:/www.cwsei.ubc.ca/resources/files/RubricNewsReports.pdf5 優優學生清楚描述報告主題并提供足夠的理由說明它的重要性。有充份的信息支持結論，演說方式吸引觀眾注意。學生全場保持與觀眾眼神接觸，可以明顯感受到對主題的準備與熱情。運用視覺輔助工具讓報告更具說服力。使用合宜的信息清楚回答觀眾的問題。4 佳佳學生描述報告主題并提供足夠的理由說明它的重要性。有適量的信息支持結論，內容大致正確。可以感受到對主題的準備與熱情。運用視覺輔助工具，清楚回答觀眾的問題。3 好好學生描述報告主題與結論，但所提供的支持證據不夠周全。內容大致正確，可以約略感受到對主題的準備與組織。提及視覺輔助工具，但并未實際運用。試圖回答觀眾問題。2 普普學生描述報告主題，但未能完整說明，且沒有提供結論。內容可以理解但有錯誤，無法感受到對主題的準備與組織。未提及或運用視覺輔助工具。僅以最基本的答案回答觀眾問題。1 劣劣學生未能描述報告問題及其重要性，主題不明確且沒有適宜的結論。內容難以理解，沒有準備且缺乏組織。僅以最基本的答案回答觀眾問題，或未能解答?？陬^報告之整體型評量指