第三章 研究方法
第三節 評估規範與指標設計
一、磨課師課程評估規範(向度)設計
因本研究在於開發大學生使用的磨課師課程評估指標,故初期根據台灣 MOOC 磨課師課程及教學設計參考手冊 V1.2(台灣磨課師課程及教學設計,2015,
頁 13) 之 MOOC 課程結構設計評估指標規準,再修訂為符合大學生的規範(表 3.3.1)。
表 3.3.1 磨課師評估規範
台灣磨課師課程及教學設計參考手冊 本研究的評估規範
教學計畫表 課程說明
Course Descriptions
課程教材 課程教材
Course Materials
討論與回饋 討論與回饋
Discussion and Feedback
測驗作業與專題 測驗與作業
Tests and Assignments (一) 課程說明 Course Descriptions
台灣磨課師課程及教學設計參考手冊將 MOOC 課程結構的第一部分規劃為 教學計畫表,針對教學設計者或教師。因為本研究要發展適用於大學生之磨課師 課程評估指標,故稱為課程說明 Course Descriptions。
(二) 課程教材 Course Materials
磨課師的特色之一在於將一堂課程內容以 5-10 分鐘的短片教導學習者,此 一規範著重課程影片的呈現。
(三) 討論與回饋 Discussion and Feedback
目前台灣磨課師的討論以及回饋,大多在社群平台進行學生對學生或是學生 對老師之即時或非即時討論與回饋,本評估表只評估磨課師平台上之課程,所以
34
討論與回饋部分著重於磨課師課程上之電腦即時回饋以及課程影片回饋。
(四) 測驗與作業 Tests and Assignments
測驗與作業是任何課程應有的成分,MOOC 課程亦須內含形成性和總結性測 證、數位教材品質認證以及 The Quality Matters 之必備與重點指標,修改為適合 大學生的評估指標。
35
1.5 課程具體指出適用對象。
1.6 課程具體說明學習者須具備的學前能力。
1.7 課程提供授課教師的資訊。
1.8 課程具體說明學習表現的考核標準。
(二) 「課程教材」規範下的評估指標
磨課師課程教材的特色在於將一堂課程內容以 5-10 分鐘的短片教導學習者,
此一指標結合台灣磨課師課程及教學設計參考手冊 V1.2 之伍、教材影片製作內 5-3-8 QA 與修正提供成品審查表格及數位學習課程認證、數位教材品質認證以及 The Quality Matters 必備與重點指標,修改為適合大學生的評估指標。
以下為「課程教材」規範下的評估指標:
2.1 各單元的課程影片數量適當。
2.2 課程影片時間分配適當。
2.3 課程影片的教學方式能協助我理解課程內容。
2.4 課程影片提供適當的實例。
2.5 課程影片可引發我對學習內容的注意。
2.6 課程影片中圖片、動畫及影像等有良好製作品質。
(如:畫面清晰度、播放速度合宜等)
2.7 課程影片旁白清楚。
2.8 課程影片文字大小適中。
(三) 「討論與回饋」規範下的評估指標
目前台灣磨課師的討論及回饋,大多在社群平台進行學生對學生或是學生對 老師之即時或非即時討論與回饋,本評估表只評估磨課師平台上之課程,所以討 論與回饋部分只著重於磨課師課程上之電腦即時回饋以及課程影片之回饋。由於 本課程評估表屬於事前評估,所以此部分的評估題目包含開放題目。
36
以下為「討論與回饋」規範下的評估指標:
3.1 課程影片提供開放式討論問題。
3.2 課程對測驗結果給予適當回饋。
3.3 對於課程的討論與回饋有何建議?(開放式問題)
(四) 「測驗與作業」規範下的評估指標
因屬於事前評估,所以針對測驗及作業與課程內容是否連結進行評估。本規 範下的指標結合數位學習課程認證、數位教材品質認證及 The Quality Matters Rubric 之必備與重點指標,發展出適合大學生的評估指標。
以下為「測驗與作業」規範下的評估指標:
4.1 課程提供測驗與作業。
4.2 課程的測驗與作業針對學習目標。
4.3 課程的測驗與作業針對課程影片內容。
4.4 課程的測驗與作業能協助我彙整教材重點。
4.5 課程的測驗與作業能激發我思考。
三、專家審核
規範及指標發展後,經由指導教授修改後設計成專家意見表。
意見表為四點量表及開放式的填寫空間,讓專家針對各指標回饋。專家意見 表見附錄一:磨課師課程評估表之專家意見。
表 3.3.3 整理出專家回饋之內容及修訂過之指標。
(一) 「課程說明」規範下的專家審核建議
表 3.3.3 專家審核課程說明規範下之指標
指標 專家建議 修改
專家 A 專家 B 專家 C 與否 1.1
課程名稱具吸引力。 可 4.
非常合適
4.
非常合適 維持。
37
38
39
40