國立臺灣大學電機資訊學院電機工程學系 碩士論文
Department of Electrical Engineering
College of Electrical Engineering and Computer Science National Taiwan University
Master Thesis
線上同儕回饋系統之開發與研究：
收到回饋品質對於提供回饋品質之影響
Development and Research of an Online Peer Feedback System: the Effect of Received Feedback Quality on
Provided Feedback Quality
許證捷 Cheng-Chieh Hsu
指導教授：葉丙成教授、陳和麟教授
Advisor: Ping-Cheng Yeh, Prof., Ho-Lin Chen, Prof.
中華民國 105 年 8 月 August, 2016
致謝
本篇論文從最初開始擬定研究方向到最後順利完成，過程中受到了許多師長、
同學與家人的幫助，同時也因為有了他們的幫助，本篇論文的研究成果才得以更 加的豐富與精采。
而在所有要感謝的師長與同學中，首先要感謝我的指導教授葉丙成老師，葉 老師從研究起初的系統開發到最後論文撰寫完成皆全程指導。在研究期間，老師 提出了許多創新的見解與想法，讓我可以將研究理論套用在改善教學環境的應用 中，進而讓論文有了實做的價值。而除了在研究方面，我也從老師平時的經驗談 與跟隨老師參與活動中，啟發出了更開闊的視野。
接著要感謝林顯達老師，林老師耐心的指導我如何去做研究，並且也很包容 我對於研究知識的懵懂。在過程中，老師不只教導我如何去蒐集與分析研究資料，
更教導我如何從教育的觀點去切入研究問題。而最令我印象深刻的是，老師曾說 過，如果有問題，他的大門隨時為我們敞開，這句話讓我與同樣受老師指導的學 生浩正深深感動。
同時也要感謝陳和麟老師，陳老師給了我很大的發揮空間，讓我可以盡情探 索研究的奧妙。而老師在論文撰寫上給的建議也十分全面，除了系統功能開發的 想法外，也包含了研究結果討論的完整性，這些建議著實使論文更加的精實。
還有要感謝賴以威老師，以威老師在研究方面也給了不少建議，讓我能更注 意到一些論文的細節部份，例如：論文的研究動機該怎麼寫、研究的模型該如何
ii
另外要感謝實驗室的夥伴們，有了他們的陪伴，研究所的這兩年才能如此多 采多姿。而在這之中，特別感謝時常與我共同解決研究與系統開發問題，或是偶 爾為了趕工而一起熬夜到兩三點的浩正。還有最後幾個月一起衝刺、一起分享研 究方法與成果的長宏。
最後要感謝我的家人，當我遇到困難的時候，他們常常與我一起想辦法、一 起面對，總是在背後默默支持著我，無條件的為我付出，讓我在學習或人生中遇 到困難時，能有繼續完成學業與論文的動力。
實在很感謝所有人對我幫助，這一切的一切皆銘記於心。
摘要
同儕互評的教學模式近年來已被廣泛運用在當今的教育中，批改學生作業的 角色由老師變成了同學們。除了教室間的紙本互評之外，甚至還發展出了線上同 儕回饋系統，讓學生不一定只能在課堂中進行互評，還可以隨時隨地依照自己安 排的進度去完成同儕評分的流程。而該趨勢促使了許多研究者陸續發表同儕互評 對於學生學習成效之影響的相關研究。
在進行同儕互評時，如果想提高學生的學習成效，那麼互評系統內的回饋品 質就是個非常重要的關鍵。因此本研究便藉由簡報製作與表達課程搭配使用線上 同儕回饋系統，將同儕互評的模式應用在課堂活動與回家作業中，去研究當學生 使用同儕回饋系統時，是否會因為收到回饋品之高低進而影響提供的回饋品質。
而在本研究的研究方法中，會藉由系統內學生互評時所蒐集的數據，來分析 得知收到的回饋品質是否會影響提供的回饋品質，同時也會利用統計的ㄧ些分析 方法排除掉研究中的干擾因素，以求能更精確分析收到回饋的品質對於提供回饋 品質的影響。另外，本研究也加入了訪談的要素，從訪談中可以了解修課學生收 到回饋與提供回饋時的想法，進而輔助證明本研究之假設是否正確，而最後研究 結果顯示，學生收到的回饋品質會影響提供的回饋品質。
關鍵字：線上互評系統、同儕互評、同儕回饋、回饋品質
iv
ABSTRACT
Peer grading methods have been broadly implemented in education nowadays. The role of evaluating a student’s assignments has transferred from teachers to students. As peer grading methods evolved, acquiring feedback is no longer limited to traditional face-to-face grading in classrooms, but has expanded to online peer grading systems, allowing students to flexibly grade their peer’s work anywhere, and at any time. Due to this trend, many researchers have published studies regarding the impact of peer grading on student’s learning performance.
The quality of peer feedback is critical if the goal is to enhance students’ learning performance by using peer grading. Therefore this study utilizes an online peer
feedback system for students who enrolled in a Presentation and Communication Skills Course, and peer grading was implemented for class activities and assignments. The objective of this study is to analyze whether students’ provided quality of feedback was
affected by the peer feedback they received.
The peer grading data analyzed in this study was collected from the online peer feedback system, Analysis of covariance (ANCOVA) was used for quantitative analysis, and qualitative interview was implemented to further understand students’ mindset and to support the hypothesis in this study. In conclusion, there is significant effect of received feedback quality on provided feedback quality.
Keywords: Online peer feedback system, peer grading, peer feedback, feedback quality
目錄
致謝 ... i
摘要 ... iii
ABSTRACT ... iv
目錄 ... v
圖目錄 ... viii
表目錄 ... x
第一章 緒論 ... 1
1.1 前言 ... 1
1.2 線上同儕回饋系統之開發動機 ... 2
1.3 線上同儕回饋系統之應用背景 ... 3
1.4 研究問題 ... 4
1.5 研究概述 ... 5
第二章 線上同儕回饋系統之開發 ... 6
2.1 開發工具 ... 6
2.2 系統架構 ... 8
2.3 資料傳輸流程 ... 10
第三章 回饋品質與學習動機之文獻探討 ... 12
3.1 回饋相關理論 ... 12
3.1.1 回饋品質計算方法 ... 12
3.1.2 收到回饋品質對於提供回饋品質之影響 ... 14
3.2 動機相關理論 ... 16
3.2.1 自我決定理論 ... 16
vi
3.2.2 學習動機對於提供回饋品質之影響 ... 18
第四章 教學環境設計 ... 20
4.1 簡報製作與表達課程 ... 20
4.1.1 課程概述 ... 20
4.1.2 課程目標 ... 20
4.1.3 課程規劃 ... 21
4.1.4 課程評量方式 ... 22
4.2 線上同儕回饋系統 ... 23
4.2.1 系統概述 ... 23
4.2.3 課堂活動互評 ... 24
4.2.4 影片作業互評 ... 28
4.2.5 教師管理 ... 31
第五章 研究方法 ... 34
5.1 資料來源 ... 34
5.1.1 同儕回饋 ... 34
5.1.2 學習動機 ... 35
5.1.2 訪談 ... 35
5.2 分析方法 ... 36
5.2.1 回饋品質 ... 36
5.2.2 學習動機 ... 41
5.2.3 訪談 ... 41
第六章 研究結果 ... 43
6.1 資料描述 ... 43
6.1.1 回饋品質 ... 43
6.1.2 學習動機 ... 44
6.1.3 皮爾森相關係數 ... 45
6.2 統計結果 ... 45
6.3 訪談結果 ... 48
6.3.1 問題面向 ... 48
6.3.2 研究主張 ... 48
6.3.3 訪談摘錄與研究解釋 ... 49
第七章 結論與未來展望 ... 52
7.1 研究討論 ... 52
7.1.1 收到回饋品質對於提供回饋品質之影響 ... 52
7.1.2 實務應用 ... 57
7.1.3 研究限制 ... 58
7.2 結論 ... 60
7.3 未來展望 ... 60
參考文獻 ... 62
附錄一 ... 69
viii
圖目錄
圖 1-1 影響提供回饋品質之假設模型 ... 4
圖 2-1 MVC 架構 ... 8
圖 2-2 資料傳輸流程 ... 10
圖 3-1 收到的回饋品質影響學生表現 ... 14
圖 3-2 學生表現影響提供的回饋品質 ... 15
圖 3-3 自我決定理論之基本心理需求 ... 17
圖 3-4 自我決定理論之動機種類 ... 18
圖 3-5 影響結果之流程 ... 19
圖 4-1 課堂流程 ... 21
圖 4-2 課堂活動互評流程 ... 24
圖 4-3 課堂活動互評介面 ... 26
圖 4-4 活動表現分析之閱覽順序 ... 27
圖 4-5 影片作業互評流程 ... 28
圖 4-6 影片作業互評介面 ... 30
圖 4-7 作業表現分析之閱覽順序 ... 31
圖 4-8 教師管理功能 ... 32
圖 5-1 影片作業之學生提供回饋與收到回饋流程 ... 35
圖 5-2 影片作業時程 ... 38
圖 5-3 資料蒐集之時間順序 ... 39
圖 5-4 單因子共變數分析之影響提供回饋品質模型 ... 40
圖 7-1 收到的回饋品質影響提供的回饋品質 ... 52
圖 7-2 收到回饋品質高低之影響 ... 56
圖 7-3 單因子共變數分析之分析方法 ... 58
x
表目錄
表 5-1 回饋品質計算標準 ... 37
表 6-1 學生提供的各項作業回饋品質 ... 43
表 6-2 學生收到之各項作業回饋品質 ... 44
表 6-3 作業一至四收到回饋品質 ... 44
表 6-4 學生之相對自主性指標 ... 44
表 6-5 皮爾森相關係數 ... 45
表 6-6 作業五提供的回饋品質 ... 46
表 6-7 誤差變異數的 Levene’s 檢定 ... 46
表 6-8 組內迴歸係數同質性檢定 ... 47
表 6-9 單因子共變數分析之結果 ... 47
表 6-10 學生間效應項的檢定 ... 48
表 6-11 學生受收到回饋品質影響後所提供的回饋品質之成對比較 ... 48
表 7-1 訪談結果 ... 54
表 7-2 平均收到回饋品質與受影響後提供的回饋品質 ... 55
第一章 緒論
1.1 前言
近年來同儕互評的教學模式已被廣泛運用在當今的教育中，批改學生作業的 角色由老師變成了同學們。除了教室間的紙本互評之外，甚至還發展出了線上同 儕回饋系統，讓學生不一定只能在課堂中進行互評，還可以隨時隨地依照自己安 排的進度去完成同儕評分的流程。也因為該趨勢的發展，便促使了許多研究者陸 續發表同儕互評對於學生學習效果之影響的相關研究，甚至還有文獻更進一步的 發現除了收回饋可以增加學習效果外，提供回饋同樣的也可以提升學生的學習成 效 [1]、 [2]，由此可見同儕互評對於學生學習效果之影響的相關研究領域已有一 定的成熟度。
然而，若想提高學生使用同儕互評的學習成效，那麼互評系統內的回饋品質 就是個非常重要的議題。目前 D. J. Nicol 與 Macfarlane‐DickDebra 已經指出提供高 品質的資訊能使學生解決問題並且自我改進，同時也會幫助他們採取行動去減少 想法與結果之間的落差 [3]。另外，G. Gibbs 與 C. Simpson 也指出在某幾種狀況下，
回饋對於學生學習效果是有益的 [4]，例如：充足的頻率與細節、專注在學生的表 現與行為上而不是個人特徵、適當的作業目標與評論標準等等，因此可以得知在 互評系統中，學生所提供的回饋品質是影響他們學習成效的關鍵。
儘管互評系統中的回饋品質是影響學生的學習成效的重要因素，但大部分的 研究卻只記載著同儕互評對於學生學習效果的功用，鮮少有文獻著墨於影響學生
2
給出回饋品質之因素。因此本篇研究便從該角度出發，利用簡報製作與表達課程 搭配使用線上同儕回饋系統，將同儕互評的模式應用在課堂活動與回家作業中，
去研究當學生使用同儕回饋系統時，是否會因為收到回饋品之高低進而影響提供 的回饋品質。
1.2 線上同儕回饋系統之開發動機
由於同儕互評的教學模式已成為近年來教育的趨勢，但目前市面上或網路中 大部份的互評系統，皆僅止於提供學生以文字或圖片形式互評的功能，並沒有提 供學生一個可以將自己演練的過程錄製成影片上傳，並且將上傳的影片呈現給同 儕以便相互評分與提供回饋之功能。此外在某些特定的課程中，學生作業繳交的 方式並沒有辦法以紙本形式來呈現，例如：簡報相關課程、體育相關課程或音樂 相關課程等等，皆是需要學生將自己演練的過程錄製成影片後，才有辦法提供給 老師或同儕們檢閱，因此這些課程的特殊教學需求是現今市面上或網路中的互評 系統所無法提供的。
而在本研究過去幾年的簡報製作與表達課程中，為了要讓學生將自己的演練 的過程呈現給同儕與老師檢閱，使用的方法能分為以下六個步驟：（1）學生將自 己演練的過程錄製成影片；（2）將錄製完成的影片上傳至 Youtube；（3）上傳 Youtube 後取得其影片連結；（4）至簡報製作與表達課程臉書（Facebook）社團 中留言該影片連結；（5）學生們至課程臉書社團點選同學的 Youtube 影片連結並 觀摩其表現；（6）觀摩完後，學生便可至課程專用的互評系統中給予該位同學評 分與回饋。而在步驟 5 與步驟 6 中，為了要能夠同時觀摩影片並給予同學準確且
真實反映該表現的評分，學生必須不斷的切換 Youtube 介面與互評系統介面以達 到其目的，所以如此反覆的切換介面便會造成學生評分時的不便與困擾。
因此本系統則是為了解決學生無法同時觀摩影片與給予評分的問題，而設計 了一個能讓學生將影片連結上傳至系統中，並且能直接在系統中觀摩影片同時給 予分數與回饋的功能。而除了影片互評的功能之外，本系統也額外增加了課堂中 的互評功能，讓老師們除了可以將本系統運用在回家作業，也可以運用在課堂活 動中，以達到充分發揮互評教學模式的功效。最後，在接收同儕回饋的方面，本 系統會提供學生專屬於自己的區域，在區域中系統會保存學生收到的所有回饋，
以便日後若有需要再次複習時能即時查閱。
1.3 線上同儕回饋系統之應用背景
本研究將線上同儕回饋系統應用在簡報製作與表達課程中，而該課程長度為 一學期（十八周），主要在訓練學生之簡報製作技巧與表達溝通能力，在課堂中 教授會指導同學們簡報相關的知識與經驗。除此之外，教授會利用課堂時間讓學 生進行分組演練，同時在課堂結束後也會安排作業讓學生回家練習。而本研究的 線上同儕回饋系統便運用在該課程之課堂活動與回家作業中，其中課堂活動的部 份，學生會將相互演練完之同學的表現藉由該系統來對同學進行評分與提供回饋。
另外回家作業的部份，由於課程對於作業之要求為規定學生必須將作業藉由影片 的方式把自己的表現錄製成影片檔，並且將影片上傳至系統中，讓同學們能在系 統平台觀摩彼此的表現，同時也能藉此給予評分與回饋。
而在經過同學們的互評後，便可在系統中檢閱自己所收到的成績與回饋，同
4
時也可以得知自己在班上的排名。由於本系統能藉由電腦、平板或手機等等之設 備使用，因此學生便可依照自己選擇的時間或地點去查閱自己該次表現收到分數 與回饋。而除了能查看收到的資訊之外，還能為同學之課堂或作業表現給出其評 分，如此便能讓學生管控自己的學習進度並且使他們可以獨立學習 [5]，因此本研 究便可根據系統中的回饋來分析學生收到的回饋品質對於提供回饋品質之影響。
另外在課程之學期初時，也會以問卷型式測量學生的學習動機，藉此在分析結果 時，達到將學生之學習動機排除在影響提供回饋品質之因素中。
1.4 研究問題
圖 1-1 影響提供回饋品質之假設模型
由於在回饋系統中，同學們所收到的回饋品質對於他們改善學習成效是件非 常重要的因素。因此本研究便利用簡報製作與表達課程搭配線上同儕回饋系統，
研究是否學生收到的回饋品質會影響提供的回饋品質，其假設模型如圖 1-1 所示。
而為了防止學生的初始給出回饋的能力與學習動機會影響到提供的回饋品質，進 而對研究結果產生誤差，因此在分析收到回饋品質對於提供回饋品質之影響時，
會採用單因子共變數分析（one-way analysis of covariance，簡稱 one-way ANCOVA）
去排除學生初始給出回饋的能力與學習動機對於提供回饋品質之影響，以達到能 更準確的分析收到回饋品質是否影響提供回饋品質之結果。.
1.5 研究概述
在了解系統的開發動機與應用背景後，接下來第二章會介紹線上同儕回饋系 統的開發，可以藉此了解系統開發時所使用的工具與整體架構。而第三章的部份，
為了可透過文獻了解過去對於回饋品質的計算方法與影響回饋品質的因素，則會 針對回饋品質與學生學習動機的相關理論做探討。接著，第四章便會說明本研究 的教學環境設計方式，目的是藉由認識簡報課程的課程規劃與線上同儕回饋系統 的互評流程，可以對於本研究有更深的理解。而第五章的部份，會解釋本研究的 研究方法，能如何利用統計與訪談的方式分析學生收到的回饋品質影響提供的回 饋品質。因此第六章便順著第五章的研究方法，將學生收到的回饋品質是否會影 響提供回饋品質的研究結果呈現出來。最後，在第七章則會針對研究結果來討論 並且提出本研究的觀點，同時也會說明本研究結果應當如何應用在同儕回饋系統 中與其研究限制為何，進而引導到整個研究的結論與未來展望。
6
第二章 線上同儕回饋系統之開發
本章主要在說明線上同儕回饋系統的開發方式，其中 2.1「開發工具」為介紹 開發本系統所使用的線上平台與相關程式語言，2.2「系統架構」為本系統開發所 使用的基礎架構，而 2.3「資料傳輸流程」則為系統運行時的資料傳遞過程，因此 閱讀完本章後便能了解本系統是如何開發與其運行方式為何，進而對於本系統能 有更深的了解。
2.1 開發工具
團隊開發平台
由於本系統是由多人共同開發，因此在開發時需要使用共同開發專案的工具，
才能避免系統內的某些功能可能會在其他開發者不知情的情況下被撰寫或修改，
因此本系統的團隊開發工具則是採用 GitHub，其中 GitHub 是於 2008 年 4 月才開 始正式上線的平台 [6]。
在團隊合作的開發案中，GitHub 是版本控制的一個重要工具。專案開始開發 前，使用者會先將初始專案上傳至 GitHub 平台中，而平台內的專案可以透過 Git 的指令來進行一連串的操作，例如：上傳、下載與合併等等，透過 GitHub 能讓開 發者分享原始碼（code）並且共同審核，使開發者可以互相觀察彼此的原始碼撰寫 風格，也能避免將錯誤的原始碼上傳至專案中的窘境。
開發語法
本系統開發的語法主要有三種，分別為 HTML、Javascript 與 CSS。其中 HTML
的全名為 HyperText Markup Language，中文名稱則為「超文件標示語言」，主要 用於建立網頁的基本樣貌，常與 Javascript 與 CSS 搭配使用並建立成各種不同的使 用者介面（User Interface，簡稱 UI） [7]。另外，Javascript 則是一種可以減少伺 服器負擔的程式語言，不需伺服器支援即可直接在使用者端的瀏覽器上運作，而 由於近幾年來 Node.js 的發展，使 Javascript 也可以具有某些程度的伺服器功能，
其中本系統就是採用 Node.js 來當作伺服器的開發架構。最後在 CSS 的部分，其全 名為 Cascading Style Sheets，中文名稱為「階層式樣式表」，主要是用來控制網頁 中的使用者介面，開發者可以透過編寫 CSS 來對使用者介面中的字型、顏色與排 版等進行調整。
伺服器系統
採用 Node.js 框架來開發本系統之伺服器，Node.js 是運用 Javascript 所編寫而 成，其運行方式是由 Google 所開發出來的 V8 引擎來執行，目前已被市面上的數 家公司所採用。而使用 Node.js 的優點為可以運用 Javascript 與一些額外的模組來 撰寫伺服器端，能因此達到加快開發系統速度之目的，而常見的框架有 Express.js 與 Socket.io 等等。
資料庫系統
本系統之資料庫是採用 MySQL，MySQL 為一種關聯式資料庫管理系統
（Relational Database Management System，簡稱 RDBMS），其名稱為關聯式資料 庫管理系統之原因為在資料搜尋時，資料庫會藉由表中欄位的值來搜尋並建立起 關聯。而在使用 MySQL 時，本研究會透過使用 Sequel Pro 來輔助管理資料，因為 Sequel Pro 提供了圖形使用者介面（Graphical User Interface，簡稱 GUI）給開發者，
8 使開發者可以方便測試與管理資料。
2.2 系統架構
本系統採用 MVC 架構（Model-view-controller）進行開發，其中 MVC 架構最 早是在 1979 年由 T. Reenskaug 所提出 [8]，它是一種軟體工程中的軟體架構設計 模式，其架構把系統中的應用分成三個部分，分別為模組（Model）、視圖（View）
與控制器（Controller） [9]。在這三者的關係中（圖 2-1），視圖會將使用者介面 顯示給使用者閱覽，然後使用者可以透過操作視圖上之功能將訊息或指令傳遞給 控制器，接著控制器會利用剛由視圖傳來之指令來控制模組，當模組接收到控制 器的指令後，便會將資料寫入資料庫內。相反的，若使用者想從資料庫抓取資料 時，會以如同上述之途徑將指令從視圖傳遞至模組，接著模組會從資料庫中讀取 資料並將資料傳遞至控制器，然後再藉由控制器把資料傳遞至視圖，最後經由視 圖顯示給使用者閱覽。
圖 2-1 MVC 架構
模型
模組之主要功能為對資料庫存取，一般在接收控制器的指令後，便會對資料 庫做與指令相對應之動作，並且將資料回傳給控制器，最後再經由視圖顯示給使 用者查閱，因此可以在視圖上了解資料模組之變化。而模組在本系統中，則擔任 存取大量資料的角色，例如：存取學生之作業資料、存取學生之互評資料與存取 老師創建課堂活動之資訊等等。
視圖
視圖之功能在於顯示模組上之資料與蒐集使用者在視圖上互動之資料，在顯 示模組上之資料的部分，例如：學生某次課堂活動收到的分數與回饋、學生某次 影片作業評分之資訊等等。而在蒐集使用者在視圖上互動之資料的部分，例如：
學生將互評之回饋輸入至視圖中，而視圖透過控制器與模組將資料存入資料庫。
控制器
控制器在 MVC 架構中，主要擔任視圖與模組的連接橋梁，當控制器從視圖收 到指令後，會判斷如何處理該事件並做出回應，例如：學生從視圖上輸入之評分 回饋該如何處理、學生選取某位同學之影片作業後該如何反應等等，或者是當控 制器從模組接收資料庫資料時，該如何把資料呈現在視圖上，例如：顯示學生某 次影片作業收到的回饋、顯示某次課堂活動的互評截止期限。另外，控制器也可 以為應用程式做流程控制，例如：當互評階段截止後必須禁止學生再次進行互評、
禁止學生重複為同一位同學評分等等。
10
2.3 資料傳輸流程
在本章第二節的「系統架構」中有提到本系統是採用 MVC 架構開發，但 MVC 架構是以開發者的角度來審視，若以使用者角度來分析並且搭配本章第一節的「開 發工具」中所提到使用的語法與工具，則會如圖 2-2 所示，可以將資料的運輸流 程分為伺服器端與使用者端。
圖 2-2 資料傳輸流程
使用者端
使用者端顧名思義就是能讓使用者閱覽與控制的部份，使用者可以透過操作 使用者介面來傳送訊息給伺服器，伺服器接收到使用者端的訊息後便可做出相對 應的動作，接著將其訊息指令傳回給使用者端即可與使用者互動，即為 MVC 架構 中的視圖。而在本系統中的使用者端分別包含了 HTML、CSS、AngularJS 與 NoGap
Client。其中 AngularJS 為一款由 Google 所維護的函式庫，是運用 Javascript 所建 構的，目的是藉由 MVC 架構增強瀏覽器的效能。另外，NoGap 使用者端為 NoGap 框架的一部分，NoGap 是由 Javascript 所編寫而成的一個框架，其被稱為 NoGap 是因為它減少了開發者對於開發伺服器端與使用者端之間的缺口與間隔，使伺服 器端與使用者端的架構在開發時不會那麼的繁瑣與笨重 [10]。
伺服器端
伺服器端為使用者所無法直接接觸與操作的部份，伺服器能透過發送指令給 使用者端，藉此讓使用者端做出相對應的動作，也能接收使用者端所傳遞而來的 資訊並且做出回應。另外，伺服器端除了能與使用者端溝通，同時也可以對資料 庫做存取，例如：儲存使用者端傳送過來的資料、取出資料並且傳遞給使用者等 等。而在本系統中的伺服器端分別包含了 NoGap Host、Sequelize 與資料庫。其中 NoGap 伺服器端為 NoGap 框架的一部分，主要用來操控伺服器的行為，同時也可 以接收與傳遞指令。而 Sequelize 則為 Node.js 與 io.js 的一種物件關係對應（Object Relation Mapping，簡稱 ORM）框架，目的為將物件轉換成資料庫語言，而 Sequelize 目前已支援多種資料庫語言。
12
第三章 回饋品質與學習動機之文獻探討
本章的 3.1「回饋相關理論」會針對收到回饋品質對於學生提供回饋品質之影 響做詳細的探討，同時也會在 3.2「動機相關理論」探討學生學習動機對於提供回 饋品質的影響。而探討因素分別為學生初始給出回饋的能力、學生的學習動機、
學生收到的回饋品質、學生受到收了回饋的影響後所提供的回饋品質，因此閱讀 完本章後，便可了解本研究所建構的收到回饋品質影響提供回饋品質之假設模型
（圖 1-1）。
3.1 回饋相關理論
3.1.1 回饋品質計算方法
在教育領域的研究中，有不少文獻記錄著與回饋品質相關的指標與計算方法，
其中 S. Gielen 等人在一篇描述如何藉由同儕回饋改善學習效果的文獻中 [11]，就 把回饋品質之指標分為七個部份，分別為：（1）與互評時制定之指標相關；（2）
提及被評者明確具體的行為；（3）給出該評論內容的理由；（4）改進的建議；
（5）指出其優點與缺點；（6）提出發人深省的問題；（7）清楚而易懂的描述。
因此便可藉由這些指標來判斷回饋的品質。
另外，D. M. A. Sluijsmans 等人在利用互評方式去對做教師訓練的研究中 [12]，
就有提到關於回饋品質的計算方式，該研究把回饋品質的計算方式分為七個部份，
分別為：（1）根據活動內容而制定的指標，例如：課堂中老師所定之指標或活動 規定必須達成之指標；（2）有建設性的建議，例如：能供收到回饋的人改進的方
法或提醒應該避免之事項等等（3）優點或正面的評論；（4）缺點或負面的評論；
（5）思考性的問題，即能讓收到回饋的人進一步思考的問題，該問題不一定需要 正確答案，也不一定有正確答案；（6）回饋的結構，該研究將結構分為四個部份，
分別為是否有清楚解釋、是否有總結如何改進、在回饋的開頭或結尾有正面的評 論與結論的長度；（7）使用定義不明確的詞，例如：好、很棒等等。接著，回饋 品質分數計算方面，在回饋中若有提到第一項到第五項的某項指標，則提到一個 加 1 分。而在第六項回饋的結構中若滿足四項中的某項，則滿足一項加 1 分，因 此第六項最大分數為 4 分。最後，第七項的部份，在回饋中若使用定義不明確的 詞，則出現一個扣 1 分。以此方法即可計算出回饋品質之分數。
而 F. J. Prins 等人在另一篇關於使用回饋來對醫生做訓練的研究中 [13]，則是 把回饋品質計算方式為三大部分，分別為：（1）指標，而指標可以分為回饋內容 與解釋是否清楚這兩個部份，回饋內容是根據該活動的需求而去制定標準。另外 是否解釋清楚的部份，則為是否有詳細的描述被評者的行為並同時解釋回饋內容；
（2）回饋本質，在此能分為四個部份，分為評論、思考性的問題、舉例與建議，
其中評論為在回饋中的正面評論與負面評論是否有平衡。另外，思考性的問題為 提出能讓被評者反思的問題，而舉例是提出可以讓被評者參考並加以思考或改進 的例子，例如：個人經驗。最後，建議則是須清楚的講解如何改進並且具有建設 性；（3）寫作風格，在此分為三個種類，分別為清楚的架構、簡短易懂的描述與 以第一人稱視角來評論的風格。接著，回饋品質的計算，採取最低 0 分至最高 100 分的方式計算，其中指標占 50 分、回饋本質占 35 分與寫作風格占 15 分。因此便 能以此方式計算回饋品質之分數。
14
從以上這幾篇文獻來看，能發現回饋品質之指標被分成幾個部分，分別為與 互評時制定之指標相關、解釋清楚給出評論內容的理由、優點或正面評論、缺點 或負面評論、建設性的建議與思考性的問題。因此本研究便可根據過去文獻的記 載，來參考並將其方法應用在研究收到回饋品質對於提供回饋品質之影響中。
3.1.2 收到回饋品質對於提供回饋品質之影響
收到回饋品質影響學生表現
根據 D. J. Nicol 與 Macfarlane‐DickDebra 的研究，他們指出在同儕互評中，給 學生高品質的資訊或回饋對於他們的學習是非常重要的，這會使學生改善學習成 效與幫助他們自我修正，並且也會幫助他們採取行動去減少想法與結果之間的落 差 [3]。同時也有文獻指出，不是所有的回饋對於學生表現都有幫助 [14]、 [15]。
但根據 G. Gibbs 與 C. Simpson 的研究指出 [4]，在某些狀況下，回饋對於學生的 學習有正面的影響。而該研究的其中幾種回饋條件分別為充足的頻率與細節、專 注在學生的表現與行為上而不是個人特徵、完成作業後與收到回饋時間的間隔不 能太長、適當的作業目標與評論標準、必須跟學生的觀念與知識還有該學科的話 語有關。因此，上述幾點之中，有提到關於充足的細節與專注在學生的表現行為 上而不是個人特徵，還有適當的作業目標與標準，都是在指回饋品質的部份，所 以便能從這些研究得知學生收到的回饋品質對於學生表現會有正向的影響（圖 3-1）。
圖 3-1 收到的回饋品質影響學生表現
學生表現影響提供回饋品質
J. R. Hayes 等人在一份關於寫作能力方面的研究指出 [16]，能力高與能力低 的學生相比，能力高之學生比較可以偵測出校訂文章（revision）中的問題，同時 對於校訂文章也比較有辦法選出有效的策略。另外，Y. H. Cho 與 K. Cho 也研究了 同儕互評中藉由提供回饋來學習寫作能力的影響 [17]，其指出學生的初始寫作能 力會正面的影響他們給出回饋的數量。同時，P. Davies 認為若學生對於該主題有 越多的了解與能力越強的話，則可以讓他提供更高品質的評論 [18]。所以由上述 這些研究便可得知，當學生的能力越高，就能在觀摩同儕表現時發現更多該表現 之優缺點，同時也比較有辦法選出有效的策略提供同儕改進，進而給出更高品質 之回饋，因此學生的表現會正向的影響提供的回饋品質（圖 3-2）。
圖 3-2 學生表現影響提供的回饋品質
收到回饋的品質影響提供回饋的品質
由上述的「收到回饋品質影響學生表現」可以得知，收到的回饋品質會正向 的影響學生表現。另外，在上述的「學生表現影響提供回饋品質」中也可以得知，
學生表現會正向影響提供的回饋品質。因此便可假設收到的回饋品質便會正向影 響提供的回饋品質。
除了收到回饋品質會影響提供的回饋品質之外，也有不少文獻記載著學生在 提供詳細回饋的時候，會藉由描述問題與架構問題的過程學習的更多 [1]、 [2]。
16
另外，根據 K. Lundstrom 與 W. Baker 的一篇提供回饋與收到回饋對於學生之影響 的研究中 [19]，他們在學生學習第二語言的課程中將學生分成兩組，一組為只有 收到回饋，另一組為只有提供回饋，測試哪一組的學生的學習成效比較高，研究 結果發現，提供回饋的那組學生可以有較好的學習成效。因此可得知當學生在撰 寫回饋時，是可以透過給出回饋的過程來學習與進步。
而當學生可以透過提供回饋的過程來改善學習成效時，便會因為學習成效的 增加進而提升給出回饋的品質。如此一來，若學生收到高品質之回饋可以讓他們 的能力增加，而能力增加又能促使他們給出更高的回饋品質，當學生在給出高品 質回饋的同時，又會因為提供回饋而改善學習成效，因此當學生收到高品質的回 饋時，則會進入一個良性循環，進而提高給出的回饋品質。
3.2 動機相關理論
3.2.1 自我決定理論
自我決定理論（Self-determination theory，簡稱 SDT）是在 1985 年由 E. L. Deci 與 R. M. Ryan 所提出 [20]，是屬於心理學中描述個人動機與行為的理論。其中也 探討了人與生俱來的基本心理需求（basic psychological needs theory），而當心理 需求達到滿足之後，即可對動機有正面的影響，同時也說明個人可以藉由自我決 定的知覺做出選擇並影響其行為。
基本心理需求
在自我決定理論中，將人的基本心理需求分為三大部分（圖 3-3），分別為自 主性（autonomy） [21]、能力感（competence） [22] 與關聯感（relatedness） [23]。
而心理需求為人們動機的來源，因此當心理需求達到滿足時，便會為個人帶來動 機的提升進而帶來良好的表現。其中，自主性是指動機與行為是發自於內心，決 定是完全源自於個人自由意識，是出自於自己的選擇並且未受他人影響、控制與 強迫。另外，能力感意指對於自己本身能力的勝任程度的認知，為一種承擔與突 破自我的心理需求。最後，關聯感則是想與周遭環境或他人互動的需要，以及與 他人產生情感的連結或依附關係並試圖創造與他人互動的機會。
圖 3-3 自我決定理論之基本心理需求
動機種類
自我決定理論將動機以自主性高低程度來區分，主要可以分為內在動機
（intrinsic motivation）與外在動機（extrinsic motivation），同時該理論也認為動機 會影響個體的行為。而內在動機是指個體的行為是主動且有興趣的，同時也能從 事物本身得到樂趣，且在沒有外在的酬勞或犒賞的情況下也能自動自發。另外，
外在動機則是個體之動機來自於外在的資源或因素，受外在環境所影響而去從事 某個行為。而自我決定理論中的有機整合理論（Organismic Integration Theory，簡
18
稱 OIT）則把外在動機以自主性由高至低分為四種，分別為整合調節（integrated regulation）、認同調節（identified regulation）、投射調節（introjected regulation）
與外在調節（external regulation） [20]。另外，E. L. Deci 與 R. M. Ryan 指出除了 內在動機與外在動機之外，可以再分出一類為無動機（amotivation） [24]。無動 機是自主性程度最低之動機，表示個體認為從事某行為與結果缺乏連結，內在動 機與外在動機皆不是個體從事某行為的原因。因此，動機種類之自主性高低程度 則如圖 3-4 所示，最左側為自主性程度最低之動機，而最右側為自主性程度最高 之動機，其中自主性程度為連續變數。
圖 3-4 自我決定理論之動機種類
3.2.2 學習動機對於提供回饋品質之影響
在本研究之影響提供回饋品質的模型中，學習動機也是其中影響因素之一。
根據 R. J. Vallerand 提出之論點 [25]，他將會影響行為的模型分為四個階段，分別
為社會因素、心理中介變項、動機型態與結果。而如圖 3-5 所示，其影響順序為 社會因素影響心理中介項，心理中介變項影響動機型態，最後動機型態在影響結 果。其中學生的心理中介變項為自我決定理論中的基本心理需求，指出當學生基 本心理需求達到滿足時，便會影響其動機，再進而影響結果。而本研究之結果便 為學生提供的回饋品質。另外，在學習動機的部份，F. Guay、C. F. Ratelle 與 J. Chanal 則指出當學生的自主性越高的時候，那些學生會得到更好的成績、有更多的堅持、
學習狀況較好與對於學習會有更多的滿足與正面情緒 [26]，因此學生的學習動機 會直接影響學生提供回饋的品質。
圖 3-5 影響結果之流程
20
第四章 教學環境設計
本章 4.1「簡報製作與表達課程」主要在針對課程之教學環境進行詳細解說。
一開始先介紹此課程的規劃內容與流程，可以藉此了解課程之設計方式與目的。
接著 4.2「線上同儕回饋系統」則在介紹課程使用系統的方式，其中包含學生在提 供回饋與收到回饋的互評流程，同時也涵蓋了教師使用系統管理之方式。因此讀 完本章後，可對於課程與其使用之系統的教學環境有更進一步的認識。
4.1 簡報製作與表達課程
4.1.1 課程概述
簡報製作與表達課程之課程長度為一學期（十八周），主要在訓練學生的簡 報製作技巧與溝通表達能力，課堂中教授會指導學生們關於簡報的相關知識與經 驗，同時也安排三次不同簡報專業領域的講師來為同學講解其技巧。除此之外，
也利用課堂活動的時間讓學生演練上課時所提之觀念，演練完後同學可以使用線 上同儕回饋系統來對同學進行評分與提供回饋。而下課前會再安排給學生與當天 所教之主題相關的影片作業，學生回家後能將影片作業上傳至系統上，並且在此 系統上進行同儕間的作業互評。若欲了解更詳細之課程流程，請參考本節第三條
「課程規劃」。
4.1.2 課程目標
此課程任課教授葉丙成指出其課程目標為「培養學生製作專業簡報之能力，
並增進學生表達之技巧。」 [27]。而在課堂中，除了讓學生吸收教授所教導的簡
報與溝通能力之外，也希望能讓同學透過課程安排的課堂活動與影片作業，藉由 同儕互評之方式來相互學習，以提升學生自我調節與自我學習的能力。最後也希 望學生在課程中，除了能增進簡報技巧與溝通能力之外，也能將課程所學之知識 應用在生活中。
4.1.3 課程規劃
本課程的運作模式主要分為三大部分，分別為教授授課、課堂活動與影片作 業。而學生在課堂上的學習方式主要分為四種，課堂流程依序為課堂活動（電梯 短講）、授課、課堂活動（根據授課主題）、授課與總結（圖 4-1）。
圖 4-1 課堂流程
學生在課堂中，除了會有教授指導學生相關的簡報知識與經驗之外，也會有 讓學生在課堂中練習的機會，是為了讓學生在學習完簡報技巧之後，也能夠活用 其學問。此外，在課堂活動中，同學們會彼此分組相互練習與討論，活動結束後，
便可在本課程所使用之系統上讓學生們互相評分。最後，學生可以從系統上獲得 同學們給的分數與回饋，同時也可以從系統中得知該活動之排行榜資訊。
學生回家後，能將課程安排之影片作業上傳至系統中，待學生繳交完作業後，
系統會分配給學生六名指定評分之同學，除了能夠在系統中評分與觀摩該六名同 學之影片外，一樣也能評分與觀摩其他同學之影片。在同儕互評階段截止後，便
22 排行榜得知同學們的成績表現。
若欲知學生的課堂活動與影片作業之系統操作詳細流程，請參考本章第二節
「線上同儕回饋系統」。
4.1.4 課程評量方式
本課程採用的評量方式為形成性評量（formative assessment），而形成性評量 最常被定義為在老師或學生參與的教學與學習活動中，以提供資訊的方式來當作 回饋，進而改善老師或學生的教學與學習活動 [28]。其中形成性評量與總結性評 量（summative assessment）最大的差別，在於形成性評量主要是讓老師與學生可 以在教學與學習過程中，透過多次活動的觀摩與練習來獲得連續性之回饋，所以 評量頻率較高且範圍較小，相反的，總結性評量通常被用在課程結束或學期結束 時，評估學生的學習成果或教學的有效性，所以評量頻率較低且範圍較大。
而本課程採用形成性評量之原因，在於該方法適合本課程的安排與教學模式。
在每次課堂中，學生都能有充分的機會可以在小組內練習與觀摩，因此若能在當 下獲得同儕的回饋並且立即討論，最後再由教授為該次活動講解並做一個總結，
這樣可以使學生得到立即性的回饋與幫助。另外，學生回家後也會被安排與該次 主題相關的影片作業，待完成作業後，可將該影片上傳至系統中並等待同儕給予 回饋，所以若能在教授安排下次作業之前，得到這次作業的回饋結果，學生則可 以依照回饋內容來改善自己的表現，進而將更好的結果呈現在下次作業中。
除了本課程的安排與教學模式適合使用形成性評量的方式之外，研究指出使 用形成性評量對於學生許多優點，而且也發現形成性評量的模式與改善學生的學 術成就有關 [29]、 [30]、 [31]。同時，T. Miller 也表示使用該模式可以培養學生
自我調節學習（self-regulated learning）的能力 [32]。其中的自我調節學習是指學 生能夠主動的監督與調節並且調整他們的認知、動機與行為 [33]。另外 J. Scheerens 主張藉由頻繁的測驗或活動提供之回饋可以增進學生的學習效果 [34]，因此使用 形成性評量的教學模式可以對學生產生諸多正面影響。
4.2 線上同儕回饋系統
4.2.1 系統概述
本系統主要在於提供給學生一個可以在同儕間互評與觀摩的平台，讓學生能 夠藉由欣賞別人表現且給予別人表現回饋的同時，也思考自己的優缺點並提升自 我學習的能力。除此之外，系統也提供學生課堂活動與影片作業之表現排行榜，
因此學生便可透過排行榜的方式，了解自己與其他同學之間的表現狀況，使學生 達到自我勉勵之效果。而系統中同時也可以進行教師管理的操作，使老師們可以 依照課程需求來對課堂活動與影片作業設定日期（例如：活動互評截止期限、影 片作業上傳截止期限）。
而若以系統功能面的角度出發，則該功能主要可以分為三個部份，分別為課 堂活動互評、影片作業互評與教師管理。在簡報製作與表達課程中，學生會使用 到的功能為課堂活動互評與影片作業互評這兩項，所以在此會詳細介紹活動與作 業互評中每個階段所代表之意義，同時也會說明學生使用系統的方式。另外，在 教師管理功能方面，也會依序說明每項功能之功用與使用方式。
24
4.2.3 課堂活動互評
圖 4-2 課堂活動互評流程
課堂活動演練
在課堂活動中，學生會被要求分組演練，因此學生可以充分的運用在課堂上 所學之知識。其中活動長度會依照該次主題之需求而調整。而學生們在活動中會 有兩種演練模式，分別為學生兩人一組與五至六人一組。
在兩人一組的模式中，學生相互練習完後，須再找其他同學演練，不可在同 一次活動內找同一位學生兩次，直至達到教授要求之演練次數。因此學生可以學 習當面對不同學生時，該如何保持一貫的水準，在此同時也能因為多次的練習而 提高熟練度，進而達到更好的表現。
而在五至六人一組的模式中，學生則以個人為單位向組內其他同學報告，當 該位學生報告結束後，則輪替至下一位同學直至每人皆報告過為止。如此便能提 供給學生一個小型舞台，讓他們學習如何在多人面前簡報，也能讓他們在觀摩組 內其他同學表現之同時，思考其優缺點並且檢討自身表現，以達到同儕間相互學 習之效果。
同儕互評
經過多次的同儕相互練習後，學生便可開始在系統上對適才與自己練習之同 學給出分數與回饋（圖 4-3）。其分數指標總共有五項，分別為時間掌控、印象是 否深刻、口條是否流暢、傾聽（是否認真在聽）與支持度（是否感覺溫暖）。而 回饋則是能根據同學之表現，指出其優缺點並給予建議。除此之外，系統限制學 生給之回饋字數必需在二十字以上，因此學生便無法以敷衍的方式或因其他個人 的因素而未填入適當之字數。
而評分機制方面，本系統評分採取匿名制之方式，因為使用匿名制與實名制 之差別，在於學生在匿名制互評的情況下能收到重點較多之回饋 [35]。再者，如 此學生則不必擔心給出之分數與回饋會影響同儕之間的關係，因而能去提供最真 實反映心中想法之分數與回饋。
在同儕互評的階段中，學生被規定必須在活動結束後當天內，完成所有給出 分數與回饋之動作。因為學生在課堂活動內的表現，並不像本課程之影片作業一 樣，可再次經由影片的型式呈現在評分者眼前，因此擔心課堂活動結束後，學生 若沒有即時給予同儕回饋，會因間隔太久而導致學生忘記課堂活動中同學之表現，
進而無法提供反映同學真實表現之分數與回饋。另外有學者指出，提供即時的回 饋給學生對於他們的學習動機非常重要 [36]、 [37]。而且 G. Gibbs 與 T. Habeshaw 也說明 [36]，若學生經過太長的一段時間才收到回饋，會導致他們失去拿到回饋 與持續學習的興趣，因此便要求學生必須在活動結束後當天內完成互評之動作。
除此之外，當同儕互評階段結束後，活動表現分析與排行榜皆會同時公佈給同學 們，若讓學生在互評階段結束後還可以進行評分，則會影響學生該次活動之排名
26 與收到的回饋。
圖 4-3 課堂活動互評介面
活動表現分析
同儕互評結束後，便可在系統上的活動表現分析區查看自己該次課堂活動分 數與同學們給的回饋。由本系統之帳號管理是採用綁定臉書帳號之方式，因此學 生便可以在活動表現分析區內私下觀看該次活動分數與回饋。此外，私下收到分 數與回饋能使學生不必擔心缺點會透露給同學們知道，因而可以有效的學習與改 進自己的不足之處 [38]。
在活動表現分析區內，如圖 4-4 所示之順序，學生一開始會先看到該次活動 之五項指標能力分布圖，因此學生則能根據指標能力分布圖中的時間掌控、印象 是否深刻、口條是否流暢、傾聽（是否認真在聽）與支持度（是否感覺溫暖），
這五項分數來觀察自己是否有哪些能力特別突出或者需要再加強。接著系統會顯 示五項指標分數總平均與該次活動在班上之排名，使學生更清楚了解自己在班上 的能力水準。再來則是回饋的部分，學生則可以根據同學指出之優缺點與建議去 改進，進而精進自己的能力與表現。最後，系統也提供反思筆記之功能，讓學生 在觀看自己的分數與回饋時，可以清楚的紀錄當下的想法並且反思其表現，思考 是否有能再改進的部分或是下一次的活動應該如何調整，以達到除了觀看活動分 數與回饋外，還能增進自身能力的效果。
圖 4-4 活動表現分析之閱覽順序
排行榜公布
在同儕互評結束之同時，除了可以查看學生的活動表現分析之外，也會一併 公布該次活動之排行榜。排行榜的類別主要分為總排行與分項排行，總排行是學 生之五項能力指標的平均分數在於全班的排名，而分項排行則代表學生之各項能 力指標的分數在於全班的排名。因此學生除了能觀察自己在班上的總排行之外，
也能依照自己對於各項指標之重視程度，去了解自己各項指標在班上之水準，以 提供學生一個觀察自己各項能力在班上之進步程度的方式。
28
4.2.4 影片作業互評
圖 4-5 影片作業互評流程
影片作業上傳
在當天課程結束之前，教授會安排與當天所教之簡報知識相關的作業給學生，
目的是為了使學生除了在課堂中學習之外，回家後也能充分的熟練其技巧。另外，
在安排作業的同時也會給學生一個影片作業的上傳期限，期限為當天課程結束後 一周之內，並要求學生在該期限截止前上傳影片，以便影片作業進行至下一個同 儕互評階段。
同儕互評（系統指定）
當同學們影片作業上傳結束後，系統會分配給學生六名指定評分之同學，而 學生可以根據同學的影片作業去對其表現給出分數與回饋（圖 4-6）。另外，若學 生想觀摩除了這六名指定評分之同學以外的作業，則可以在該次影片作業區中點 選想觀摩之影片，同時也可以在觀賞完後給出分數與回饋。
而在評分標準中，分數指標總共有五項，其中四項分別為時間掌控精準度、
印象深刻程度、口條流暢程度與肢體語言表達生動程度，第五項則會依照該次影
片作業之主題，對其做適當的修改。而回饋則是能根據同學的影片作業表現，指 出其優缺點並且給予建議。此外，系統有限制學生給之回饋字數必需在二十字以 上，因此學生便無法以敷衍的方式或因其他個人因素而未填入適當之字數。再者，
由於作業是以影片型式呈現，因此在學生評論同學的表現前，可以反覆琢磨影片 中的細節，進而給出最符合影片中同學表現之回饋。
在評分是否具名方面，本系統是採用匿名制的方式，因為根據研究顯示，在 互評中使用匿名制與實名制之差別，在於使用匿名制得到的回饋會有較多的重點 [35]。另外，系統採取匿名制之原因，同時也是為了防止學生因擔心給出之分數與 回饋會影響同儕之間的關係，進而提供不真實的評分，因此可以讓學生在評分時，
將內心的想法與建議真實的反映在分數與回饋上。
最後，同學們必須在互評期限截止前完成該次作業的所有互評動作。由於學 生會因為經過太長一段時間才收到回饋，而導致他們失去拿到回饋與持續學習的 興趣 [36]，因此在同儕互評階段，教授會給予一周的期限讓同學們相互評分，藉 此使他們有充裕的時間可以仔細觀摩同學之表現，也能依照自己的喜好安排互評 進度，與此同時，學生上傳作業與收到評分的時間間隔也不會太久。此外，一旦 過了同儕互評階段後，作業表現分析與排行榜會同時公布給同學們，若此時學生 還可以進行評分動作，則會影響學生該次作業排名與收到的回饋，因此互評期限 過後不可再對該次影片作業評分。
30
圖 4-6 影片作業互評介面
作業表現分析
在同儕互評階段結束後，即可在系統上的作業表現分析區查看自己的影片作 業分數與回饋。由於研究指出學生私底下收到回饋，能使他們因為不必擔心自己 的不足之處透露給同儕，進而能有效的學習與改進自己的缺點 [38]，因此本系統 之作業表現分析區則完全符合讓學生私下收到回饋之特點。
而在作業表現分析區內，如圖 4-7 所示，學生首先會看到自己五項指標能力 之分部圖，並且可以根據其能力分部圖來了解自己各方面能力之強弱，其中四項 指標分別為時間掌控精準度、印象深刻程度、口條流暢程度與肢體語言表達生動 程度，而第五項指標則會根據每次作業主題的不同而稍作修改。接著學生會看到 自己的五項指標分數總平均與該次作業在班上之排名，使其了解自己在班上的能
力水準為何，再來學生則會看到該次影片作業之回饋，並且能依照回饋中所提之 優缺點與建議去改進。最後，系統則會提供學生一個可以寫反思筆記的區域，使 學生在看完能力分部圖、分數與回饋後，能馬上紀錄當下之想法，並思考下一次 之作業該如何改進，以充分發揮同儕互評與回饋之效果。
圖 4-7 作業表現分析之閱覽順序
排行榜公布
在系統公佈作業表現分析之同時，學生可以在作業排行榜區查詢該次作業之 全班排名。而排行榜之類別分為總排行與分項排行，總排行之排行依據為學生的 五項能力指標總平均，分項排行之排行依據則為學生各項能力指標分數，因此學 生便能依照自己對於各項指標之重視程度，去了解該方面在班上之水平為何。
另外，系統也在影片作業排行榜中，增加一個可以點擊排行榜上同學的連結 而導向其影片作業的功能，讓學生能透過作業排行榜上的名次，去觀摩總表現或 某項指標表現較好的同學之作業。除此之外，學生也能在觀摩影片的同時，學習 該名同學的簡報技巧，已達到提升學生簡報能力與自我學習能力之效果。
4.2.5 教師管理
本系統在教師管理的部分，提供了兩大面向的功能（圖 4-8），分別為課程面 向與人事面向。其中課程面向有對課堂活動創建、編輯與刪除的功能，同樣的也
32 使用者資訊與更改使用者權限的功能。
圖 4-8 教師管理功能
創建課堂活動 / 創建影片作業
教師能根據課堂需求，去對課堂活動或者影片作業設定互評期限。在期限內 學生必須完成所有評分的動作，否則互評期限過後，學生則無法再對該次活動或 作業評分。另外，教師也能依照其課堂活動或影片作業的不同主題，而在創建時 填入活動或作業描述。接著，需為學生回饋字數設定最低限制，預防學生給出敷 衍或字數太少之回饋。最後，再輸入該次活動或作業之評分指標，讓學生在互評 時能夠透過其指標來評分，即可創建完成。
編輯課堂活動 / 編輯影片作業
創建完成後，教師可能會因為課堂的時程改動或其他因素，而導致學生的互 評期限必須更改，此時，則能使用編輯功能，去調整該次活動或作業的互評期限。
此外，該次活動或作業內的描述、字數限制與評分指標皆可以編輯。
刪除課堂活動 / 刪除影片作業
系統除了有創建活動或作業之功能外，同時也有刪除活動或作業之功能，目 的是為了防止教師在設定活動或作業的過程中，發生誤創的情況。除此之外，此 功能也可因應課堂之需求而做即時刪除之功用。
顯示所有使用者
此功能可以顯示目前使用本系統之所有使用者。在教師管理介面中，使用者 的呈現順序會根據使用者在本系統創建帳號之時間做排序。由於本系統創建帳號 時，是採用綁定臉書帳號之方式，因此在顯示使用者名稱時，會顯示其臉書帳號 之名稱。
編輯使用者資訊
由於使用者在本系統創建帳號時，其顯示名稱會是使用者之臉書帳號名稱，
，因此編輯使用者資訊功能主要能分為兩種，其一是可以讓教師對該名使用者在 系統上之顯示名稱做修改，其二是可以讓教師輸入該名使用者的學號，以方便教 師更能掌握本系統之所有使用者資訊與狀況。
更改使用者權限
在所有使用本系統的使用者中，並非全部的使用者皆是修課學生，同時還有 教師、助教與旁聽生。因此學生在互評時，要避免教師、助教與旁聽生出現在學 生指定之評分對象中，而導致互評結果錯亂的情形，所以此更改使用者權限之功 能，在於讓教師可以依照使用者身分之不同，而去對其做適當的權限更改，讓除 了學生以外之使用者不會成會同學互評的對象。
34
第五章 研究方法
本章將研究方法分為兩個部份，分別為 5.1「資料來源」與 5.2「分析方法」，
其中在這兩節中皆會為學生的互評回饋品質、學習動機與訪談做詳細的解釋。而 本研究之分析對象為本學期參與簡報製作與表達課程的修課學生，以透過分析修 課學生之回饋品質、學習動機與訪談來了解同儕回饋系統中的收到回饋品質對於 提供回饋品質之影響。
5.1 資料來源
5.1.1 同儕回饋
在簡報製作與表達課程中，會讓學生使用線上同儕回饋系統互評主要有兩個 時機點，分別為課堂活動與影片作業，因此本研究之資料來源為學生在系統內互 評之回饋。然而，課堂活動所蒐集之同儕回饋的部分，雖然有規定學生必須在課 堂活動結束後的當天內給出分數與回饋，但由於大部分學生在課堂活動結束後並 不會馬上給予同學分數與回饋，同時也沒有如影片作業般的影片可以再次提醒與 回顧同學之表現，因此學生在給出分數與回饋時，多少會受到因為課堂活動結束 後與給出評分之時間點相隔太久，而導致提供的回饋品質受到影響。所以在本研 究中的同儕回饋，只採用系統上影片作業的同儕回饋，以求達到讓研究結果更準 確之目的。
而在影片作業對於學生提供回饋與收到回饋中，主要可以分為三個階段，如 圖 5-1 所示，第一階段為影片作業上傳，此階段會有一周的時間讓學生準備作業，
而第二階段則是同儕互評，此階段同樣的也會有一周的時間讓學生們去相互給出 分數與回饋，最後第三階段則是公布作業表現分析，此分析能讓學生詳細查閱自 己該次作業所收到的回饋。其中圖 5-1 主要在敘述同學提供回饋與收到回饋之流 程，若欲知影片作業之詳細流程，請參考第四章之 4.2.4「影片作業互評」。
圖 5-1 影片作業之學生提供回饋與收到回饋流程
在學生提供與收到回饋的部分，由於課程會安排數次的影片作業給學生，因 此學生會有多次提供回饋與收到回饋的機會，所以本研究之回饋來源即為系統上 影片作業中的學生互評回饋，並且會進一步將學生回饋計算成回饋品質，以進行 分析收到回饋品質對於提供回饋品質之影響。
5.1.2 學習動機
在簡報製作與表達課程學期初時，有提供學生測量學習動機之問卷，其時間 點為第一次影片作業開始之前。而動機測量標準採用相對自主性指標（Relative Autonomy Index，簡稱 RAI）來測量學生的學習動機 [39]。若欲知更詳細之問卷 內容，請參考「附錄一」。
5.1.2 訪談
36
並且在訪談前有告知學生，此訪談與學生之學業成績完全無關，訪談資訊只會被 拿來當作學術研究之材料。而訪談內容則與收到回饋品質是否會影響提供回饋品 質有關，用意是藉此輔助證明本研究之假設是否正確。
5.2 分析方法
5.2.1 回饋品質
計算方法
在現今的研究中，有許多文獻有記載著關於回饋品質之計算方式，而在本研 究中，則參考 D. M. A. Sluijsmans 等人所提出的回饋品質之計算方法 [12]，並藉由 該研究來擬定本研究計算回饋品質之標準（表 5-1）。而參考該文獻回饋計算方法 之原因，在於該篇文獻的計算方法與簡報製作與表達課程之課程設計模式較符合，
且其算法相對於其他算法較不容易產生誤差，因此便參考該篇文獻的計算方法。
在本研究的回饋品質計算標準中，分為三種種類，分別為指標、內容與扣分。
首先，指標總共有五個種類，分別為五項能力指標、優點、缺點、建設性建議與 思考性問題，當回饋中提到某一個種類時，則出現一個加 1 分，其中五項能力指 標最高分數為五分。第二，內容的部份分成兩個種類，分別為清楚解釋理由與總 結如何改進，當回饋中有清楚解釋理由或者總結如何改進時，則可以幫回饋品質 分數加上 1 分，而該兩個種類之最高分數皆為 1 分。最後，扣分的部份，當回饋 中提到不明確之用語時，例如：你表現得很好、你的臉部表情好棒等等，出現類 似「好」與「棒」之不明確用語，則提到一個扣 1 分。
表 5-1 回饋品質計算標準
指標 算法 最高分數
五項能力指標 提到一個加 1 分 5
優點 提到一個加 1 分 不限
缺點 提到一個加 1 分 不限
建設性建議 提到一個加 1 分 不限
思考性問題 提到一個加 1 分 不限
內容 算法 最高分數
清楚解釋理由 提到加 1 分 1
總結如何改進 提到加 1 分 1
扣分 算法 最高分數
提到不明確的用語（例如：好、棒、傑出等等） 提到一個扣 1 分 不限
回饋採用方法
在影片作業流程中，主要分為三個階段，分別為上傳開始、提供回饋與收到 回饋。同時課程也會安排數次影片作業給學生，所以學生會有多次提供回饋與收 到回饋的機會，因此影片作業之時程則會如圖 5-2 所示。而在本研究中的學生提 供回饋品質的部分，即採取搜集學生初始提供的回饋與收到數次同儕回饋後所提 供的回饋來比較，初始提供的回饋為學生第一次影片作業給出之回饋品質，收到 數次同儕回饋後所提供的回饋則為學生第五次影片作業給出之回饋品質。另外，
學生收到的回饋品質部分，會以學生第一次到第四次影片作業所收到的回饋品質 來計算，以此方法分析學生第一次提供回饋後，過程中收到的四次回饋是否會影 響第五次學生提供的回饋。
38
圖 5-2 影片作業時程
學生篩選方法
由於在回饋採用方法中，必須使用到學生第一次影片作業提供之回饋、第五 次影片作業提供之回饋、第一次作業至第四次作業收到之回饋，總共六項。因此 若該學生只要缺少上述該六項的其中一項，便會從採用名單中排除，目的是為了 避免學生提供的回饋品質無法進行前後比較，同時也是防止學生會因為少收到一 次同儕回饋而導致收到回饋品質之影響下降。而採用此措施篩選後的學生總人數 為 62 人（N = 62）。
分析方法
本研究所蒐集的資料有學生第一次作業提供的回饋、第五次作業提供的回饋、
第一次作業到第四次作業所收到的回饋與學生的學習動機，共四個種類。因此資 料蒐集之時間順序如圖 5-3 所示，學生問卷之測量時間點在第一次影片作業之前，
會利用 5.2.2「學習動機」中所提到之問卷計算方式，計算學生學習動機的分數。
接著，會利用在 5.2.1「回饋品質」中提到之回饋品質計算方法，計算學生第一次 提供回饋、學生第一次到第四次收到的回饋與學生第五次提供回饋的回饋品質。
圖 5-3 資料蒐集之時間順序
而分析方法則採用單因子共變數分析，其功能在於研究設計時，實際的實驗 並無法完全排除某些會影響實驗結果的干擾因子，所以為了排除不包括在實驗控 制中的一些操作因素，便藉著統計控制方法來分析資料。而在單因子共變數分析 中，會將欲研究之對象以組為單位來分類，在此可以稱為自變項或獨立變項
（independent variable），又或者稱為固定因子（fixed factor），其中自變項是屬 於間斷變項（discrete variable）。接著，會將實驗後要研究之結果稱為依變項
（dependent variable）或結果變項，其中依變項為連續變項（continuous variable）。
最後，會將影響實驗結果但並不是研究要討論之干擾因素稱為共變項（covariate），
而其中共變項為連續變項。
因此在研究學生收到回饋品質對於提供回饋品質之影響時，為了排除學生初 始給出回饋的能力與學習動機之因素，所以選用單因子共變數分析。而研究之分 析方法如圖 5-4 所示，會將學生從第一次作業到第四次作業所收到的回饋品質以 四次相加後取平均的方式計算，同時以學生收到的平均回饋品質從低至高分成三
40
與 27 %（高回饋品質），並以這三組當作研究中的自變項。其中分組之依據為 T.
L. Kelley 所提之論點，說明常態分配下 27 % 是高低分群最適當的比例 [40]。接 著，會以學生第五次作業提供的回饋品質當作依變項，來判斷學生在不同組中，
是否會因為該三組收到回饋品質不同而影響第五次提供的回饋品質。最後，共變 項的部份，則分別有學生第一次提供的回饋品質與學生的學習動機。
圖 5-4 單因子共變數分析之影響提供回饋品質模型
本研究之學生回饋品質分數是依照 5.2.1「回饋品質」中的回饋品質計算標準 來評分。而在學生回饋品質之信度分析的部份，是由研究者與協同研究者選出所 有學生回饋總數比例的 10 % 來進行評分，其中評分者一致性 Cronbach’s alpha（α）
值為 0.924，因此能判斷其回饋品質之分數是十分可信的。
5.2.2 學習動機
測量方法
本研究所使用之問卷為參考學業自我調節量表（Academic Self-Regulation Questionnaire，簡稱 SRQ-A） [39]。問卷主要的功能在於測量學生們為甚麼要去 做作業。而量表中有四項學生之動機指標，自主性由高至低分別為內在動機、認 同調節、投射調節與外在調節。問卷中所描述之題目則會讓學生依照其感受填答，
每題有四個選項，程度由低至高分別有「非常不同意」（1 分）、「不同意」（2 分）、「同意」（3 分）與「非常同意」（4 分）。若欲得知問卷的詳細內容，請 參考「附錄一」。
計算方法
根據學業自我調節量表中所提，問卷之分數計算方法可以採用相對自主性指 標 [39]。而相對自主性指標是由內在動機、認同調節、投射調節與外在調節，共 四種動機換算而來。其中每種動機的分數能藉由該問題所屬之動機種類的平均分 數來換算，換算公式為：
2*內在動機 + 認同調節 - 投射調節 - 2*外在動機
5.2.3 訪談
紀錄方法
訪談全程皆採用錄音方式記錄，並在錄音前會詢問受訪者之意願。錄音之目 的是為了在與學生訪談之過程中，能專心觀察受訪者的言行舉止。而訪談結束後 便會將其錄音檔編寫成逐字稿以方便查閱。
