實驗設計

由於本研究的批閱系統是應用於C語言的教學上，故實驗對象必須對C語言

有一定的基礎及熟悉度，再加上為了資料收集的方便性及達到良好的實驗控制，

因此本實驗自中華大學資管系，找來了60位自願協助實驗的學生(包含大四及研 究生)，擔任本系統內學生的角色；同時本研究也另外邀請了八位中華大學資管

所擔任過C語言助教的研究生，他們有不少批閱程式語言的經驗，因此足以擔任

系統內使用者為教師的角色。

z 實驗控制因素

為了要探討本研究所開發的系統是否改善了傳統網路教學批閱系統的ㄧ些 缺失，以及是否對教學及學習有所幫助，因此在本實驗，以讓使用者操作不同的 系統及系統功能作為實驗環境的控制因素，利用這些因素將實驗環境分為四個組 別，其組別及對應的控制因素則如下表4-1所示：

表4-1：實驗ㄧ組別之控制因素 組別

對象

實驗組 控制組 控制因素

30人 使用本研究所開發之批閱

系統，使用者為學生的功能 學生

30人 使用傳統網路教學之批閱 系統，使用者為學生的功能

4人 使用本研究所開發之批閱

系統，使用者為教師的功能 教師

4人 使用傳統網路教學之批閱 系統，使用者為教師的功能

實驗組的學生使用本研究所開發之系統的批閱功能、註記觀看功能及類似錯 誤修正練習的功能；而教師則使用本系統所提供之教師功能：批閱功能及觀看系 統所提供之有關學生學習狀況之分析以及所有學生可使用的功能(因為問卷除了 會詢問教師該系統所提供的ㄧ些機制是否對教學有助益外，也會詢問教師該系統

系統的批閱功能及觀看註記功能；教師則使用傳統網路教學所提供的批閱功能。

z 實驗操作流程

本實驗的操作流程大致如下圖4-1所示，而詳細的操作流程則在稍後會做更 詳細的闡述

圖4-1：實驗ㄧ之操作流程圖

(ㄧ) 實驗前置準備工作

由於該實驗主要目的在於探討學生對系統的使用觀感為何，因此在實驗中，

就不考慮組別間學生的C語言能力是否有差異(即沒有所謂的前測)。

(1)實驗資料來源的準備

本研究將大ㄧ學生作迴圈判斷及程式呼叫練習時，所撰寫的程式碼(在此，

稱為前測的題目，請參考附錄B)輸入至資料庫內，以利這次實驗的進行。

開始

前置工作

實驗系統操作

填寫問卷

結束

(2)實驗分組

為了進行該次的實驗，本研究將六十位來自大四及研一的學生分為兩組，一 組為學生實驗組，另一組為對照組，此外教師的實驗組及對照組，則分別找了四 位擔任過C語言助教的研究生。

(3)教師進行批閱

在此實驗中，實驗組的教師利用本研究所開發的系統進行批閱，而對照組的 教師，則使用傳統網路教學的批閱系統來批改學生的程式碼，這部分，在以下的 實驗系統操作流程中會詳加介紹。

(二) 實驗系統操作

本實驗的主要目的是利用問卷的方式(問卷內容請參考附錄C)來衡量使用者

對於系統的使用觀點為何，因此在這個實驗裡，會請參加該實驗的學生以學生的 角度(把自己當作是該程式碼的原始作者)來使用系統的相關功能(註記觀看功能 及批閱功能)，而負責擔任教師角色的研究生，則同樣以教師的角度來使用系統 的相關功能(批閱功能)，然後分別回答問卷的相關問題。

(1)學生部分

◎學生實驗組：

a. 觀看程式碼上的相關註記資訊

本實驗會要求實驗組的學生在觀看相關註記資訊前，先分別進行兩個動作，

度)，去觀看註記，接著便要求學生選擇直接由系統自動推薦的註記；讓學生去 區分這兩種觀看註記的條件有何差別存在；而由圖3-11 及圖 3-12 所示，可看出 在原始程式碼上，有某些地方出現反白的註記效果，這代表有人在該地方作了註 記，當學生用滑鼠去點選該註記時，會出現另ㄧ個對應的註記相關資訊視窗，如 圖 3-19 所示，在備註那一欄，是教師要告知學生為何發生錯誤的原因，以及正 確的觀念，而註記者那一欄所顯示的，則是該註記的作者為何，在觀看完所有程 式碼上面的註記相關資訊後，學生可清楚知道在該程式碼內發生了哪些錯誤，以 及正確的觀念為何。

b. 同儕互評程式碼

在觀看完系統所提供的註記資訊後，接著會請該組學生使用本系統所提供的 類似錯誤修正練習(該機制的用意在前面已提過，在此就不在再重述了)，該練習 必須對系統所選出來的程式碼作批閱的動作，在本系統的批閱介面下，學生除了 可以在程式碼上的任意字元上作批閱的動作以外，本系統還提供了多種的註記類 別(包括插入、刪除、反白、取代等註記類別)，且在批閱的同時，還可以選擇該 註記是屬於哪種類型的錯誤、該註記的重要度(圖 3-2)，甚至可利用＂備註＂此 對話框告知原始碼作者，重要的觀念或正確的觀念(圖 3-4)。

◎學生對照組：

a. 觀看程式碼上的相關註記資訊

該組學生，所觀看的註記資訊，如下圖4-2 所示，左邊為學生的程式碼，而

右邊則為傳統網路教學系統其註記呈現的方式，而註記內容的陳述，是針對整篇 程式碼所下的註記，並不是針對小區域做註記。

圖4-2：學生對照組_傳統網路教學之註記顯示畫面

b. 同儕互評程式碼

該組學生其所使用的註記系統，為傳統網路教學所使用的批閱方式，如圖 4-3 所示，上面的視窗，為學生的原始碼，下面的視窗，則是讓該組學生輸入註 記的視窗，由輸入的視窗可以看出，學生僅能在空白處針對整篇程式碼作概括性 的文字說明，此為學生對照組的批閱方式。

學生原始程式碼 教師所批閱的註記

圖4-3：學生對照組_傳統網路批閱介面

c. 填寫問卷

在兩組都做完觀看註記及批閱的動作後，會請兩組同學填寫問卷，問卷的內 容分為五個構面，跟系統有關的構面為(此四個構面，四個組別都會衡量)：系統 易用性、系統有用性、系統使用態度、系統使用意圖四個構面；再者，為了探討 批閱對於學習是否會有幫助，因此我們又多了一個『批閱對於學習的幫助』構面，

該構面跟系統並無關係，只是純粹讓學生以個人的觀點，回答跟該構面相關的問 題，看學生主觀認為批閱對於學習是否真的有所幫助。

(2)教師部份

a. 批閱學生的程式碼

實驗組的教師在批閱學生程式碼時所使用的系統及批閱方式，比照實驗組學

學生原始程式碼

學生針對原始 碼所做的註記

生所採用的方式，對照組的教師亦是如此(比照對照組學生所採用的方式)。

b. 使用實驗組學生所操作的系統功能

在這個系統操作步驟，只有實驗組的教師才要做，因為要以該組教師的觀點 去評估本研究所提供的一些機制是否對學生的學習有所助益。

c. 填寫問卷

在兩組都做完觀看註記及批閱的動作後，會請兩組教師填寫問卷，問卷的內 容分為六個構面，跟系統有關的構面為(此四個構面，四個組別都會衡量)：系統 易用性、系統有用性、系統使用態度及系統使用意圖等四個構面；再者，為了探 討批閱以及掌握學生的學習狀況對於教學是否有助益，因此本研究增加了『批閱 對於教學的幫助』及『掌握學生的學習狀況對教學的幫助』此兩個構面，構面跟 系統本身無關，只是純粹以教師的角度，主觀認為批閱及掌握學生學習狀況對於 教學是否真的有所助益。