實驗一(課堂組)

一、研究對象

實驗一的研究對象為某高商進修學校資料處理科三年級學生。全班男生 17 人、女生 19 人，共有 36 名學生。學生為白天上班，晚上進修的夜間部學生，國 中基測成績在 70 級分到 80 級分之間。

二、研究工具

此實驗之研究工具包括QBISS、課程單元則用某出版社計算機概論第二冊第 七章節網際網路及搭建於系統上的同儕問題評審準則與同儕答案評審準則、活動 進行方式與時間之關係問卷、及三單元小考考卷與計算機概論考卷。

(一) QBISS

此系統由台灣師範大學研究生陳曉雲所建置完成。QBISS除了可讓學生提 問、回答問題外，還提供學生評鑑的功能，茲分別說明各項功能的使用方式如下：

1. 同儕評價問題：同儕評價問題：學生進入評鑑問題階段後，會出現此教學單 元中所有學生提出的題目，學生看完同儕所提出的題目，先勾選右下角之第一個 問題評審準則 (『想不想回答這個問題』)的五等第量表，然後按下『評價』，即 完成「問題喜好度」的評價（如圖3-1）。接下來學生選擇想要深入評價的問題右 下角按下『問題評價』（如圖3-2），便進入『同儕問題評審準則』表單，勾選完 畢後按下『送出評量結果』即完成同儕評價問題（如圖3-3）。

圖 3-1 課堂組評價『想不想回答這個問題』表單

圖 3-2 課堂組之問題評價表單

圖 3-3 課堂組之同儕問題評審準則表單

2. 同儕評價答案：學生進入評鑑回答階段後，會出現此教學單元中所有學生提 出的答案，學生看完同儕所提出的回答，先勾選右下角『是否從此回答中受益』

的五等第量表，然後按下『評價』即完成回答受益度的評價（如圖3-4）。接下來

學生選擇想要深入評價的答案右下角按下『答案評價』（如圖3-5），便進入『同 儕答案評審準則』表單，勾選完畢後按下『送出評量結果』即完成同儕評價答案

（如圖3-6）。

圖 3-4 課堂組評價『是否從此回答中受益』表單

圖 3-5 課堂組之答案評價表單

圖 3-6 課堂組之同儕答案評審準則表單 (二) 同儕問題評審準則與同儕答案評審準則

課堂組的同儕問題與答案評審準則，主要用於評量學生對同儕問題與答案的 看法，評量方式為選擇式。同儕問題評審準則之評分項目(1)到(3)採用五等第分數

(參見表3.1)，評分項目(4)採用二等第分數；同儕答案評審準則之評分項目採用五

給予4、3、2、1分，每題之後有開放性部分給學生填寫，以了解學生認為時間不 夠之原因為何。

(四) 三單元小考考卷與計算機概論考卷

在每一單元教學與互評完成後，使用單元小考考卷對所有學生進行學習評 量，以觀察學生在各單元學習的成效。在所有單元教學與互評完成後，使用計算 機概論考卷對所有學生進行學習評量，以觀察學生在三個單元學習的成效。

三、實驗流程

本實驗的課程單元使用某出版社計算機概論第二冊第七章節網際網路。實驗 期間共三週，教學時數為九堂課。因為學生為夜間部學生，欲符合學生需求將實 驗於課堂中進行，實施環境為學校電腦教室。

四、資料蒐集與分析

本實驗藉由QBISS記錄學生的提問、回答的文字資料，還有同儕對問題及回 答的評鑑結果，專家對問題及回答的評鑑結果，並以問卷蒐集學生對同儕互評時 間規劃的看法。

課堂組的樣本為某高商進修學校資料處理科三年級學生。樣本人數36人，扣 除未全程參與實驗者1人，故有效樣本共35人，男性17人，女性19人。以「活動進 行方式與時間關係問卷」針對接受使用QBISS的學生進行問卷調查，受試者有35 名，回收有效問卷共35份。問卷所蒐集的資料以百分比加以統計分析，藉以了解 受試者對互評時間之看法。

研究者從學生評價多的問題中依據問題類型、問題獲得分數之高低兩個面向 作為抽樣依據，所抽取之問題樣本涵蓋各個問題類型、分數低及分數高之問題；

研究者從學生的答案中選取評價次數多的答案，依據答案獲得分數之高低作為抽 樣依據，所抽取之答案樣本涵蓋分數低及分數高之答案，抽取好的問題與答案樣 本再交給專家依據評審準則做評鑑。

另外，採用Excel 2003和SPSS 15.0 for Windows套裝軟體作為資料統計分析之 工 具 。 使 用 敘 述 性 統 計 (Descriptive Statistics) 、 皮 爾 森 積 差 相 關 (Pearson product-moment correlation)、Spearman等級相關(Spearman rank correlation)、肯德 爾和諧係數(Kendall Coefficient of Concordance)等統計方法分析資料，並將統計檢 定的顯著水準訂為.05。以下分項敘述：

(一) 敘述性統計(Descriptive Statistics)

本實驗採用敘述統計計算問卷選項的人數、學生互評同儕問題與回答的數 量、學生對同儕問題與答案之看法、不同問題類型在評審準則中獲得的分數、學 生評價高之問題類型，並分析學生對互評時間的看法。

(二) 皮爾森積差相關(Pearson product-moment correlation)

本實驗使用皮爾森積差相關來分析學生的學科學習成效與獲得的同儕評分是 否有顯著相關、同儕與專家的評分是否有顯著相關。

(三) Spearman等級相關(Spearman rank correlation)

本實驗使用Spearman等級相關來分析學生的互評次數與學科學習成效是否有 顯著相關、學生的互評次數與獲得的同儕評分是否有顯著相關。

(四) 肯德爾和諧係數(Kendall Coefficient of Concordance)

本實驗使用肯德爾和諧係數來分析五位專家間的評分是否具有顯著一致性。