系統測試

本節說明本系統試用時的預試步驟與樣本和正式施測步驟與樣本、問卷編 製、問卷內容、填答方式等五部份加以說明如下。

壹、預試步驟與樣本

本預試的目的有二：一是測試系統，檢驗系統的操作與流程是否合乎要求，

將參考受試者提供之意見，作為修正系統的依據，如此將有助於正式施測時，系 統能穩定運作；二是以晤談的方式，了解參與預試的老師與學生在測試過程中所 遭遇到的問題與想法，以作為修正系統之依據。

預試實施方面，老師部分擬將以台中市某國小的 3 位老師為樣本，學生部分 將以台中市某國小六年級一個班級學生為樣本，預試時間約 20 分鐘。該校學生 從三年級便施行每週一節的電腦教學，因此參與預試的學生已經具備基本的電腦 操作能力。在預試過程中，除了觀察與記錄學生的操作情形外，並在預試過後進 行逐一訪談。

預試的結果只供修正系統及正式施測的參考，因為樣本數目較少，因此有待 正式施測後方能了解系統的最大效能和多數老師及學生對於本系統的試用經驗。

貳、正式施測步驟、樣本與評估項目

在正式施測時，使用之研究工具包括研究者自編之「試用經驗問卷」及研究 者研發之「線上聽力測驗評量系統」，來進行系統效能測試及受試者試用經驗問 卷等二方面的評估，有關受試者試用經驗問卷方面，將於本節第参點詳加說明，

在此將說明研究樣本、施測流程及系統效能測試項目三方面。

一、樣本方面

(一）、學生方面

本研究擬以台中市某國小六年級六個班為研究對象，共約160人。

(二）、老師方面

本研究擬以現職國小老師約30人為研究對象。

二、施測流程

(一）、學生方面

每次施測時以一個班級為單位，時間為一節課40分鐘，前25分鐘為 施測說明及施測過程，後15分鐘為實施問卷調查的時間。詳細施測過程 如下：

1、受試者進入電腦教室後，採一人一機的方式施測。受試者首先坐於電 腦前，由主試者用電腦廣播系統說明本系統的進入方式和測驗流程等。

2、指導每位受試者登入系統並調整視窗大小，進入主功能頁之後，按下

「線上測驗」，然後等候主試者的口令。當所有學生準備就緒時，主 試者即宣佈正式開始，所有受試學生即按下「進入測驗」按鈕以進入 測驗頁面，使受試者於同一時間開始測驗。

3、10分鐘後測驗結束，主試者請所有受試者瀏覽測驗結果。2分鐘後請 學生點選系統內的學生試用經驗問卷功能，主試者說明問卷之填答方 式、注意事項及指導等。

（二）、老師方面

擬利用老師週三進修時間，約利用一個小時，前50分鐘為主試者進 行各項功能說明及指導老師實際操作，後10分鐘為實施教師問卷調查的 時間。詳細施測過程如下：

1、受試老師進入電腦教室後，採一人一機的方式施測。受試者首先坐 於電腦前，由主試者用電腦廣播系統說明本系統的進入方式、操作 流程等。

2、由主試者示範系統各項功能及操作，再由受試老師實際動手操作一 次。操作功能包括：系統登入、管理學生資料、試題管理(包括新增、

修改、刪除)、試卷管理(包括新增、修改、刪除)、預測試卷、查詢 學生成績、視訊討論區功能為主。

3、各項功能均由受試老師操作過之後，點選系統內的老師試用經驗問 卷功能，主試者說明問卷之填答方式、注意事項及指導等。

三、系統效能測試方面

(一)、觀察六個參加正式施測的班級在施測的過程中，是否所有學生均能正 確且快速的顯示各個測驗的題目及網頁？

(二)、觀察每位參加正式施測的老師在施測的過程中，是否所有老師均能正 確且快速的顯示各個系統功能的網頁並且順利的進行操作？

(三)、如果有錯誤狀況出現，是怎樣的錯誤？可否在施測時即時給予協助以 不影響施測的繼續進行？

參、問卷編製

本研究所採用之「線上聽力測驗評量系統」試用經驗問卷，係分別參考黃偉 政(2004)、陳國男(2004)、洪世聰(2004)、陳奕壬(2004)、陳恆毅(2004)等所編 之有關問卷，配合本研究之目的加以編製而成。

肆、問卷內容

一、學生試用經驗問卷

本問卷的目的在瞭解國小六年級學生在試用本系統後的經驗，詳細問卷內容 請見附錄一。問卷包含個人基本資料及試用經驗，以下分別說明：

(一)、個人基本資料

此部份的題目在了解受試者的個人基本資料，總共有8題，第1題是關於 受試者的個人基本變項，為性別，第2-8題則是調查受試者上學期英文成績、

家中有無網路、有無使用類似的線上測驗、接觸電腦多久、平均每天使用電 腦的時間、喜歡電腦的程度及電腦操作能力等項目。

(二)、試用經驗

此部份的題目在了解受試者於測驗實施後的經驗感受，由於施測對象是 國小學生，故均採用李克特氏五點量表，由受試者依自己的認知情形，從非 常同意至非常不同意 5 空格中勾選一項與自己最符合的情形，計分方式分別 為 5 、4、3 、2 、1 分，共 12 題。第 1-11 題為學生對本系統特色的看法，

第 12 題為開放性問題，擬作為質的分析。

二、老師試用經驗問卷

本問卷的目的在瞭解國小老師在試用本系統後的經驗，詳細問卷內容請見附 錄二。問卷包含個人基本資料及試用經驗，以下分別說明：

（一）、個人基本資料

此部份的題目在了解受試者的個人基本資料，總共有8題，前4題是關於 受試者的個人基本變項，依次為性別、年齡、教學年資、職務，第5-8題則 是關於受試者使用電腦年資、平均每天使用電腦時間、喜歡電腦的程度、操 作電腦的能力等項目。

（二）、試用經驗

此部份的題目在了解受試者於測驗實施後的經驗感受，採用李克特氏五 點量表，由受試者依自己的認知情形，從非常同意至非常不同意 5 空格中勾 選一項與自己最符合的情形，計分方式分別為 5 、4、3 、2 、1 分，共 12 題。第 1-11 題為老師對本系統特色的看法，第 12 題為開放性問題，擬作為 質的分析。

三、家長試用經驗問卷

本問卷的目的在瞭解國小學生的家長在試用本系統後的經驗，詳細問卷內容 請見附錄三。本問卷讓學生帶回家中給家長填寫，共6題，第1-5題內容主要詢問 家中有無電腦及網路設備、是否會鼓勵自己子女使用本系統、是否會想學會如何 使用電子郵件來查看及了解子女的成績、電子郵件信件內容是否資訊完整等問 題，第6題則為開放性問題，擬作為質的分析。

伍、填答方式

本問卷的填答方式，學生及老師部分是由受試者在做完本研究之網路測驗 後，依自己的操作實際情形，以網路型式再網頁中勾選一個最符合自己狀況的選 項。家長部分則以傳統的紙張列印方式供受試者填寫問卷調查。

第六節 統計分析

將樣本問卷回收後，首先剔除填寫不完整或不清楚的無效樣本資料，然後將 原始資料輸入電腦，再使用SPSS進行統計分析，所運用的統計方法可分為以下兩 部分：

壹、敘述性統計分析

所應用的敘述性統計分析方法為次數分配、平均數與標準差，以便分析學 生、老師及家長各項試用經驗的程度高低與分布情形。

貳、單因子變異數分析(ANOVA)

採用單因子變異數分析方法，在學生部分，分別將受試學生的性別、喜歡使 用電腦的程度以及自認為自己操作電腦的程度三種變項作為單因子變異數分析 之變項因子，以了解學生試用結果的差異情形，再以scheffe法做事後比較；在 老師部份分別將受試教師的性別、年齡、職務、教學年資以及自己認為自己操作 電腦的程度五種變項作為單因子變異數分析之變項因子，以了解老師試用結果的 差異情形，再以scheffe法做事後比較。

最後，整理分析本研究之各項結果並做出結論，以作為未來實施線上聽力測 驗評量系統研發或相關研究之參考。