系統測試及問卷編製

本節針對能力指標評量診斷的網路系統預試步驟與樣本、正式施測步驟與樣 本、問卷編製、問卷內容、填答方式等五部份加以說明如下。

壹、預試步驟與樣本

本預試的目的在求系統設計能更趨完善，以利正式施測時，本系統能穩定 運作。也藉此了解參與預試的學生在測試過程中所遭遇的問題，以便修正系統。

預試將以台中縣某國小五年級共8位學生為樣本，預試時間約20分鐘，該校從三 年級便施行每週一節的電腦教學，且五年級學生已累積了較多的數學知識，因此 參與預試的學生已經具備基本的電腦操作與數學能力。在預試過程中，除了觀察 記錄學生的操作狀況外，並逐一進行晤談。預試的結果只供修正系統及正式施測 的參考，畢竟樣本只有8人，與一般的班級人數約三、四十人差了好幾倍，因此 有待正式施測後方能了解系統的最大效能，以及多數學生對於本系統的試用經

在正式施測時，使用之研究工具包括研究者自編之「試用經驗問卷」及研究

擬利用教師週三進修時間，約利用一個小時，前五十分鐘為主試者 進行各項功能說明及指導教師實際操作，後十分鐘為實施教師問卷調查 的時間。大致施測過程如下：

1、受試教師進入電腦教室後，採一人一機的方式施測。受試者首先 坐於電腦前，由主試者說明本系統的進入方式、操作流程等。

2、由主試者示範系統各項功能及操作，再由受試教師實際動手操作 一次。操作功能包括：系統登入、建立新試卷、 建立新試題、

修改試題、模擬評量測驗及進行成績查詢診斷等六種功能為主。

3、各項功能均由受試教師操作過之後，點選系統內的教師試用經驗 問卷，主試者說明問卷之填答方式、注意事項及指導等。

三、系統效能測試方面

（一）、觀察五個參加正式施測的班級在施測的過程中，是否所有學生均能 正確且快速的顯示各個測驗的網頁？

（二）、觀察每位參加正式施測的教師在施測的過程中，是否所有教師均能 正確且快速的顯示各個系統功能的網頁並且順利的進行操作？

（三）、如果有錯誤狀況出現，是怎樣的錯誤？可否在施測時即時給予協助 以不影響施測的繼續進行？

參、問卷編製

本研究所採用之「九年一貫課程之能力指標評量診斷的網路系統」試用經驗 問卷，係分別參考林裕集（2001）、柯俊良（2003）等所編之有關問卷，配合本 研究之目的加以編製而成。

肆、問卷內容

一、學生試用經驗問卷

此部份的題目在了解受試者的個人基本資料，總共有6題，前3題是

1、對於本系統的學習困難度有三題，包含第1、2、3題。

2、對於本系統的操作困難度有二題，包含第4、5題。

3、對於本系統的整體滿意度有三題，包含第6、7、8題。

4、對於網路評量診斷的接受度有三題，包含第9、10、11題。

5、對於本系統各分項功能的滿意度有四題，包含第12、13、14、15 題。

6、開放性問題有一題，第16題，擬作為質的分析。

伍、填答方式

本問卷的填答方式，是由受試者在做完本研究之網路測驗後，依自己的實際 情形，勾選一個最符合自己狀況的選項。

第六節 統計分析

由於本系統之統計分析乃是一份問卷的分析處理，則因此選用SPSS而非 SAS。因為SPSS與SAS比起來，具有系統較小、價格較便宜、操作更簡易、使用介 面較具親和力、無須撰寫程式的特性。在問卷回收後，首先剔除填寫不完整或不 清楚的部份，然後將原始資料輸入電腦，再予以統計分析。所運用的統計方法分 成二部分：

一、敘述性統計：以次數分配、平均數與標準差等統計方法分析學生對各項 試用經驗的程度高低與分布情形。

二、單因子變異數分析（ANOVA）：以學生試用經驗問卷之性別、喜歡電腦 的程度、覺得自己的電腦操作能力、上學期數學成績等四個項目做為因 子，及教師試用經驗問卷之性別、教學年資、喜好電腦的程度、操作電 腦的能力、使用電腦的年資、使用電腦的時間等六個項目做為因子，對