線上評量應用於教學上的現狀與發展

(1)

線上評量應用於教學上的現狀與發展

林敏芳台北市立麗山國中教師壹、前言工商時報（焦點新聞版，2000）引用思科總裁錢伯斯的觀點，認為未來網路和教育的結合，學生可以在任何時間、任何地點，找到最好的老師，學到最想學的東西，教育將不再受到空間的限制，傳統教育的方式也將大大地改變，網路使教育效果更顯著。由於網際網路興起，使得以全球資訊網為基礎的網路教學方式(Web-Based Instruction，WBI)蔚為風潮。此種新的遠距教學方式突破了傳統教學在時間和空間上的限制，利用網路的特性和技術，也彌補了一般遠距教學缺乏互動性的缺點。網路教學所引發之學習熱潮，對學習者、教師、及學校單位均有正面的影響，一般社會大眾對網路教學之評價與期望亦甚高，諸多之研究也顯示網路教學之學習成效確實有高於傳統教學之現象。鑒於網路教學所帶來之種種優勢，以網路為基礎的所衍生的教學活動也逐漸受到重視，使得利用網路為基礎的教學方式成為一種教學主流，國內各種以網路教學為主要教學方式之平台乃應運而生。透過網路教學平台，我們經由系統化的規劃設計就可以將學習環境完整的架設在網頁伺服器(WebServer)上（莊啟國， 1999）。學習者只要透過一般的瀏覽器(Browser)，便可以不受時空限制，隨時隨地依其需要上線操作學習。教師亦可隨時隨地透過線上編撰教材與學習者討論以了解學習者進度及評量測驗學習者程度。（引自蔡振昆，2001）測驗與評量一直是教學過程中不可或缺的一環。它們可以反應出學生了解學習內容的程度，以供教師掌握學生的學習狀況。然而許多現行網路學習網站提供了琳瑯滿目的功能，卻忽略了學習中很重要的項目－評量，實在是很大的缺失。學習與評量本是學習活動的一體兩面，若無學習活動，評量將無所依據；若無評量機制，學習將為膚淺的學習－學習成效與學習影響無由得知，且學習策略及學習活動的安排等亦無從改善。因此，在網路學習系統上發展足以相佐的評量系統是有其必要性的（林昭汶，2003）。

(2)

傳統的測驗型態，一直是以文字、圖形的靜態紙筆測驗為主，隨著電腦技術快速的發展，在多媒體電腦上，已經可以讓試題以互動式的方式出現。目前大部分的線上學習系統著眼於教材資源的建構與學習環境的設計上，然而，對一個完整的線上學習系統而言，讓學習者有效地學習並且客觀地測驗其學習成果，更是不可或缺的環節，因此，植基於網際網路上的測驗更顯得重要。在網際網路上，利用全球資訊網(World Wide Web，WWW)的環境，可以提供試題以文字、圖形及多媒體互相搭配的方式來呈現，除了延續原有單機測驗的諸多優點及限制外，網際網路的跨越時空限制、加速資源、資訊流通與分享的特性，使得網路線上測驗除了能輔助遠距教學，增進遠距教學的成效外，更能達到資源共享的目標（周倩， 1998）。貳、線上評量的現況電腦科技進入測驗的領域已有二、三十年的時間，早期以單機作業，電腦可應用在很多有關測驗的活動，如題目編擬、建立題庫、挑選試題、測驗編製、施測和評分、統計及印製成績單、以及測驗結果的解釋等（吳裕益，1995）並且具有可以減少施測時間、增加測驗的安全性、立即呈現考試結果等優點（Bugbee, 1992）。而在加入適性測驗的理論之後，電腦化測驗更有了重大的突破，可以針對不同程度的受試者給予不同難易度的試題，且做答的題數減少很多即可測驗出學生能力，近年來與網路的結合，更將電腦在測驗上的功效發揮到最大（引自黃朝恭，2000）。

美國教育測驗服務社(Educational Testing Service，ETS)是最早利用電腦和企業區域網路對不同的測驗目標來進行大規模測驗的機構，該機構宣布台灣地區「托福」測驗(Test of English as a Foreign Language，TOEFL) 將自民國89年10月起改為電腦化測驗(Computer - Based Testing，CBT)（財團法人語言測驗中心，2000），這項具權威性的測驗也正式用電腦當作輔助工具，可見電腦在測驗上應用將是未來的趨勢。

測驗專家們也正積極地發展電腦化測驗(CBT)。Ferraris（1991）認為電腦使用在教育上的施測大約可以分為以下三大類：

一、電腦管理測驗(Computer Managed Testing，CMT)：檢查學生的答案、計分並計算有關的統計數。

(3)

二、電腦實施測驗(Computer Administered Testing，CAT)：電腦與學生直接對話以測驗學生所具備的知識;電腦不僅自動進行施測，並分析測驗的結果，且可根據學生的答題反應自行選擇試題，組織測驗的題目。三、組織測驗(Test Synthesis，TS)：只要給予測驗的特徵（如水準、主題），電腦就會自動從資料庫中提取所需要的試題，自行組織試題。林明達（1998）亦將線上測驗的分類方式，大致歸納為下列幾種：一、依測驗的答案：（一）有明確答案的測驗，如學科能力測驗、智力測驗、能力或技術檢定等。（二）無絕對是非的測驗，如人格、興趣、態度、適應、意見調查等。二、依測驗的方式：（一）傳統測驗：與紙筆測驗相同，試卷一次出現所有題目，應試者可以先行略過某題，有檢查答案的機會，一直到最後按鈕才會送出所有的答案。（二）適性測驗：一次只會出現一題，應試者必須要回答才能出現下一題，因此答錯沒有更正的機會。但是適性測驗能依應試者的能力值決定題目，可以精確測出其能力，不須作完所有題目，可以縮短應試時間。三、依試題的存放方式：（一）題庫：此類的線上測驗通常題目眾多，較具規模，維護也較容易，常用在電腦化適性測驗、亂數選題上。（二）網頁：此類的線上測驗大多是學習環境的附屬品，由於試題存在網頁上所以維護不易，不具備完整的功能，可說是教材內容中的“測驗篇”。四、依選題策略的方式：（一）設定範圍，系統出題：此類的線上測驗可依學生個人需求，自行測驗，教師也可以省去出題的時間。（二）設定題數，亂數選題：此種方式較適用在學生已經自行測驗過，再度測驗時使用。（三）手動自行選題：教師沒有充裕的時間，又希望能挑選符合教學所需的試題時，可以使用自行選題的方式。

(4)

（四）自行命題：完全依照教師上課的教學內容來編製試題，此種方式較能符合教師的需求。五、依與學習環境的搭配：（一）與線上學習環境搭配：此類的線上測驗常成為學習環境的附屬品，不具備完整的功能和獨立運作的能力，通常是以前端的 Script 程式在網頁內執行，常見於學習教材的測驗篇內。（二）獨立的系統：以模組化設計，而可以獨立於於教學教材之外，同時具備完整的測驗建構、實施和管理分析等功能。而測驗電腦化的程序/層次配合心理計量理論及電腦技術則可分為三個層次，即計分電腦化、紙筆測驗電腦化及電腦化適性測驗(Computerized Adaptive Testing，CAT)（何榮桂，1997）。電腦化適性測驗(CAT)是目前電腦化測驗發展的一種重要施測方式，此種測驗方式是依據學生的程度進行學習評量，以反應學習成效。目前有大部分網路測驗系統都偏重在適性測驗，為了要達到適性測驗的目的，均依不同的使用者動態產生題目，使用的方式是將題目事先建檔於資料庫中，經由動態的方式隨機產生選取題目。這樣的處理方式雖然能夠達到動態配題的效果，題型卻侷限在選擇題，而且題目做完之後，不能回顧重新檢視並修正答案；而其他的網路測驗系統，少部份提供了是非及填充等題型，但也是單一標準答案的給分方式。若能發展出結合網路小組評量暨完整回饋訊息能力的系統，對於在電腦上實施多元化評量，勢必有很大的助益。在網際網路的廣泛應用之後，在 WWW 上進行測驗已成為目前電腦化測驗研究發展的趨勢。將電腦化測驗配合上網路，可分為如下兩類：（引自簡瑞華， 2002）一、網路化適性測驗：目前國內以師大資訊教育研究所何榮桂教授所主持的『電腦輔助測驗實驗室』（簡稱 CAT Lab）為主，另外台南師範學院資訊教育研究所也有相關之研究。 CAT Lab 的研究，旨在運用項目反應理論、電腦化適性測驗原理與網路技術，建置一個在 Internet 上之虛擬測驗服務中心(virtual testing service center)（何榮桂、陳麗如、郭再興、蘇建誠、籃玉如，1997），提供題庫管理、線上測驗、線上練習等功能，以期開創一個新的遠距測驗實施模式。至目前已具雛型，各類題庫範例

(5)

也陸續建立，以及適性測驗實施效率之模擬實驗的評估。二、網路化傳統測驗系統結合了電腦輔助測驗的功能與網路的特性是網路化傳統測驗系統的特點，如國中生活科技線上測驗系統(test.scjh.kh.edu.tw)、網路考題銀行 (testbank.csie.isu.edu.tw)、線上測驗服務中心(www.onlinetest.org)，此三個是目前運作中的網路化傳統測驗系統。另外還有一些國內外的線上測驗系統，如一元一次方程式適性測驗（http://ofc.cmsh.cyc.edu.tw/mathx/）、智勝鮮師網（http://content.caidiy.com.tw/）、網路英語學園（http://163.32.84.102/seal/）、WebCT（http://www.webct.com）、ETT （http://www.ett.com）、Iqtest（http://www.iqtest.dk/main.swf）、Spatial intelligence （http://www.ul.ie/-mearsa/9519211/）等，這些線上測驗系統，其內容大多是以文字形式來呈現，較少有以圖形為測驗形式的試題，或者即使能夠有以圖形形式出現的試題，其選題的方式卻是採用傳統電腦亂數選取或依序選取的方式而不是以試題訊息量來決定。（引自盧永昌，2004）在眾多關於線上測驗的研究中，重視的不外乎是評量的統計與回饋。如林昭汶（2003）所提的關於程式語言線上測驗系統中，對於評量系統部分重視的就是學習管理與學習評量。學習管理是用來追蹤及管理學習者的學習狀況，包括學習進度、評量積分、討論積分、總積分、已學過的單元、需進行補救的單元、尚未學習的單元、發表的文章、回應的文章、及老師所給的評量等。藉此功能，學習者可更了解自己的學習成效；老師也可藉學習管理，掌握學習者的學習情形，給予學習建議。學習評量則是學習者可在學習評量的功能中，上傳程式，並看到評量結果及診斷結果。學生可從“學習評量”的網頁中得到評量結果（各評量指標的分析結果，學生程式和個案程式的比較）及由“學習管理”的網頁中得到自己學習狀況的完整記錄及老師所給的學習建議等。簡瑞華（2002）的研究則發現一個完整的線上題庫與評量系統，需提供安全的認證機制、方便的使用者管理介面、完整的題庫管理、友善的試卷製作與管理、完善的線上測驗、即時成績查詢與結果分析、互動的討論機制、即時的試題訊息等。而李連順（2000）的國中生活科技線上測驗系統也強調教師的需求為以下幾項：

(6)

一、提供教師下載、查詢及列印試卷的功能。二、提供教師編輯試卷的功能，試卷必須可以設定成電腦隨機出題、人工選題及能讓多位教師共同編輯試卷。三、提供教師編輯試題的功能，包括編輯是非題、選擇題及填充題，同時還必須能上傳多媒體檔案，以製作多媒體試題；此外還要能分享試題以及能自題庫新增試題。四、提供試題轉換的機制，將教師現有的試題直接轉入系統資料庫內使用。五、提供學生線上測驗的功能，必須可以設定帳號管制、測驗時間及測驗後能得到立即的回饋，並且記錄學生測驗的結果。六、提供成績處理的功能，協助教師統計學生成績並且可以查詢及輸出。七、提供試題分析的功能。由上可知，線上測驗的發展應著重在完善的管理系統、方便的使用介面、安全的認證機制、及時的評量回饋、完整的題庫資料及可編輯試題的機制等，並且應盡可能發展出與選擇題不同形式的題型，以多樣化題目確實達到評量的效果。在步入資訊化的現代，相較於傳統測驗方式受限於時間與地點的限制，人們對於測驗 e 化的接受程度有逐漸提昇的趨勢。目前有許多的研究開始將重點著重在線上測驗的發展與突破，以提昇線上測驗的品質與成果。以長遠的觀點來看，線上測驗未來將有取代紙筆測驗的趨勢。參、線上評量的優缺點一、線上評量所擁有的優勢 Fletcher與Collins（1987）發現學生較喜歡接受電腦施測，且電腦施測具有立即計分、如有錯誤立即回饋、較方便、直接且容易使用、比紙筆測驗快等優點。而林秀娟（1993）亦主張，在試題呈現的方式上，電腦施測可能比以人為主試者之紙筆式測驗更為標準化，且認為電腦施測具有以下二項優勢：可經由個別化測驗的實施增進評量品質，以對學生能力有正確的描述；並可減少編製測驗及結果評量、分析、解釋時所需的例行工作，並將之自動化。另外，孫光天、陳新豐、吳鐵雄（1998）則認為電腦化測驗具有能力搜集一些測驗過程訊息的優點，這是傳統紙筆測驗不容易做到的，此外，電腦化測驗也可能搜集到學生回答問題所需之時間之額外訊息，且實施電腦化測驗學生也可得到正確反

(7)

應的回饋。而學者周文正（1998）亦指出，網路測驗能提供以下優點：（1）提昇施測與批閱給分效率，讓教師能有較多時間在教學研究上。（2）便於教師蒐集受試反應資訊，以協助教師做測驗難度與效度分析。（3）提供具一致性的測驗準備與試題製作，使施測更趨於標準化。（4）有利於發展網路多媒體測驗之呈現型態。（5）有利於適性測驗的發展。（6）減少紙上作業，降低人工作業出錯的機率。（7）易於反覆練習，迅速提供施測結果與正確性的回饋導引資訊。（8）易於建立競爭式環境，提供學習動機與成效。綜上所訴，許多專家學者對電腦輔助測驗的優點所提出的看法大致可歸納如下：（一）易於引發學習動機。（二）真實的呈現題目，可以圖片、聲音、影像、動畫相結合的方式呈現於受測者眼前，將試題表現在一個較為真實的情境中。（三）易於反覆練習。（四）立即性處理與回饋：電腦可以瞬間給予反應或計算得分，受試者可以得到立即的回饋。（五）施測情境的有效控制：電腦化測驗能精確的控制實施和計分的程序，可將測驗標準化，避免人為情境的干擾。（六）可降低測量的誤差，利用電腦則可控制題目顯示的數目，避免字跡對評量的影響，降低測量誤差。（七）施測自動化並可減少測驗的時間。根據一些研究顯示，以電腦來實施同一版本的紙筆測驗，前者只需後者之57%的施測時間（何榮桂， 1990）。（八）可蒐集測驗過程的資訊，並進行分析。（九）節省人力與時間，提昇工作效率並降低出錯率。（十）有利適性化測驗的發展。而電腦化測驗結合網際網路之後，其更可以提供超越時空、隨選隨測、更彈性的施測環境（何榮桂，1997）。網路測驗系統主要功能是在於使考試環境標準化、學生的評分更具客觀性、公正性，並且更容易收集到學生答題訊息以進行教學評量。此外，網路測驗更可省去教師批改、印製試卷及登記成績的麻煩，並能做即時的試題難易度及鑑別度分析，方便老師修正試題，以提高試題

(8)

的品質。由上可知，電腦化線上測驗的優點除了有多媒體的題目呈現、吸引學生、自動化的編製、效率的提高、立即性回饋的提供、額外訊息的獲得、施測情境的有效控制、適性的測驗、測量誤差的降低等之外，更包含了超越時空限制、彈性的施測環境等優點。二、線上評量所遭遇的問題目前的電腦化測驗系統，無論是電腦適性測驗或是電腦輔助測驗，都有受試者無法任意選擇答題的順序，答錯了無法更改，題型侷限在選擇題或填充題，無法嘗試一次以上等情形；而在電腦適性測驗方面，缺乏足夠的回饋訊息，其測驗結果對一般人而言並不易加以解釋。另外，考試作弊的情形層出不窮，在電腦教室的施測環境下，更容易發生學生有意無意間看到別人的答案；此外，目前電腦化測驗之題型大多以選擇題方式呈現，即使是填充題，也是只有單一正確答案，無法接受不同的答案而給予部份的分數。以上所提問題皆使得教師對於是否採用電腦化測驗而裹足不前。因此，電腦化線上測驗並非全然都是優點，其本身也有一些問題存在，歸納可能的問題如下：（一）電腦化測驗的題型多限於選擇題、填充題，因為電腦很難判斷開放式問題的答案（李連順，2000）。（二）在測驗實施方面，施測者必須準備足夠的電腦供受試者使用，且必須考慮電腦當機等問題（李連順，2000）。（三）電腦測驗較不適合呈現必須閱讀文字章節的題型，因為螢幕的解析度可能增加閱讀的困難性（Mazze、Harvey, 1988）。（四）類似數學、理化等必須計算的試題，學生因為必須在草稿紙上抄下題目再計算，而可能影響答題的速度（Ager, 1993）。（五）電腦化適性測驗有題庫建立不易、估計能力的方法未有定論與計分方式不一致的問題（陳志信，1993）。（六）實施網路考試時，由於遠端冒用替身問題仍無法解決，因此考試作弊的問題無法獲得有效的控管（林裕集，2001）。（七）電腦化測驗填充題題型只能以單一正確答案進行判斷，無法部分給分，

(9)

對學生學習成效的評判並不公平。（八）無法任意選擇答題的順序。肆、未來的展望國內學者何榮桂（1997）提到，運用電腦來發展測驗與應用測驗是不可抗拒的趨勢，吳裕益（2000）亦曾提及未來教學評量的新趨勢，包括越來越強調使用測驗來提昇教學水準、更重視多元評量及電腦在測驗之應用扮演更重要的角色。電腦化測驗隨著電腦與網路科技的發展，由單機施測演變至區域網路的施測環境，而有更進一步發展出以網際網路為骨幹的遠距測驗的必要，其目的是希望結合網際網路的優點，提供超越時空、隨選隨測、更彈性的施測環境（何榮桂， 1997）。Alessi 與Trollip（1991）指出電腦與網路應用在建構測驗方面有幾項主要的作用：（1）試題的選擇與組合：因為電腦具有收集、保存資料的基本功能，加上隨機選取和排序的機制，可以針對不同的學生給予不同的試題，達到個別化的測驗方式。（2）試題的產生：可以利用電腦儲存一般化的試題格式或樣版程序，再依需要代入不同的內容。（3）題庫的共享：透過電腦與網路可以將相同科主題的題庫串連，達到資源共享的目的（引自林明達，1998）。線上測驗可提供開放性、自主性、自發性的自評工具，其出發點在於輔助學習者找出自己的學習盲點，並提供學習建議（吳錫修，1998）。然而線上測驗亦有限制存在，例如：當上網人口不斷增加時，上網塞車的情形就容易出現，可能造成試題呈現、回饋的延遲現象，這會影響受試者情緒的不良反應，造成測驗結果不準確；此外，利用網際網路測驗的作弊問題，大部分的人認為這是無法解決的（洪榮昭，1999）。若是在區域網路內，採「同時同地」的方式來舉行，應該可以解決這個問題，但是這將失去了線上測驗原有的彈性。（引自李連順，2000）而在目前的傳統學習環境中，老師雖可能藉由考試及檢討來達到評量理論的要求，但在實際情況中，一個老師通常負責教授多門課程，且班級人數又多，老師要對學生做出有意義的評量，實有其困難；若非藉由電腦的協助，實在難以達到評量理論的要求。因此將電腦應用在測驗上，就帶來了許多的優點，教師除了使用傳統的紙筆測驗外，應該將題庫電腦化，以便使用電腦來輔助測驗。如果能建立一個完整的評量系統，則將為改進傳統的學習注入一個新的契機，如此一來，教師也可將多餘時間投注在形成性的評量上，並採用歷程記錄、觀察、實驗

(10)

記錄等多元化的評量方式來實施，以改進教學和學習。並且也可為網路學習帶來更多的優勢，透過線上測驗，讓學生在不受時空的限制之下作自我的評量，不僅能立即得到回饋，還可幫助學生了解學習的盲點，強化學生所學的知識，使印象更為深刻。由上可知，線上適性測驗或線上傳統測驗其實都具發展的潛力。因此若能著眼於克服線上測驗目前所遭遇的一些問題，相信未來以線上測驗取代傳統測驗將是指日可待。而因現行的線上測驗多以選擇題型為主，故未來的研究方向可思考關於填充式題型及開放式題型評量的建構，將可使試題類型更加的多元化，選擇性更多。另外，由侯妤青（2001）的研究中，我們發現自動造題機制建立的重要性，因此將自動造題機制結合網路的應用，也將是未來重要的研究方向，如若能提供試題編輯的功能，則可讓線上測驗系統提供給更多人參與使用，具有遠距編輯試題的方便性。而試題的評鑑也將是線上測驗系統須加以重視之處，現在的線上測驗系統多缺乏此類的機制或者是以人工方式進行處理，費時費力且影響成效，因此，未來若能在試題的評鑑上導入人工智慧的技術，使得試題的評鑑皆可由系統控制完成，以提高試題評鑑的效率，確保題庫中試題的品質，這亦是未來線上測驗系統繼續發展的重點。再者，對於線上作答者身份確認的問題，也是建構完整線上測驗系統亟需思考的問題，如何杜絕作弊現象的出現，這將考驗著專業人員的智慧。還有，關於線上多元化評量系統的建構更應是刻不容緩，否則線上測驗將流於只是將傳統紙筆測驗電腦化、網路化而已，而非真正將評量的意義—gather information 呈現，如此的測驗將只是分數的計算機而已。而對於學生的認知錯誤也應建立相關系統平台，期能給予立即性的分析、回饋。就技術方面而言，則應考慮以專業團隊（包含專業的軟硬體建構人員、課程及試題編輯人員、美工人員、環境架構人員等）的方式進行線上測驗系統的研發，並配合網路頻寬技術及相關軟硬體設施的改進，以達到系統平穩、完整、便於廣泛利用的目的。參考文獻工商時報，網路使教育效果更顯著。工商時報，2000.6.14，焦點新聞版。李連順（2000），國中生活科技線上測驗系統發展研究。國立高雄師範大學工業科技教育學系碩士論文。吳裕益（1995），電腦在測驗上的應用。教育實習輔導季刊，5，10-13。

(11)

吳裕益（2000），教學評量的新趨勢。教育研究，70，6-9。吳錫修（1998），電腦輔助測驗之動態命題與試卷驗證模式研究。第七屆國際電腦輔助教學研討會，國立高雄師範大學。何榮桂（1997），從「測驗電腦化與電腦化測驗」再看網路化測驗。測驗與輔導， 144，2972-2974。何榮桂、陳麗如、郭再興、蘇建誠、籃玉如（1997），虛擬測驗服務中心建構在 Internet 之適性測驗環境。1997 台灣區網際網路學術研討會(Taiwan Area Network Conference)，10 月，台北。周文正（1998），WWW 上電腦輔助測試系統之研製。第七屆國際電腦輔助教學研討會，國立高雄師範大學。周倩（1998），電腦輔助測驗與評量－發展趨勢與研究方向。第十四屆科學教育研討會，國立高雄師範大學。林秀娟（1993），動態評量結合試題反應理論在空間視覺學習潛能評量之研究。台北：國立臺灣師範大學心理與輔導研究所碩士論文（未出版）。林明達（1998），全球資訊網線上測驗系統之設計與製作。國立交通大學未出版的碩士論文。林昭汶（2003），程式設計網路學習系統之設計與實作-評量建構。東吳大學資訊科學系碩士論文。林裕集（2001），適用於電腦教室之網路測驗系統：以國小英語科為例。臺中師範學院教育測驗統計研究所碩士論文。洪榮昭（1999），網路教學。台北：華采。侯妤青（2001），智慧型題庫模型建構之探討。彰化師範大學商業教育學系碩士論文。莊啟國（1999），跨世紀學習新典範--網路學習。遠距教育，12，67-69。財團法人語言測驗中心（2000），「托福」電腦化測驗即將在台灣舉辦。 http://www.lttc.ntu.edu.tw/tofelcomputer。孫光天、陳新豐、吳鐵雄（1998），線上測驗回饋對作答情緒與動機影響之研究。載於國立高雄師範大學主編：第七屆電腦輔助教學研討會論文集（頁 9-14）。高雄：國立高雄師範大學。陳志信（1993），電腦化測驗的優點及可能的問題。學生輔導通訊，24，72-75。

(12)

黃朝恭（2000），國民小學國語科多媒體線上測驗系統建置之相關研究。臺中師範學院教育測驗統計研究所碩士論文。蔡振昆（2001），傳統教學與網路教學之比較研究-從教學媒體、班級經營及教學評量來探討。國立中山大學資訊管理學系研究所碩士論文。盧永昌（2004），線上適性測驗系統之研究--以空間能力為例。國立臺灣師範大學工業教育學系碩士論文。簡瑞華（2002），線上題庫與評量系統之開發。臺中師範學院教育測驗統計研究所碩士論文。

Ager, T. (1993). Online placement testing in mathematics and chemistry. Journal and Computer-Based Instruction, 20(2), 52-57.

Alessi,S.M. & Trollip,S.R.(1991). Computer-based instruction: methods and development. Englewood Ciffs,NJ: Prentice Hall.

Bugbee,A.C.(1992). Examination on demand.findings in ten years of testing by computer 1982-1991.Edina,MN: TRO Learning.

Ferraris, M.(1991). An approach to the use of computers in instructional testing. In L.Dann. S.H. Irvine, & J.M.Collis(Eds.), Advances in computer-based humon

assessment(pp.219-236). Kluwer Academic Publishers.

Fletcher,P.&Collins,M.J.（1987）.Computer- administered versus written test- advantages and disadvantage. Journal of Computer in Mathematics and Science Teaching,6

（2）,38-43.

Mazzeo, J., & Harvey, A. L.(1988). The equivalence of scores from automated and conventional education and psychological tests., New York: College Entrace Examination Board.