本節由測驗系統的發展、系統開發模式、系統開發工具及網頁技 術來探討測驗系統的發展與開發方式，可得到以下結論：
一、測驗系統開發已逐漸成為一個新的研究領域
從文獻數量看來，目前國內外對網路化測驗系統的研究已有 不錯的研究成果，對於測驗系統的前瞻性亦多所探討及規劃，將 能為教學評量的實施提供一個解決方案。
二、可以系統發展生命週期（SDLC）作為測驗系統的開發模式 系統發展生命週期（SDLC）即為瀑布模式，適用於需求明 確，領域知識（domain knowledge）容易取得的專案，強調開發 過程需有完整的規劃、分析、設計、測試及文件等管理控制。本 研究以林璟豐（2001）所規劃的網路測驗題型作為明確的需求基 礎，並將系統分為分析、設計、發展、評鑑等階段進行開發，除 了將重點放在測驗題型模版的設計及製作外，其他系統功能將依 研究目的及需求加以規劃，初步分為教師、學生以及管理者模組。
三、多媒體評量所需應用的技術層次較高
多媒體的測驗方式雖然較傳統紙筆測驗更能真切地測量學 習成效，但製作上往往存在著技術上的問題，並非每一位有心採 取多媒體評量方式的教師都能輕易做到。本研究期望能突破此限 制，以動態網頁技術開發一個在網路環境下，提供多樣題型模版 及兼容多種媒體格式的測驗編輯系統，教師只要準備好媒體元
素，即可透過簡單的操作導引，製作多媒體試題。
第三節 教學系統評鑑的方法及實施
一、教學系統的評鑑工作
本研究屬於教學評量系統之發展，因此進行系統評鑑階段 時，需考慮專為教學系統設計的評鑑方式。「評鑑」的定義甚多，
最普遍而廣被接受者，是將評鑑視為一種有計畫、有系統的收集 資料、分析資料及提出報告的過程，其目的在診斷問題、進行判 斷，以促進決策的合理性（Felton ＆ McConachy, 1980；Tamir, 1985 ； Lewy, 1985 ） 。 測 驗 系 統 架 構 是 屬 於 電 腦 管 理 教 學
（Computer- Managed Instruction, CMI）之範圍（李連順，2000），
而測驗乃教學的一部份，對於測驗系統的評鑑，除了系統本身測 試外，也應重視其實施的成效或影響。在目前教學系統的評鑑方 法中，智慧型教學系統（Intelligent Tutoring Systems, ITS）的評 鑑方式可謂發展相當成熟，對教學系統評鑑帶來新的思維，其以 內部評鑑（internal evaluation）及外部評鑑（external evaluation）
的分類方式可供一般教學系統作評鑑參考（張鑫安、蘇照雅，
2004）。
二、系統內、外部評鑑的意義
內部評鑑和外部評鑑反映了系統評鑑需求很重要的一個問 題（Iqbal, Oppermann, Patel & Kinshuk, 1999）：「什麼是該被評 鑑的 – 是整個系統或只是系統的一部份？」若評鑑的是整體系 統，則稱為外部評鑑（external evaluation）；若評鑑的是系統架 構、元件或其他特徵，則稱之為內部評鑑（internal evaluation）。
而 Siemer 和 Angelides（1998）曾提出和 Iqbal 等人相類似的 概念：若評鑑的是系統結構及其行為之間的關係，稱之為內部評 鑑；若評鑑的是系統所展現的行為對學生的影響，則稱之為外部 評鑑（詳圖 2-4）。
圖2-4 ITS 的內部及外部評鑑 資料來源：Siemer & Angelides, 1998
統合上述專家的說法，若評鑑的是系統結構及其行為之間的關 係，其實就是對系統內部結構或其他元件的測試，稱之為內部評鑑；
若評鑑的是系統所展現的行為對學生的影響，可等同於對整體系統的 效能的評鑑，此稱之為外部評鑑。而以內/外部評鑑的分類方式正回 應了 Littman 和 Soloway（1988）對評鑑提供的兩個議題：
（一）對學生而言什麼是ITS 的教育影響？
指的就是系統所展現的行為對學生的影響，也就是對整 體系統的效能的評鑑，即外部評鑑。
（二）ITS 的結構和其行為有何關係？
指的就是系統結構及其行為之間的關係，其實就是對系 統內部結構或其他元件的測試，是為內部評鑑。
系統結構 提供 影響 系統行為 學生
內部評鑑 外部評鑑
由以上探討可知，對於教學系統的評鑑而言，不僅僅是就系統本 身的測試而已，還需考慮系統對教育所帶來的影響。本研究為一網路 多媒體測驗編輯系統，主要使用者為教師，但亦具備學生進行線上測 驗的功能。因此就內部評鑑而言，可以專家評估系統內部結構及其行 為的方式來達成，用以確定系統的程式是否能到達一個展示的標準等 級；外部評鑑方面，本系統使用對象為教師及學生，故應探討系統對 兩者而言產生了什麼影響或衝擊。由於系統以試題編輯為核心功能，
將調查教師對系統之試用經驗，此外，學生使用此系統進行網路多媒 體測驗之成效，亦為本研究之探討重點，將以準實驗研究的方式來完 成評鑑，茲將本研究之內、外部評鑑示意如下：
圖2-5 本研究之內部與外部評鑑
系統結構 提供 影響 系統行為 教師與學生
內部評鑑 外部評鑑
專家評估 教師試用
學生測驗
本節摘要
ITS 的評鑑可謂目前發展相當成熟的評鑑方式，其分為內部及外 部的評鑑，可供其他教學系統作為評鑑的參考，其通則為：若評鑑的 是系統結構及其行為之間的關係，即是對系統內部結構及元件的測 試，稱之為內部評鑑；若評鑑的是系統所展現行為對使用者之影響，
可等同於對整體系統的效能的評鑑，稱之為外部評鑑。本研究以此為 基礎，規劃本系統的評鑑方式，將邀請專家評估本系統內部結構及其 行為，以完成內部評鑑；並調查教師試用系統經驗，以及學生網路多 媒體測驗的結果，分析本系統對教學上所帶來的影響，以完成外部評 鑑。