國
立
交
通
大
學
理學院網路學習學程
碩
士
論
文
控制試卷間試題重覆度的選擇策略
A Selection Strategy for Controlling the Replication
of Test Questions among Different Test Sets.
研 究 生：莊明坤
指導教授：陳登吉 博士
控制試卷間試題重覆度的選擇策略
A Selection Strategy for Controlling the Replication
of Test Questions among Different Test Sets
研 究 生：莊明坤 Student: Ming-Kun Juang
指導教授：陳登吉 Advisor: Deng-Jyi Chen
國立交通大學
理學院碩士在職專班網路學習組
碩士論文
A Thesis
Submitted to Degree Program of E-Learning College of Science
National Chiao Tung University in partial Fulfillment of the Requirements
for the Degree of Master
In
Degree Program of E-Learning July 2006
Hsinchu, Taiwan, Republic of China
控制試卷間試題重複度
的選題策略
研究生：莊明坤 指導教授：陳登吉
國立交通大學理學院碩士專班網路學習組
中文摘要
近 年 來 ， 英 語 文 能 力 檢 定 系 統 普 遍 運 用 電 腦 化 測 驗(computer-based test；CBT)結合項目反應理論(item response theory; IRT)為發展測驗系統 的理論基礎。但大都數的測驗系統在選題策略上使用隨機選題，以難易度 為限制條件，以至於設計出的試卷和施測目的無法完全相符，近來國內外 許多學者應用各演算法結合測驗訊息量(test information function)設計出 選 題 策 略 ， 應 用 不 同 的 選 題 策 略 可 編 製 一 份 和 目 標 訊 息 量 誤 差 更 小 的 試 卷，使試卷更能符合施測目的之試卷。 全民網路英檢為電腦網路測驗，系統會依報名人數產生多份試卷，必 需考量每一試卷如何組成，例如試卷內的試題呈現型式，每一試卷內的試 題類別，以及難易度等的變項應都在一定控制範圍內，故本研究在建構挑 題及試卷產生系統，讓命題委員除了以難易度挑題外，更能以試題領域或 英語文能力指標配合多樣式的試題呈現方式為限制條件的挑題系統，使系 統產生的每份試卷的試題呈現型式在一定控制範圍內。 考量電腦測驗，如何在有限的試題庫控制試卷間試題的重複度，防止 再次測驗時試題和上次測驗重複度過高？本研究嘗試利用貪婪演算法，研 究在有限的題庫試題，使系統產生最多的試卷數，其所有試卷間的試題重 複度在適當比例之內。 本研究結果可應用於類似全民網路英檢的挑題及試卷產生系統，使系注重評量與學習進而成為國內具公信力的英語能力檢定系統。
A Selection Strategy for Controlling the Replication of
Test Questions among Different Test Sets
Student：Ming-Kun Juang
Advisor：Deng-Jyi Chen
Degree Program of E-Learning National Chiao Tung University
英文摘要
Abstract
In recent years, the examination system of English competence ability are widely used computer-based test(CBT) to combine with the Item Response Theory(IRT) which is the basic theory of the develop examination system. But the strategy of formulating questions for the test in the most examination system, the restricted condition of the difficulty degree to lead to the test paper which can’t match with the test purpose completely. These years many domestic and overseas scholars’ apply to all kinds of calculation methods with test information function to design the strategy of formulate questions for the test, and using different formulate questions strategy can make a more accuracy test paper to conform with the purpose of the test.
NETPAW is an on-line test in computer, and the system will produce many test papers according to the numbers of the examinees. In the meanwhile, the theorematic examiners have to consider how to compose every test paper. Such as, the presentation type of the examine item, the classification of the examination paper, and the variable of the difficulty degree. All these should be controlled under the desirable range. For this reason, the research focuses on constructing the test-forming and the examination paper production system to make the examiners not only chose the examination subject by the difficulty degree, but also make the paper-forming system which restricts the condition to the test question domain or the English language ability target coordinates the variety presentation of the test questions to make the type of every test paper produced by the system is controlled under a certain range.
How to control the repetition of test papers in the restricted test question bank and avoid the high repetition rate between the two successive tests? The research attempts to use the greedy algorithm to make the most test papers which have a proper repetition ratio between all the tests in the restricted test question bank.
The result of this research can apply to the test-forming and examination paper production system in some similar English ability test like NETPAW, and make the test-forming system which can be justified on the ground of raising the practicality, and make the NETPAW test which lays, the emphasis on the English evaluation and learning become a public reliance English ability test system in our country.
Keywords: Item Response Theory(IRT)、Selection Strategy 、
NETPAW(National English Test in Proficiency for All on the Web)、 Greedy Approrach
誌 謝
為充實自己，選擇交大在職專班就讀，兩年的生活，已接近尾聲，能 順利完成學業，要感謝的人很多，由其是指導教授陳登吉老師，在論文上 提供協助及指導，更重要的是鼓勵我，讓我能有心力來完成學業，老師不 但在學術上指導我們，更在日常生活上，常常會跟我們聊天分享人生的經 驗，所以在交大的研究生涯過的相當積極充實，在此向陳登吉老師致上無 限的感激。 其次，感謝論文口試委員台灣師範大學何榮桂教授、台南大學孫光天 教授、交通大學葉義雄教授及班主任莊祚敏教授，細心指正論文謬誤、不 妥之處，並提供修正意見。 感謝黃吉楠學長及實驗室同窗兩年的同學──裕偉、掌筆、靜芬、齡 儀、芳華，大家一起努力、一起研究。另外要感謝莊育源學長的費心幫忙， 讓本論文的施測得以順利進行。目錄
中文摘要 ... i
英文摘要 ... iii
誌 謝 ... v
一、
緒論 ... 1
1.1 研究背景與動機 ... 1 1.2 研究目的 ... 1 1.3 研究時 程規劃 ... 2 1.4 研究限制 ... 3 1.5 章節概要 ... 4二、
文獻探討 ... 5
2.1 測驗方式 ... 5 2.1.1 各種 測驗方 式優 缺點 ... 5 2.1.2 電腦 化 測驗模 式 ...12 2.2 全民網路英檢(NETPAW) ...14 2.2.1 檢測能力 ...15 2.2.1.1 綜合 應用能 力 ...16 2.2.1.2 分項 能力指標 ...16 2.2.1.3 適合 程度 ...182.3 SUMO（Suggested Upper Merged Ontology，建議上層共用知識本體） 19 2.4 英語文能力指標 ...19 2.5 多媒體試題呈現方式 ...22 2.6 多媒體試題例題 ...24 2.6.1 聽力 測驗 ...24 2.6.2 閱讀 測驗 ...24 2.6.3 口說 測驗 ...25
2.6.4 寫作測驗 ...25 2.7 具公平性的多份試卷 ...26
三、
考量試卷間試題重複度的選題策略設計與實作 27
3.1 最佳組合選題策略 ...27 3.2 應用於類似全民網路英檢的選題策略 ...28 3.3 研究問題及方法 ...29 3.3.1 研究 問題 ...29 3.3.2 研究 方法 ...29 3.3.3 研究 工具 ...29 3.3.4 研究 步驟 ...29 3.3.5 研究 例子說 明 ...30 3.3.6 試卷 平 均重複 題數 ...32四、
選題及試卷產生系統之設計與實作 ... 38
4.1 多媒體網路英檢架構 ...38 4.2 多媒體網路英檢系統模組 ...39 4.3 選題系統架構圖 ...40 4.4 資料庫結構 ...40 4.5 多份試卷選題流程 ...41 4.5.1 依試 題呈現 方式 選題 ...41 4.5.2 依試 卷重複 題數 選題 ...44五、
系統應用與評估 ... 48
5.1 多媒體網路英檢試題研發 ...48 5.1.1 試題 研發背 景 ...48 5.1.2 試題 題型 ...48 5.2 題庫試題數依最大重複題數可產生的最多試卷數對照表 ...50 5.2.1 聽力 及閱讀 測驗 ...50 5.2.2 口說 測驗 ...505.3 試題重複度分析 ...52
六、
研究結論與未來展望 ... 54
6.1 研究結論 ...54 6.2 對未來 研究的建 議 ...54參考文獻 ... 55
附錄一 ... 57
表目錄
表 1 各種測驗方式優缺點比較表 ... 6 表 2 各種電腦化測驗模式優點比較表 ... 13 表 3 各種電腦化測驗模式限制對照表 ... 14 表 4 GEPT 和 NETPAW 比較表 ... 15 表 5 國中小英語文聽、說、讀、寫各項能力指標 ... 20 表 6 國內外應用相關演算法於選題策略 ... 27 表 7 用 800 試題來組每份試卷 40 題，試卷間最大重複試題 ... 31 表 8 試題數 200 題，重複題數最大題數為３題，產生 145 份試卷的每份試 卷試題編號 ... 32 表 9 任兩份試卷平均重複題數 ... 37 表 10 多媒體網路英檢系統模組 ... 39 表 11 符合重數題數每份試卷試題題號資料表SAME_ID... 40 表 12「聽力」、「閱讀」測驗─題庫試題數依重複題數的不同可產生的試卷 份數對照表(每份 40 題) ... 50 表 13「口說」測驗─題庫試題數依重複題數的不同可產生的試卷份數對照 表(每份 15 題) ... 51 表 14 「寫作」測驗─題庫試題數依重複題數的不同可產生的試卷份數對 照表(每份 5 題) ... 51 表 15 同一次考試考生間的試題重複相似度分析 ... 52圖目錄
圖 1 研究架構圖 ... 3 圖 2 多媒體試題呈現對應答案呈現方式 ... 23 圖 3 閱讀測驗圖例[12] ... 24 圖 4 閱讀測驗圖例[12] ... 25 圖 5 口說測驗圖例[12] ... 25 圖 6 寫作測驗圖例[12] ... 26 圖 7 貪婪演算法選題策略和傳統選題在固定題數(30 題)條件下之測驗訊 息函數曲線圖 ... 28 圖 8 研究步驟流程圖 ... 30 圖 9 符合重複題數所得的試卷數收斂圖 ... 31 圖 10 多媒體網路英檢系統架構圖(SYSTEM ARCHITECTURE) ... 39 圖 11 選題系統架構圖(SYSTEM ARCHITECTURE) ... 40 圖 12 規劃新測驗試卷 ... 41 圖 13 選擇試卷選題方法 ... 42 圖 14 選擇選題規則 ... 42 圖 15 輸入試卷份數及各試題呈視方式題數 ... 43 圖 16 產生的所有試卷列表 ... 43 圖 17 多份試卷選題流程圖 ... 44 圖 18 規劃新測驗試卷 ... 45 圖 19 選擇試卷選題方法 ... 45 圖 20 選擇選題規則 ... 46 圖 21 輸入最大重複題題數 ... 46 圖 22 產生的所有試卷列表 ... 47一、 緒論
本章主要闡述研究背景、研究動機與目的、研究架構、研究問題及研 究限制。1.1 研究背景與動機
隨著我國加入世界貿易組織(WTO)，我們所需面對的是全球化市場的 競爭，因此具備良好的外語溝通能力，已成為職場競爭力之要件。鑑於此 行政院於 2002 年 5 月宣布「挑戰 2008 國家發展重點計畫」，而其中排名 首位也是大家所重視的「E 世代人才培育計畫」其計畫之四大議題的第一 項即為營造國際化生活環境，提昇全民英語能力[1]。英語文學習已是我國 現今最重要的學習課程。 然而測驗是評量學習成果和衡量知識能力的一套有效方法，若能配合 適當的測驗，對於學習效果將有很大的助益，綜觀今日英語教學多媒體化 已日趨進步且漸成潮流，將多媒體科技運用在測驗上也將引起學者專家的 日益重視，成為教育發展的重要趨勢。在現今資訊科技與網際網路快速發 展下，測驗亦已由傳統的紙筆測驗逐漸 e 化。且經由多媒體電腦呈現多樣 化的試題，並依造考生能力出題的適性化測驗亦成驅勢。 電腦科技的蓬勃發展，和網際網路的盛行，許多英語文能力測驗因而 產生，但如何依不同的測驗目的由題庫中選取題目產生試卷，以符合測驗 設計者欲達成之目標，將是項重要的研究，此外，欲建立多份平行測驗， 以試卷間試題的重複度是影響試卷品質的重要因素，本研究針對上述問題 在提供一個控制試卷間試題重複度的選題策略，使系統產生的所有試卷間 試題重複度能在一定比例內。 良好的英語文能力測驗系統，存在著以下列重要因素： z 試卷如何組成，例如試卷內的試題呈現型式，每一試卷內的試題 類別，以及難易度等的變項應都在一定控制範圍內? z 考量電腦測驗，如何在有限的試題庫控制試卷間試題的重複度， 防止再次測驗時試題和上次測驗重複度過高？1.2 研究目的
性向。測驗的組合也因測驗的目的與受試者的樣本分佈不同而有不同的需 求。也因測驗需求的多樣性，使得測驗建構不易單純以人工方式處理。此 外，一份合適的測驗，涵蓋題庫、選題限制條件及選題策略的有效運用。 如何使測驗建構者由題庫中針對預期的測驗目的與對象，訂定適當的選題 限制條件，再控制試卷間試題重複度選題策略以組成多份試卷，亦應是重 要的研究方向。 本研究成果可應用於類似全民網路英檢(NETPAW)[2]同時多份試卷的 測驗系統： z 考量一試卷的同質性，例能以試題領域或英語文能力指標配合多 樣式的試題呈現方式在一定控制範圍內的多份試卷； z 考量二，從題庫挑出符合選題條件的試題，並應用貪婪演算法， 在有限的試題庫試題，使系統產生的所有試卷在試題重複度能達 到適當比例。
1.3 研究時程規劃
利用本實驗室以動態網頁(PHP)技術結合資料庫(MySQL)及網路伺服 器(Apache)的方式建置的多媒體網路英檢系統，來研究多份試卷的挑題策 略；研究步驟可分為四階段： 第一階段：前置作業 1. 由 相 關 文 獻 的 閱 讀 中 ， 了 解 現 代 測 驗 理 論 － 項 目 反 應 理 論 (item response theory; IRT) 及 國 內 外 各 學 者 應 用 不 同 演 算 法 [3][4][5][6][7][14][16][17]而 設 計 的 挑 題 策 略 如 孫 光 天 等 人 [3]所 提 應用貪婪演算法於選題策略。 2. 收集分析現有測驗模式，整理歸納其優缺點。 3. 研究分析現有的題庫測驗系統，整理歸納其優缺點，定出測驗系統 的選題規則。 第二階段：試卷間試題重複度的選題策略設計與實作 1. 利用 Microsoft Excel 模擬試試題庫內所有試題，應用貪婪演算法 (Greedy Approach) 概念以 VBA 程式設計編寫程式。將 所 得 到 的 資 料 整 理 成 試 題 庫 試 題 數 依 重 複 題 數 的 不 同可產生的 試卷份數對照表。 第三階段：套用資料於本實驗室發展的多媒體網路英檢測驗系統 1. 將 訂 定 好 的 選 擇 規 則 及 題 庫 試 題 數 依 重 複 題 數 的 不 同 可 產 生 的 每 份試卷試題編號整理並建入 PHP 資料庫內。 2. 測試系統的正確性與實用性，並修改系統再測試。 第四階段：研究結果的分析與討論並提出論文結論與未來發展方向。 文獻探討 了 解 現 代 測 驗 理 論 － 項 目 反 應 理 論 及 國 內 外 各 學 者 應 用 不 同 演 算 法 而 設 計 的 挑題策略，如孫光天等人[3] 所 提 應 用 貪 婪 演 算 法 於 選 題策略。 第二階段研究：考量多份試 卷間的同質性的挑題策略。 研究結果之分析與討論 研究結論與建議 第一階段研究：考量試卷間 試題重複度的挑題策略。 多媒體英語檢測系統的挑題策略 圖 1 研究架構圖
1.4 研究限制
由於研究成果將應用於類似全民網路英檢(NETPAW)，因題庫試題量 為有限的，以本實驗室多媒體網路英檢系統為例，各測驗項目：聽、讀、 說、寫及在各級別試題數為 300 題至 1300 題，且學校資源、時間及人力 上因素的考量，本研究僅提供測驗題庫試題數 300 至 1300 題，依 3 至 81.5 章節概要
在第二章中，介紹相關文獻如測驗方式、全民網路英檢(NETPAW)、 及選題規則變項如 SUMO (Suggested Upper Merged Ontology，建議上 層共用知識本體）、英語文能力指標。
第三章中，應用 Microsoft Excel 模擬試題庫，利用 VBA 程式以貪婪 演算法，研究在試卷間試題重複度限制內可得的最多試卷數。
在第四章中，將資料整理並建置在 PHP 資料表內，套用資料於多媒 體網路英檢測驗系統。
在第五章內，系統應用於類似 NETPAW 的英檢測驗系統的結果評估， 並對未來的發展方向提出建議。
二、 文獻探討
本章共分為五節，分別為(1)測驗方式：介紹現行各種測驗方式的優缺 點、(2)全民網路英檢：根據教育部台(九一)社(一)字第 91104187 號辦理「全 民網路英語能力檢定」及「全民網路英語能力檢定」為教育部依據「挑戰 2008—國家發展重點計畫」專案研發，並於 95 年 5 月獲行政院人事行政 局 已 審 查 並 核 准 NETPAW 納 入 公 務 人 員 英 檢 加 分 種 類 [2] 。 (3)SUMO (Suggested Upper Merged Ontology，建議上層共用知識本體）：依學術 性方式將英語文分成九大類[8]。(4)英語文能力指標：介紹九年一貫教育部 訂定之國中小英語文能力指標[9]。(5)多媒體試題呈現方式：有別於傳統題 型(選擇題、填充題、問答題、題組)，本實驗室依試題呈現方式對應答案 呈現方式，定義不同的試題呈現題型[10]。 經由測驗方式的各項優缺點，我們實驗室建置多媒體網路英檢系統， 為電腦化測驗，可透過 LAN+WAN 的多點同時進行測驗，以試題領域、英 語文能力指標及試題呈現題型為變項的挑題及試卷組成系統。2.1 測驗方式
測驗是評量學習成果和衡量知識能力的一套有效方法，若能配合適當 的測驗，對於學習效果將有很大的助益，綜觀今日英語教學多媒體化已日 趨進步且漸成潮流，將多媒體科技運用在測驗上也將引起學者專家的日益 重視，成為教育發展的重要趨勢。 2.1.1 各種測驗方式優缺點 現 行 測 驗 方 式 可 分 為 ： 傳 統 測 驗 即 紙 筆 測 驗 、 電 腦 化 測 驗 (Computer-Based Test；CBT)、電腦網路化測驗(Web-Based Test；WBT)、 電腦適性化測驗 (Computer Adaptive Test；CAT)，各種測驗應用的測驗 理論如古典測驗理論和項目反應理論(item response theory; IRT)及將各 種測驗的優缺點及限制整理如下表：表 1 各種測驗方式優缺點比較表 測驗方式 測 驗 理 論 測驗 所 需設 備 試題形 式或類 別 試題 使用 之呈 現媒 體 優點及缺點 傳 統 測 驗 紙筆測 驗 【紙筆 測驗是 指將試 題印製 於試卷 上，要求 學生以 筆在試 卷上作 答，因而 稱之為 紙筆測 驗。 例如：全 民英檢 (GEPT) 、國中基 本學力 測、大學 指考學 測、現行 國家考 古 典 測 驗 理 論 影印 機、 紙、 筆、 教 室、 測驗 卷 選擇、 是非、 填充、 配合、 問答、 寫作 (翻 譯、作 文) 文字 圖片 優點： 1.發展已久，且具規模。 2.計算公式簡單明瞭、淺顯 易懂。 3.適用於大多數教育與心理 測驗資料，以及社會科學 資料的分析。 缺點： 1.試題無法以多媒體方式呈 現。 2.缺乏 IRT 即時回饋 (Feedback)機制，無法提 供學生與教師足夠資訊。 3.樣本依賴(sample dependent)的指標能力難 比較，傳統測驗較著重靜 態知識的評量，對動態 性、過程性的問題情境較 難表達。 4.非複本(nonparallel)但 功能相同的測驗所測得的 分數間，無法提供有意義 的比較。 5.複本難實施。 6.缺乏預測力。
限制： 1.無法測驗聽力、口語問答 等題型。 2.試題無法以多媒體方式呈 現。 試… 現 代 測 驗 理 論 影印 機、 紙、 筆、 教 室、 測驗 卷 選擇、 是非、 填充、 配合、 寫作 (翻 譯、作 文) 文字 圖片 優點： 1.所採用的試題參數，如難 度、鑑別度、猜測率等， 是不受樣本影響的指標； 亦即偏差的樣本也可以得 到題目參數的不偏估計 值。 2.能夠針對不同的受試者， 提供個別差異的測驗誤 差。 3.同時考慮受試者的反應型 態和試題參數。 4.測驗分數可以藉由跟題目 參數（例如題目難度位置） 做比較得到其意義。 5.可以藉由測量模式的運用 及轉換，來使測驗分數呈 現等距量尺。 缺點： 1.試題無法以多媒體方式呈 現。 2.紙筆測驗方式來進行，在 分析的過程當中費時耗 事，且只有掌握到大多數 學生的錯誤類型，並未注 意到學生個人在學習上的
錯誤類型。 限制： 1.無法測驗聽力、口語問答 等題型。 2.試題無法以多媒體方式呈 現。 古 典 測 驗 理 論 多媒 體個 人電 腦、 電腦 教室 選擇、 填空、 寫作、 聽力測 驗、 口語問 答 文字 圖片 聲音 影片 動畫 優點： 1.較紙筆版省時省力，快速 資料處理。 缺點： 1.受試者須能操作電腦。 2.大部份試題仍以文字、圖 片方式呈現，缺乏多媒體 試題。 3.評量機制大多仍然只提供 測驗後的單純分數資訊， 缺乏回饋(Feedback)給學 生與教師足夠資訊，因此 與過去紙筆測驗相比，成 效並不如預期。 限制： 1. 電腦教室需有大量的多 媒體電腦。 2. 需有專業人員將試卷及 測驗結果取出，付出較多 的人力成本。 電 腦 化 測 驗 Computer- Based Test 現 代 測 驗 理 多媒 體個 人電 腦、 電腦 選擇 填空 寫作 口語問 答 文字 圖片 聲音 影片 動畫 優點： 1.試題以多媒體方式呈現， 如聲音、影片、動畫等， 較生活化。 2.透過電腦與網路之特性，
論 教室 聽力測 驗 建構出具分析個別學生能 力、提供回饋機制之評量 系統，以提供教師及學生 自行檢討改進之用，以期 發揮出線上評量系統的真 正效益。電腦化測驗具有 以多樣性與動態性的方式 呈現試題、立即性回饋的 提供、施測情境的有效控 制、降低測驗的誤差、減 少測驗的時間等優點。 缺點： 1.試題是亂數選題，較無法 準確測出受試者的真正能 力。 限制： 1.電腦教室需有大量的多媒 體電腦。 2.需有專業人員將試卷及測 驗結果取出，付出較多的 人力成本。 Web-Bas ed Test 【結合 網際網 路的優 點，提供 超越時 空、隨選 隨測 (test-o 古 典 測 驗 理 論 伺服 器、 多媒 體個 人電 腦、 網路 選擇、 填空、 寫作、 口語問 答、 聽力測 驗 文字 圖片 聲音 影片 動畫 優點： 1.個別化評量，不受時空地 點限制。 2.易於反覆練習。 3.試題以多媒體方式呈現， 如聲音、影片、動畫等， 較生活化。 缺點： 上評量機制大多仍然只提供 測驗後的單純分數資訊，缺
乏回饋(Feedback)給學生與 教師足夠資訊，因此與過去 紙筆測驗相比，成效並不如 預期。 限制： 1.網路速度會影響測驗結 果。 2.需有安全的防弊措施。 n-deman d）、更 彈性的 施測環 境。】 現 代 測 驗 理 論 伺服 器、 多媒 體個 人電 腦、 網路 選擇、 填空、 寫作、 口語問 答、 聽力測 驗 文字 圖片 聲音 影片 動畫 優點： 1.提升施測與批閱給分效 率。 2.便於教師蒐集受試反應資 訊，以協助教師做測驗難 度與效度分析。 3.提供具一致性的測驗準備 與試題製作，使施測更趨 於標準化。 4.有利於發展網路多媒體測 驗之呈現型態。 5.有利於適性測驗的發展。 6.減少紙上作業，降低人工 作業出錯的機率。 7.易於反覆練習，迅速提供 施測結果與正確性的回饋 （ corrective feedback ）導引資訊。 8.個別化評量，不受時空地 點限制。 9.試題以多媒體方式呈現， 如聲音、影片、動畫等， 較生活化。
限制： 1.網路速度會影響測驗結 果。 2.需有安全的防弊措施。 Computer Adaptive Test 現 代 測 驗 理 論 IR T 1.單 機測 驗 (個 人電 腦) 、電 腦教 室 2.透 過網 路測 驗： 網 路、 伺服 器、 個人 個 腦、 電腦 教室 選擇 填空 寫作 口語問 答 聽力測 驗 文字 圖片 聲音 影片 動畫 優點： 1.經濟且有效率。 2.具個別化測驗的特性。 3.施測情境較標準化。 4.提供精確的個人能力估計 值。 5.提升施測與批閱給分效 率。 6.便於教師蒐集受試反應資 訊，以協助教師做測驗難 度與效度分析。 7.提供具一致性的測驗準備 與試題製作，使施測更趨 於標準化。 8.有利於發展網路多媒體測 驗之呈現型態。 9.減少紙上作業，降低人工 作業出錯的機率。 10.易於反覆練習，迅速提供 施測結果與正確性的回饋 （ corrective feedback ）導引資訊。 11.個別化評量，不受時空地 點限制。 12.試題以多媒體方式呈 現，如聲音、影片、動畫 等，較生活化。
缺點： 1.測驗題型受限制。 2.能力分數解釋較困難。 3.研製成本高。 4.必須依順序作答，不能跳 答。 5.需要複雜的運算與線上即 時的能力，所以運算速度 太慢將會影響到施測的速 度。 限制： 1.測驗題型受限制。 2.網路速度會影響測驗結 果。 3.需有安全的防弊措施。 2.1.2 電腦化測驗模式 由於資訊科技的普及，電腦化測驗較傳統紙筆測驗有更多的優點；同 時，因係由電腦顯示出題、線上評分而具有較佳之客觀性[11]。本實驗室 將電腦測驗依測驗的工具及地點 (單機測驗、透過 LAN、透過 WAN 或同 時利用 LAN 和 WAN)，將電腦測驗，細分為八種模式， z 模式一：單機的電腦化測驗(CBT) z 模式二：單機的電腦適性化測驗 (CAT) z 模式三：區域網路(LAN)的-CBT 模式 z 模式四：區域網路(LAN)的-CAT 模式 z 模式五：廣域網路(WAN)和 LAN 並用-CBT 模式 z 模式六：廣域網路(WAN)和 LAN 並用-CAT 模式 z 模式七：廣域網路(WAN)的 CBT 模式
z 模式八：廣域網路(WAN)的 CAT 模式
並由表２的說明，我們可從下列幾個向度來進一步比較各模式的優點 及限制整理如下表：
表 2 各種電腦化測驗模式優點比較表 各種電腦化 測驗系統模 式的優點對 照表 快速 科 技 環 保 有 效 率 多 媒 體 試 題 試 題 生 活 化 快 速 資 料 處 理 降 低 人 工 出 錯 機率 非 同 步 施 測 個 別 化 測 驗 便 於 蒐 集 受 試 反 應 資訊 施 測 情 境 較 標 準化 精 確 的 個 人 能 力 估 計值 透 過 網 路 直 接 考 試 並 回 存 答 案 同 時 多 個 考 場 進 行 測驗 施 測 地 點 不 受 限制 模式一：電腦 化測驗(CBT) Ｖ Ｖ Ｖ 模式二：適性 測 驗 電 腦 化 (CAT) Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ 模式三：區域 網 路 模 式 (CBT) Ｖ Ｖ Ｖ Ｖ 模式四：區域 網 路 模 式 (CAT) Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ 模式五：WAN 和 LAN 並用 -CBT 模式 Ｖ Ｖ Ｖ Ｖ Ｖ 模式六：WAN 和 LAN 並用 -CAT 模式 Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ 模式七：WAN 的 CBT 模式 Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ 模式八：WAN 的 CAT 模式 Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ Ｖ
表 3 各種電腦化測驗模式限制對照表 各種電腦化測 驗系統模式的 限制對照表 需大 量電 腦教 室同 時施 測 需技 術人 員將 試卷 裝入 每部 機器 測驗 結果 需技 術人 員至 電腦 取回 試卷 管控 易有 弊端 測驗 題型 受限 制 網路 速度 影響 測驗 結果 需有 確定 受試 者是 否為 本人 的機 制 需有 安全 的防 弊措 施 模式一：電腦化 測驗(CBT) Ｖ Ｖ Ｖ Ｖ 模式二：適性測 驗電腦化(CAT) Ｖ Ｖ Ｖ Ｖ 模式三：區域網 路模式(CBT) Ｖ Ｖ 模式四：區域網 路模式(CAT) Ｖ Ｖ 模 式 五 ： WAN 和 LAN 並 用 -CBT 模式 Ｖ Ｖ 模 式 六 ： WAN 和 LAN 並 用 -CAT 模式 Ｖ Ｖ 模 式 七 ： WAN 的 CBT 模式 Ｖ Ｖ Ｖ Ｖ 模 式 八 ： WAN 的 CAT 模式 Ｖ Ｖ Ｖ Ｖ
2.2 全民網路英檢(NETPAW)
全 民 網 路 英 檢 (NETPAW) 成 立 根 據 教 育 部 台 ( 九 一 ) 社 ( 一 ) 字 第 91104187 號辦理「全民網路英語能力檢定」。「全民網路英語能力檢定」為教育部依據「挑戰 2008—國家發展重點計畫」專案研發。依據「邁向學 習社會」白皮書方案八「推廣全民外語學習」，「推展終身教育，建立學習 社會」中程計畫辦理。目的為(1) 語文教學包括教材、教法及教學評量三 部分，而教學評量是度量語文習得成效不可或缺的工具，網路語文評量具 立即性及統整性，又施測過程不須利用紙筆，兼具環保。(2) 網路英語能 力檢定，在全球化架構下及知識經濟的社會中，為一值得推行之資訊化施 測方式。 現今國內獲行政院認可英語能力檢定方式包括：全民英檢及全民網路 英檢，兩種測驗方式的比較如下表： 表 4 GEPT 和 NETPAW 比較表 國內獲行政院認可英語能力檢定方式中包括 測驗名稱 測驗項目 測驗 方式 試題呈現方式 試卷 數量 全民英檢 (GEPT) 初試(聽力、閱讀、 寫作) 複試(口試) 傳統 紙筆 測驗 傳統紙筆測驗試題 （圖文並陳的試題 呈現及使用錄音帶 播放試題及錄音） 每一等級只 有一份相同 的試卷 全民網路 英檢 (NETPAW) 初試(聽力、閱讀) 複試(寫作、口試) 電 腦 及 網 路 化 測 驗 (WBT) 多媒體試題，試題生 活化（影片視訊、歌 謠、歌劇、 演講或 詩 詞 朗 誦 、 口 說 翻 譯） 依學生報考 的人數由系 統產生相對 數量的試卷 數 現行全民網路英檢的電腦化測驗模式為 LAN+WAN 的 CBT 模式，且 系統已進入 LAN+WAN 的 CAT 的實驗階段，待各項試測資料分析完成， 即可改為 LAN+WAN 的 CAT 的模式。 2.2.1 檢測能力 英語能力包括聽、說、讀、寫四種，第一階段檢測包括聽力與閱讀能
採分級測驗，各級有明確的能力指標，包括綜合應用能力與分項能力指標。 2.2.1.1 綜合應用能力 級數 入門級 基礎級 初級 中級 中高級 英語 綜合 應用 能力 通 過 入 門 級 英檢者，英語 能 力 相 當 於 國 小 中 高 年 級，能聽、說 及 朗 讀 簡 單 句 子 及 對 話。 通 過 基 礎 級 英檢者，英語 能 力 相 當 於 國 小 畢 業 至 國中一、二年 級，能理解和 應 用 很 簡 易 的 日 常 用 語。 通 過 初 級 英 檢者，英語能 力 相 當 於 國 中 畢 業 至 高 中，能理解和 應 用 簡 單 日 常用語。 通 過 中 級 英 檢 者 英 語 能 力 相 當 於 高 中 畢 業 至 大 學，能理解和 使 用 英 語 進 行 日 常 生 活 溝通。 通 過 中 高 級 英 檢 者 英 語 能 力 相 當 於 大 學 非 英 語 主 修 科 系 畢 業，能應用英 語 進 行 更 寬 廣 領 域 的 溝 通。 資料來源：全民網路英檢網站[13] 2.2.1.2 分項能力指標 級數 入門級 基礎級 初級 中級 中高級 相對 程度 國 小 中 高 年 級 國小畢業至 國中一、二年 級 國 中 畢 業 至 高中 高 中 畢 業 至 大學 大學非英語 主 修 科 系 畢 業 字彙 500 字 1000 字 2000 字 4000 字 6500 字 聽 能 聽 懂 常 用 的 片 語 及 句 子。例如：能 聽 懂 讚 美 常 用 的 片 語 與 句子、慢而清 晰 的 簡 短 對 話等。 能 聽 懂 簡 易 的 句 子 及 簡 短的對話。例 如：能聽懂簡 易 清 晰 的 問 候語、價格、 及時間等。 能 聽 懂 一 般 的 句 子 及 對 話。例如：能 聽 懂 問 候 語、價格、及 時間等。 能 聽 懂 實 用 的句子、英語 對 話 、 及 短 文。例如：能 聽 懂 一 般 交 談 及 簡 易 產 品廣告等。 能 聽 懂 進 階 英語交談、廣 播、及句型較 複 雜 的 文 章。例如：能 聽 懂 新 聞 報 導 、 日 常 演 講、以及工作 簡報。
說 能 複 誦 簡 短 句子、朗讀簡 短 對 話 。 例 如：能簡短介 紹 自 己 的 名 字 或 說 出 住 在 那 個 城 市。 能 複 誦 簡 易 的句子、朗讀 簡短文章、及 回 答 簡 短 問 話。例如：能 以 簡 單 英 語 詢 問 價 格 及 問路。 能 複 誦 一 般 的句子、朗讀 簡易文章、及 回 答 簡 短 對 話。例如：能 於 購 物 及 問 路時，進行對 答。 能 以 簡 單 英 語 描 述 日 常 事 物 及 進 行 交談。例如： 能 簡 要 自 我 介紹、介紹朋 友、及描述一 般事物。 能 使 用 英 語 進行交談、描 述 所 見 所 聞、及進行討 論。例如：能 說 明 為 何 無 法 借 錢 給 同 事或朋友、詳 述 圖 片 內 容、以及參與 公 共 事 務 討 論。 讀 能 看 懂 常 用 英語句子、簡 短 對 話 。 例 如：能讀懂明 信 片 上 的 簡 短用語、簡易 對話等。 能 看 懂 簡 易 的標示：以及 讀 懂 簡 易 英 語 對 話 及 短 文。例如：能 讀 懂 簡 易 標 示、到達某處 的指示、及簡 短故事等。 能 看 懂 常 用 的標示；以及 讀 懂 簡 易 英 語 對 話 及 短 文。例如：能 讀 懂 簡 易 路 標、菜單、及 短 篇 故 事 等。 能 看 懂 招 牌 及 讀 懂 一 般 對話、書信及 短文。例如： 能 閱 讀 一 般 公告、私人信 函、及產品介 紹等。 能 閱 讀 各 類 文章，以及利 用 字 詞 結 構 推 測 較 困 難 的 字 詞 意 義，或利用上 下 文 了 解 句 子 內 容 。 例 如：能閱讀報 章雜誌、產品 使 用 說 明 書、及工作報 告等。 寫 本 級 不 考 寫 作 能 寫 簡 短 的 句子、對話、 及 很 簡 短 的 故事。例如： 能 寫 簡 短 問 候語、及描述 能 寫 簡 易 的 句子、對話、 及 短 文 。 例 如：能填簡易 表格、寫簡短 賀詞、及撰寫 能 寫 簡 單 的 對 話 和 短 文，以及利用 英 文 來 翻 譯 簡易中文。例 如：能寫邀請 能 寫 較 長 對 話 、 完 整 文 章、及工作報 告。例如能以 英 文 翻 譯 工 作 所 需 之 中
熟 悉 的 人 或 事物。 簡短遊記。 函 和 問 候 信。 文 操 作 步 驟 、 表 達 意 見、以及說服 別人。 資料來源：全民網路英檢網站[13] 2.2.1.3 適合程度 級數 入門級 基礎級 初級 中級 中高級 英語 綜合 應用 能力 通 過 入 門 級 英 檢 者 ， 英 語 能 力 相 當 於 國 小 中 高 年 級 ， 能 聽 、 說 及 朗 讀 簡 單 句 子 及對話。 通 過 基 礎 級 英 檢 者 ， 英 語 能 力 相 當 於 國 小 畢 業 至 國 中 一 、 二 年 級 ， 能 理 解 和 應 用 很 簡 易 的 日 常用語。 通過初級英檢 者，英語能力 相當於國中畢 業至高中，能 理解和應用簡 單日常用語。 通 過 中 級 英 檢 者 英 語 能 力 相 當 於 高 中 畢 業 至 大 學 ， 能 理 解 和 使 用 英 語 進 行 日 常 生 活溝通。 通 過 中 高 級 英 檢 者 英 語 能 力 相 當 於 大 學 非 英 語 主 修 科 系 畢 業，能應用英 語 進 行 更 寬 廣 領 域 的 溝 通。 下列人員宜具有該級英語能力 各行 各業 適用 對象 各 行 各 業 正 積 極 提 振 英 語 能 力 的 所 有 從 業 人 員 、 學 員 、 及學生。 百 貨 業 、 餐 飲 業 、 旅 館 業 或 觀 光 景 點 的 助 理 服 務 人 員 、 計 程 車 司 機 、 公 車 司 機 等。 維修人員、行 政助理、百貨 業、餐飲業、 旅館業或觀光 景點服務人員 等。 業 務 、 技 術 、 行 政 、 銷 售 人 員 、 護 理 人 員 、 旅 館 接 待 人 員 、 飯 店 服 務 人 員 、 總 機 人 員 、 警 政 人 員 、 旅 遊 從 業 人 員 等。 航空機師、航 管人員、海關 人員、導遊、 外 事 警 政 人 員、新聞從業 人員、商務、 企劃人員、秘 書、工程師、 研究助理、空 服人員等。 資料來源：全民網路英檢網站[13]
2.3 SUMO（Suggested Upper Merged Ontology，建議上層共用
知識本體）
SUMO（Suggested Upper Merged Ontology，建議上層共用知識本 體）[8]，由 IEEE 標準上層知識本體工作小組所建置。這工作小組的目的 是發展標準的上層知識本體，這將促進資料互通性、資訊搜尋和檢索、自 動推理和自然語言處理[8]。 知識本體（ontology）類似於字典或者術語表，但是能使電腦處理更 多內容的細節和其結構。知識本體包括將人們有興趣的領域正規化為一套 概念、關係和定理（axiom）。上層的知識本體被限制在 meta 的概念、一 般、抽象或者哲學，因此足夠一般提出（在一定水準上）一個涵蓋廣闊範 圍的領域區域。特殊領域具體的概念不被包括在上層知識本體中，但是這 樣的知識本體確可提供特殊領域（例如：藥、財政、專案…等等）的知識 本體結構的建立[8]。 藉由 SUMO 最高層次的知識本體理論，將英語文分成九大領域，再以 階層式架構，把每一領域分成數個次領域，並將次領域再細分，建立英語 文領域知識本體，完整領域階層如附錄一。 英語文領域知識本體第一層分類為： 1. Humanities 2. Social Science 3. Formal Science 4. Natural Science 5. Medical Science 6. Engineering Science 7. Production Industry 8. Fine Arts 9. Recreation
2.4 英語文能力指標
隨著地球村時代的來臨，國際間政治、經濟、文化往來頻繁，英語的 重要性日益突顯。從資訊、科技、工商業、乃至高等教育，英語已成為國 際交流之重要溝通工具。而透過英語學習，學生可體驗不同的文化，增進語溝通基礎，涵泳國際觀，以期未來能增進國人對國際事務之處理能力， 增強國家競爭力。國民中小學英語課程強調營造自然、愉快的語言學習環 境，以培養學生之學習興趣和基本溝通能力。 根據國中基本學力測驗英語科能力指標整理如下[9]： 1.聽、說、讀、寫之基本溝通能力。 2.學習英語的興趣與方法。 3.對本國與外國文化習俗之認識。 表 5 國中小英語文聽、說、讀、寫各項能力指標 國小 階段 1-1-1.能辨識基本的英語語音。 1-1-2.能辨識基本的單字、片語、及句子的重音。 1-1-3.能辨識問句和直述句之語調。 1-1-4.能聽懂常用之教室及日常生活用語。 1-1-5.能聽懂簡單的句子及簡易之日常生活對話。 1-1-6.能聽懂簡易歌謠和韻文的主要內容。 1-1-7.能藉圖畫、布偶及肢體動作等視覺輔助，聽懂簡 易兒童故事及兒童短劇的大致內容。 聆聽能 力指標 國中 階段 延續國小階段的基礎，繼續發展以下各項能力： 1-2-1.能欣賞簡易詩歌的音韻與節奏。 1-2-2.能聽懂日常生活對話和簡易故事。 1-2-3.能看懂、聽懂簡易影片和短劇的大致內容。 口說能 力指標 國小 階段 2-1-1.能以正確的發音唸出字母。 2-1-2.能正確地唸出常用基本字詞。 2-1-3.能以正確的重音及語調說出簡單的句子。 2-1-4.能參與課堂上的口語練習。 2-1-5.能以簡易英語介紹自己。 2-1-6.能使用簡單的教室用語。 2-1-7.能使用基本的社交禮儀用語。 2-1-8.能作簡單的提問、回答和敘述。 2-1-9.能吟唱歌謠及韻文。 2-1-10.能以簡易英語看圖說話。
2-1-11.能根據圖片或提示作簡單的角色扮演。 2-1-12.能參與簡易的兒童短劇表演。 國中 階段 延續國小階段的基礎，繼續發展以下各項能力： 2-2-1.能使用主要的的教室用語。 2-2-2.能參與課堂上的口語練習及討論。 2-2-3.能以簡易英語介紹家人和朋友等。 2-2-4.能以簡易的英語表達個人的需求、意願和感受。 2-2-5.能 依 情 境 及 場 合 ， 適 切 的 表 達 自 我 並 與 他 人 溝 通。 2-2-6.能以簡單的英語描述日常生活中相關之人、事、 物。 2-2-7.能參與簡易的短劇表演。 2-2-8.能以簡單的英語介紹國內外風土民情。 國小 階段 3-1-1.能辨識字母。 3-1-2.能應用字母拼讀法讀出單字 3-1-3.能辨識一些基本的常用字詞。 3-1-4.能看懂簡易的英文標示。 3-1-5.能辨識故事、韻文、歌謠中的常用字詞。 3-1-6.能看懂簡單的句子。 3-1-7.能跟著老師或錄音帶吟唱歌謠、韻文。 3-1-8.能 跟 著 老 師 或 錄 音 帶 正 確 地 朗 讀 課 本 中 之 對 話 或故事。 3-1-9.能藉圖畫、圖示等視覺輔助，閱讀並瞭解簡易故 事及兒童短劇中的大致內容。 閱讀能 力指標 國中 階段 延續國小階段的基礎，繼續發展以下各項能力： 3-2-1. 能 辨 識 英 文 字 母 之 連 續 書 寫 體 (cursive writing)。 3-2-2.能用字典查閱字詞的讀音及意義。 3-2-3.能看懂常用的英文標示和圖表。 3-2-4.能朗讀短文、故事等。
3-2-5.能預習課文並瞭解其大意。 3-2-6.能瞭解對話、短文、書信、故事及短劇等的情節 與內容。 3-2-7.能閱讀不同體裁、不同主題之簡易文章。 3-2-8.能瞭解並欣賞簡易的詩歌及短劇。 國小 階段 4-1-1.能書寫印刷體大小寫字母。 4-1-2.能書寫自己的姓名。 4-1-3.能摹寫已學過的字詞。 4-1-4.能臨摹抄寫簡單的句子。 4-1-5.能拼寫一些基本常用的字彙。 寫作能 力指標 國中 階段 延續國小階段的基礎，繼續發展以下各項能力： 4-2-1.能寫簡單的句子。 4-2-2.能填寫簡單的表格及資料等。 4-2-3.能寫簡單的賀卡、書信及段落等。 資料來源：教育部[9]
2.5 多媒體試題呈現方式
多媒體試題包含了下列幾項描述：(1)題目情境描述(2)問題描述(3)答 案選項描述這三個部分，只是傳統的試題只能夠用文字或是靜態的圖片來 呈現這三個部分，那如果是多媒體試題的話能夠如何呈現呢? 試 題 應 用 在 互 動 式 多 媒 體 上 會 有 呈 現 方 式 [10]。 以 下 分 別 由 題 目 情 境、問題及答案三方面來探討： (1)題目情境(Stimulus)： 一個試題的問題情境表現方式最為多變，有可能是由文字、圖片、聲 音、影片或是這些的組合所組成，總共包含有:文字、圖片、聲音、影片、 文字加圖片、文字加聲音、文字加圖片加聲音、圖片加聲音、圖片加影片 這些組合，除此之外，我們還加上了一種特別的情境呈現方式—對話，讓 情境表現起來可以更加生動活潑。 (2)問題(Question)： 問題的表現方式比較單純，只有文字、聲音以及文字加聲音這三種組 合。(3)答案(Answer)： 答案的呈現方式會隨著試題的題型而有所不同。 以下根據不同的試題題型來說明其答案呈現方式: (1)選擇題： 如果題型為選擇題的話，其答案呈現方式就是一些選項，這些選項的 呈現方式有可能是文字、圖片、聲音、文字加圖片、文字加聲音、文字加 圖片加聲音以及圖片加聲音。 (2)文字輸入: 如果是文字輸入的題型，例如填充題、問答題的話，答案的呈現方式 就是以文字敘述請作答者輸入文字。 (3)聲音輸入: 如果聲音輸入的題型，答案的呈現方式就是以文字敘述請作答者以聲 音作答。 多樣式的試題呈現對應答案呈現的整理如下圖：
答案呈現
試題呈現
a.文字 b.聲音 c.圖片 d.動畫 e.影片 a.文字 b.聲音 c.圖片 d.動畫 e.影片選擇題
填充題
文字 文字輸入 a.文字 b.聲音 c.圖片 d.動畫 e.影片 a.文字 b.聲音問答題
主題: a.文字 b.聲音 c.圖片 d.動畫 e.影片 子問題: a.選擇題 b.填充題 c.問答題題組
2.6 多媒體試題例題
因為多媒體試題較傳統試題具有豐富的資訊，及溝通功能，較能與生 活相結合。使學生能應用所學的語言知識與能力，達到多元評量實作評量 的效果[12]。 2.6.1 聽力測驗 聽力測驗的作答方式為選擇題，題目將由題目區自動播放，學生在聽 完題目後可以從作答區點選答案後，再按繳交答案，系統將自動跳至下一 題。圖例為試題以動畫呈現對應答案以文字呈現的選擇題題型。 圖 3 閱讀測驗圖例[12] 2.6.2 閱讀測驗 閱讀測驗的作答方式皆為選擇題，題目將由題目區自動播放，學生在 閱讀完題目後，可以從作答區點選答案後，再按繳交答案，系統將自動跳 至下一題。在全部作答完成後，電腦將自動評分，可以立即知道成績。圖 例為試題以文字呈現對應答案以文字呈現的選擇題題型。2.6.3 口說測驗 口說測驗的作答方式為線上錄音，題目將由題目區自動播放，學生在 閱讀 圖 4 閱讀測驗圖例[12] 完題目後，可以從作答區點選，將出現錄音元件如下圖，再錄音，試 聽，確認無誤後再按繳交答案，系統將自動跳至下一題。在全部作答完成 後，作答結果以人工計份。圖例為試題以動畫呈現對應答案以聲音輸入呈 現的錄音題題型。 圖 5 口說測驗圖例[12] 2.6.4 寫作測驗 口說測驗的作答方為線上輸入，題目將由題目區自動播放，學生在閱 讀完題目後，可以從作答區進行打字，學生可以依需要將寫作區加大或是 減小，再按繳交答案，系統將自動跳至下一題。在全部作答完成後，作答
的寫作題題型。 圖 6 寫作測驗圖例[12]
.7 具公平性的多份試卷
良好的英語文能力測驗系統，存在著以下列重要因素：試卷如何組成， 例如 試題庫控制試卷間試題的重複度， 防止2
試卷內的試題呈現型式，每一試卷內的試題類別，以及難易度等的變 項應都在一定控制範圍內？故考量多媒體網路英檢測驗的公平性，每位受 測者試卷內的各種試題呈現題型(如上之說明)，應受控在一定的範圍內， 故本研究提出以試題領域分類、英語文能力指標及各試卷間試題呈現題型 為變項的選題策略，使系統產生的每一份試卷的不同試題呈現題型有相同 的題數，確保具公平性的多份試卷。 再者，考量電腦測驗，如何在有限的 再次測驗時試題和上次測驗重複度過高，亦是良好的英語文能力測驗 系統的重要因素，故本研究亦題供以考量試題重複度為變項的試卷產生系 統，其系統的設計於下一章做說明。三、 考量試卷間試題重複度的選題策略設計與實作
類似於全民網路英檢測驗系統，欲建立多份平行測驗，試卷間試題的 重複度是影響試卷品質的重要因素，本研究針對此問題提供一個控制試卷 間試題重複度的選題策略，使系統產生的所有試卷間試題重複度能在一定 比例內。3.1 最佳組合選題策略
選擇策略為一最佳組合問題，在 1985 年，在 R.K. Hambleton 和 H. Swaminathan[15]的研究中提到以下五種的選題策略方式：亂數法、標準 法、中間難度法、上下法、最大訊息法，這五種演算法最大的優點是設計 簡單、執行速度快，但這五種的選題策略的優點為設計簡單，執行快速， 但所組合的試卷和目標訊息量所產生的誤差很大，並不是最佳的演算法， 故如何選擇合適的題目以縮小誤差，可以算是一種 NP-Complete 的問題， 無法求出最佳解，只能求出最適解。所以，近來國內外許多專家學者應用 不同演算法結合試題訊息量設計出挑題策略，最主要目的是從試試題庫組 合一份更接近目標訊息量的試卷。下表為國內外學者應用各演算法而設計 出的選題策略。 表 6 國內外應用相關演算法於選題策略 選題策略 作者 應用 Greedy Approach 於選題策略 應用 Genetic Algorithm 於選題策略 利用人工智慧技術於選題策略之研究 孫光天等人(1999) 孫光天等人(1999) 孫光天等人(2000) 改良式之灰色預測電腦化適性測驗選題策略 何榮桂等人(1998) 利用灰色理論於選題策略之研究 黃家輝(2001) 應用貪婪式基因演算法於選題策略之研究 姜美玲(2003)A model and heuristic for solving very large item selection problems.
Swanson , L., &
Stocking , M.L.(1993) Two item selection algorithms for
creating weakly parallel test forms using the IRT information functions.
Wang, C. S., & Ackerman, T. (1997). 上述的選題策略，均由每位作者提出比傳統選題策略（亂數法、標準 法、中間難度法、上下法、最大訊息法）組合一份更接近目標訊息量的試 卷。例：下圖為孫光天等人[3]提出貪婪演算法和傳統挑題策略比較表： 圖 7 貪婪演算法選題策略和傳統選題在固定題數(30 題)條件下之測驗訊 息函數曲線圖 由圖 7 可了解應用貪婪演算法於選題策略，確實可找出一份和目標訊 息量誤差更小的試卷，因試卷和目標訊息量的誤差小，所以測驗結果更能 符合測驗目的。
3.2 應用於類似全民網路英檢的選題策略
上述的演算法為從試題庫組成一份和測驗目標訊息量誤差最少的最佳 試卷，目前不適用於類似全民網路英檢同時產生多份試卷並控制試卷間的 試題重複度的考量。全民網路英檢為多地同時的檢測系統，系統會依報考人數而產生多份 試卷，但考量電腦測驗，鄰近考生可能作弊，如何在有限的試題庫控制試 卷間試題的重複度，以防止抄襲？其解決方法：使用一個龐大的試題庫， 但實際的情況由於有限的人力及財力下試題庫內的試題數是有限的，故在 此限制情況下，本研究嘗試解決有限試題庫如何分配試題，使試卷間試題 的重複度受能控在一定比例。
3.3 研究問題及方法
3.3.1 研究問題 若試題庫中有 800 試題試，任意選 40 試題形成一份試卷，產生的試 卷數為組合問題(Ｃ800 取 40)，任兩份試卷重複題目不超過 5 題的所有試 卷數為何？ 3.3.2 研究方法 嘗試應用貪婪演算法，研究在有限的試題庫試題，使系統產生的所有 試卷間的試題重複度達到適當比例所能得到最多的試卷數。 3.3.3 研究工具 台北市立某國民中學電腦教室： z 電腦數量：３６台 z 作業系統：Windows XP Professional z ＣＰＵ ：ＡＭＤ2800+ z ＲＡＭ ：２５６ＭＢ 3.3.4 研究步驟 用 800 試題來組每份試卷 40 題，試卷間最大重複試題 5 題為例： z STEP1 : 將試題依等差規則組成１００００份試卷(i) z STEP2 : 將第一份試卷加入目標試卷庫，i=1 z STEP3 : 將第i+1試卷和試卷庫內每一份試卷比較重複題z STEP5 : 將試卷加入目標試卷，至STEP6 z STEP6 : 若 i<=10000 則重回STEP3，否結束。
其完整流程圖如下：
將試題依
等差規則
組成
圖 8 研究步驟流程圖 3.3.5 研究例子說明 由上述步驟： z 10000 份可得符合試卷數 303 份 重複上述步驟將開始試卷數依序增加至 z 15000 份可得符合試卷數 320 份 z 20000 份可得符合試卷數 344 份 z 25000 份可得符合試卷數 347 份 z 30000 份可得符合試卷數 347 份 將研究數據利用 EXCEL 整理成樣本試卷數對應符合試卷數折線圖， 在樣本數 25000 份試卷以上，我們的數據收斂到一個數，所以我們假設題１００００份試卷(i)
所有符合重複度限制的試
卷在目標試卷庫
將第i+1試卷和試卷庫內
每一份試卷比較重複題
將第一份試卷加入目標
試卷庫，i=1
i=i+1; 重複題數小於５題
是
否
將試卷加入目標試卷
i<=10000
否
是
結束
庫試題數 800 題在重複題數 5 題內可得 347 份試卷。
試題重複數５題內(800題)
344
347
347
320
303
280 290 300 310 320 330 340 350 360 10000 15000 20000 25000 30000 樣本試卷數符
合
試
卷
數
圖 9 符合重複題數所得的試卷數收斂圖 重覆上述方法及步驟，得到 800 題試題，在各重複題數限制下所能得 到最多試卷數均可收斂一個數量，如下表。 表 7 用 800 試題來組每份試卷 40 題，試卷間最大重複試題 3 至 8 題所得數卷數 試卷數 重複題 數 3 題 重複題 數 4 題 重複題 數 5 題 重複題 數 6 題 重複題 數 7 題 重複題 數 8 題 10000 126 241 303 426 648 762 15000 127 251 320 436 679 808 20000 130 276 344 470 706 839 25000 136 276 347 470 706 839 30000 136 276 347 470 706 8393.3.6 試卷平均重複題數 以口說測驗為例：題庫試題數 200 題，組每份試卷題數 15 題，重複 題數最大題數為３題，由本文題出的演算法，可產生 145 份試卷，任兩份 的重數題份不超過 3 題，如下表。 表 8 試題數 200 題，重複題數最大題數為３題，產生 145 份試卷的每份試 卷試題編號 題號 試卷 編號 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 1 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 2 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 3 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 4 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 5 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 6 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 7 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 8 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 9 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 10 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 11 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 12 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 13 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 14 1 15 29 43 57 71 85 99 113 127 141 155 169 183 197 15 1 5 18 22 35 39 52 69 86 103 120 137 154 171 188 16 1 17 19 35 37 53 55 73 91 109 127 145 163 181 199 17 1 10 20 29 39 48 58 67 77 96 115 134 153 172 191 18 1 21 23 43 45 65 67 87 89 109 111 133 155 177 199 19 1 8 24 31 47 54 70 77 93 100 116 123 139 162 185
20 1 9 27 35 53 61 79 87 105 113 131 139 157 165 183 21 1 4 7 30 33 59 62 88 91 117 120 146 149 175 178 22 1 4 18 32 35 49 63 80 94 111 125 142 156 173 187 23 1 8 23 38 45 60 75 82 97 112 119 134 149 171 186 24 1 6 11 42 47 52 83 88 93 124 129 134 165 170 175 25 1 3 16 31 44 59 74 87 102 117 130 145 160 173 188 26 1 12 24 36 48 59 71 83 95 118 130 142 165 177 189 27 1 38 42 46 50 87 91 95 99 140 144 148 189 193 197 28 1 13 25 37 54 66 78 90 107 119 131 143 160 172 184 29 1 14 27 40 53 72 85 98 111 124 143 156 169 182 195 30 1 2 24 46 47 68 69 90 91 113 135 157 158 179 180 31 1 17 40 63 79 86 102 109 125 132 148 155 171 178 194 32 1 14 31 48 65 82 99 116 133 150 163 167 180 184 197 33 2 16 30 44 58 72 86 100 114 128 142 156 170 184 198 34 2 6 19 23 36 40 53 70 87 104 121 138 155 172 189 35 2 18 20 36 38 54 56 74 92 110 128 146 164 182 200 36 2 11 21 30 40 49 59 68 78 97 116 135 154 173 192 37 2 9 25 32 48 55 71 78 94 101 117 124 140 163 186 38 2 10 28 36 54 62 80 88 106 114 132 140 158 166 184 39 2 5 8 31 34 60 63 89 92 118 121 147 150 176 179 40 2 5 19 33 36 50 64 81 95 112 126 143 157 174 188 41 2 31 33 35 64 66 68 99 101 132 134 165 167 198 200 42 2 7 12 43 48 53 84 89 94 125 130 135 166 171 176 43 2 4 17 32 45 60 75 88 103 118 131 146 161 174 189 44 2 39 43 47 51 88 92 96 100 141 145 149 190 194 198 45 2 14 26 38 55 67 79 91 108 120 132 144 161 173 185 46 2 12 29 46 56 63 73 90 107 124 134 151 168 185 195 47 2 15 28 41 54 73 86 99 112 125 144 157 170 183 196 48 2 63 69 75 81 87 93 99 160 166 172 178 184 190 196 49 2 18 41 64 80 87 103 110 126 133 149 156 172 179 195
51 3 7 20 24 37 41 54 71 88 105 122 139 156 173 190 52 3 12 22 31 41 50 60 69 79 98 117 136 155 174 193 53 3 13 24 34 45 55 66 76 87 97 108 129 150 171 192 54 3 10 26 33 49 56 72 79 95 102 118 125 141 164 187 55 3 6 9 32 35 61 64 90 93 119 122 148 151 177 180 56 3 6 20 34 37 51 65 82 96 113 127 144 158 175 189 57 3 10 25 40 47 62 77 84 99 114 121 136 151 173 188 58 3 32 37 42 71 76 81 110 115 120 149 154 159 193 198 59 3 5 18 33 46 61 76 89 104 119 132 147 162 175 190 60 3 40 44 48 52 89 93 97 101 142 146 150 191 195 199 61 3 15 27 39 56 68 80 92 109 121 133 145 162 174 186 62 3 16 29 39 52 62 75 98 111 121 134 157 170 180 193 63 3 13 30 47 57 64 74 91 108 125 135 152 169 186 196 64 3 4 22 40 58 76 77 94 95 113 131 149 167 185 186 65 3 11 33 41 55 63 85 107 115 129 137 159 167 181 189 66 4 8 21 25 38 42 55 72 89 106 123 140 157 174 191 67 4 14 25 35 46 56 67 77 88 98 109 130 151 172 193 68 4 11 27 34 50 57 73 80 96 103 119 126 142 165 188 69 4 7 21 35 38 52 66 83 97 114 128 145 159 176 190 70 4 6 19 34 47 62 77 90 105 120 133 148 163 176 191 71 4 41 45 49 53 90 94 98 102 143 147 151 192 196 200 72 4 16 28 40 57 69 81 93 110 122 134 146 163 175 187 73 4 31 36 41 73 78 83 110 115 120 152 157 162 194 199 74 4 15 26 37 48 78 89 100 111 122 141 152 163 174 185 75 4 19 34 56 71 86 93 108 123 130 145 160 167 182 197 76 4 20 43 66 82 89 105 112 128 135 151 158 174 181 197 77 4 6 24 42 60 78 96 114 132 150 152 168 170 186 188 78 4 17 34 51 68 85 102 119 136 153 166 170 183 187 200 79 5 12 28 35 51 58 74 81 97 104 120 127 143 166 189 80 5 21 32 48 59 75 86 102 113 129 140 156 167 183 194 81 5 12 27 42 49 64 79 86 101 116 123 138 153 175 190
82 5 34 39 44 73 78 83 112 117 122 151 156 161 195 200 83 5 7 20 35 48 63 78 91 106 121 134 149 164 177 192 84 5 17 29 41 58 70 82 94 111 123 135 147 164 176 188 85 5 66 72 78 84 90 96 102 163 169 175 181 187 193 199 86 5 7 9 40 42 73 75 106 108 139 141 143 172 174 176 87 5 15 34 53 72 91 110 129 139 148 158 167 177 186 196 88 5 7 25 43 61 79 97 115 133 151 153 169 171 187 189 89 5 16 27 38 49 60 71 82 93 104 115 126 137 148 159 90 6 13 28 43 50 65 80 87 102 117 124 139 154 176 191 91 6 8 21 36 49 64 79 92 107 122 135 150 165 178 193 92 6 7 29 51 52 73 74 95 96 118 140 162 163 184 185 93 6 67 73 79 85 91 97 103 164 170 176 182 188 194 200 94 6 11 16 48 53 58 90 95 100 127 132 137 169 174 179 95 6 18 30 42 65 77 89 112 124 136 148 159 171 183 195 96 6 11 16 50 55 60 89 94 99 128 133 138 167 172 177 97 6 8 10 41 43 74 76 107 109 140 142 144 173 175 177 98 6 22 45 68 84 91 107 114 130 137 153 160 176 183 199 99 6 17 38 59 80 101 112 122 133 143 154 164 175 185 196 100 6 16 35 54 73 92 111 130 140 149 159 168 178 187 197 101 7 11 24 28 41 45 58 75 92 109 126 143 160 177 194 102 7 14 30 37 53 60 76 83 99 106 122 129 145 168 191 103 7 10 13 36 39 65 68 94 97 123 126 152 155 181 184 104 7 9 22 37 50 65 80 93 108 123 136 151 166 179 194 105 7 8 23 38 54 69 84 85 100 115 131 146 161 177 192 106 7 18 29 40 51 81 92 103 114 125 144 155 166 177 188 107 7 17 36 55 74 93 112 131 141 150 160 169 179 188 198 108 8 11 25 39 42 56 70 87 101 118 132 149 163 180 194 109 8 10 23 38 51 66 81 94 109 124 137 152 167 180 195 110 8 17 26 43 52 69 78 95 104 130 139 156 165 182 191 111 8 10 28 46 64 82 100 118 136 154 156 172 174 190 192
113 9 18 28 37 47 56 66 75 85 104 123 142 161 180 199 114 9 12 26 40 43 57 71 88 102 119 133 150 164 181 195 115 9 11 24 39 52 67 82 95 110 125 138 153 168 181 196 116 9 14 19 53 58 63 92 97 102 131 136 141 170 175 180 117 9 11 13 44 46 77 79 110 112 143 145 147 176 178 180 118 9 18 27 36 45 54 63 72 81 90 99 108 117 126 135 119 10 13 27 41 44 58 72 89 103 120 134 151 165 182 196 120 9 10 31 32 53 54 76 98 120 121 142 143 164 165 187 121 10 12 14 45 47 78 80 111 113 144 146 148 177 179 181 122 10 21 42 63 84 105 116 126 137 147 158 168 179 189 200 123 11 15 28 32 45 49 62 79 96 113 130 147 164 181 198 124 11 14 28 42 45 59 73 90 104 121 135 152 166 183 197 125 11 17 23 29 35 41 47 53 114 120 126 132 138 144 150 126 11 17 30 43 56 69 88 101 114 127 140 159 172 185 198 127 11 22 33 49 60 76 87 103 114 130 141 157 168 184 195 128 1 12 22 33 43 54 64 75 85 96 106 117 138 159 180 129 12 15 29 43 46 60 74 91 105 122 136 153 167 184 198 130 12 23 34 50 61 77 88 104 115 131 142 158 169 185 196 131 12 25 38 51 64 77 90 103 116 129 142 155 168 181 194 132 13 16 19 42 45 71 74 100 103 129 132 158 161 187 190 133 13 14 32 50 68 86 87 104 105 123 141 159 177 195 196 134 13 19 25 31 37 43 49 55 116 122 128 134 140 146 152 135 4 13 23 42 61 80 99 118 137 147 156 166 175 185 194 136 14 22 40 48 66 74 92 100 118 126 144 152 170 178 196 137 3 14 30 41 57 68 84 95 111 122 138 149 165 176 192 138 14 17 31 45 48 62 76 93 107 124 138 155 169 186 200 139 14 23 32 49 58 75 84 101 110 136 145 162 171 188 197 140 15 18 21 44 47 73 76 102 105 131 134 160 163 189 192 141 15 16 34 52 70 88 89 106 107 125 143 161 179 197 198 142 3 15 37 49 61 73 85 97 109 131 143 155 167 179 191 143 15 21 27 33 39 45 51 57 118 124 130 136 142 148 154
144 14 15 36 37 58 59 81 103 125 126 147 148 169 170 192 145 15 17 19 50 52 83 85 116 118 149 151 153 182 184 186 例用程式設計比較函數再驗證得此 145 卷試卷任兩份重複題數 0 至 3 題的次數： 表 9 任兩份試卷平均重複題數 任兩份重複題數 0 題 2438 任兩份重複題數 1 題 5112.5 任兩份重複題數 2 題 2364 任兩份重複題數 3 題 453.5 平均重複題數(註 1) 1.07 註 1:平均重複題數=任意兩份試卷重覆題數的總和 ÷ 比較總次數 其中，比較總次數=試卷總數(n)任取兩份的組合數，即 2 n
C
平均重複題數(normal distribution 算法) =(2438*0+5112.5*1+2364*2+453.5*3)/10440=1.07 由上表可知依我們的選題策略所得的 145 份試卷中，任兩份試卷的重 複題數為 0 至 3 題，若以平均重複題數為考量的話，其平均重複題數才 1.07 題，是一個可接受的數值。四、 選題及試卷產生系統之設計與實作
4.1 多媒體網路英檢架構
多媒體網路英檢評量系統架構圖如下圖，說明如下： 試題預試效正系統：由命題委員編製完成試題後，須先經驗證系統進 行驗證，以確保其相關的字頻、字表、文法構句等相關適性值，然後將其 上傳至試題庫。 適性質分析系統：同等級試題適性值的驗證與兩段式的動態調整，試 題進行預試後，收集相關之答題反應結果，即啟動 IRT(項目反應理論)分 析器的機制，立即進行分析，分別求出其相關 a(鑑別度)、b(難易度)、c(猜 測度)等適性值，透過立即性視覺化圖形呈現，便可以進行研判，進行第一 次動態調整將相關適性值回存儲至試題庫。之後再進行 CAT(電腦適性化測 驗)施測後，便可以完成第二次的適性值動態調整。 挑題及試卷產生系統：依試題領域、國中小英語文能力指標、試題呈 現方式為選題變項，選出符合試題並依重複題數高低同時產生多份試卷。 閱卷系統 ：閱讀及聽力測驗由電腦閱卷、口說及寫作以人工閱卷。圖 10 多媒體網路英檢系統架構圖(System Architecture)
4.2 多媒體網路英檢系統模組
系統將使用者的身份分成系統管理者，教師及學生(受測者)三種不同 的身份，使用者登入系統成功後，系統會依據使用者的權限，給予不同的 功能選單，這是以使用者的觀點來設計使用者介面，使用者不致於混淆不 清。其完整的功能如下： 表 10 多媒體網路英檢系統模組 學生功能 教師功能 系統管 檢測參加明細 個人帳號管理 一般檢測 IRT-檢測 個人帳號管理 題庫管理 試卷管理 閱卷系統 答案卷管理 梯次管理 場次管理 IRT-試題管理 IRT-測驗試卷管理 IRT-測驗施測 理 模組管理 網站樣版 類別設定 權限管理 系統記錄 流量統計 帳號管理 學生功能 教師功能 系統管 檢測參加明細 個人帳號管理 一般檢測 IRT-檢測 個人帳號管理 題庫管理 試卷管理 閱卷系統 答案卷管理 梯次管理 場次管理 IRT-試題管理 IRT-測驗試卷管理 IRT-測驗施測 理 模組管理 網站樣版 類別設定 權限管理 系統記錄 流量統計 帳號管理 試題 預試 效正 多媒體 命題 試 題 系統 系統 試 適性 值分 析 題 庫 人工 閱卷 說、寫 電腦 閱卷 聽、讀 受測者 施測 1 … n 測驗 試卷 １ … n 選題規 則解譯 選題 規則 閱卷系統 挑題及試卷產生系4.3 選題系統架構圖
步驟１：系統提供依選題規則為變項，利用選題規解譯器，從原始試 題庫挑出符合選題條件的試題至符合選題條件試題庫。 步驟２：將符合選題條件的試題利用試題重複度解譯器將試卷分配於 各試卷。選題規則
原始
選題規
則解譯
器
1.測驗項目
試題庫
圖 11 選題系統架構圖(System Architecture)4.4 資料庫結構
將利用 Microsoft Excel VBA 設計的程式所得的執行結果，匯入至 PHP 的 MYSQL 資料庫，其資料表內容如下表。 表 11 符合重數題數每份試卷試題題號資料表 same_id 欄位 型態 Null 預設值 連結到 註解 id int(11) 否 試卷編號 PK
試卷
１
試卷
２
試卷
３
試卷
n
2.測驗等級
3.試題規則
a.試題領域
b.英語文
能力指標
試題重複
符合選題
c.試題呈現
度解譯器
條件試
方式
題庫
……..
符合試題重複度的所有試卷
tcool_num int(11) 否 題庫試題數 300 至 1200 題 question_num int(4) 否 每份試卷題 數 40 題 same_num int(4) 否 最大重複題 數 3-8 題 exam_num int(11) 否 符合最大重複 題數的試卷編 號 tcool_id1 至 tcool_id40 int(4) 否 試卷試題對應 題庫題號
4.5 多份試卷選題流程
4.5.1 依試題呈現方式選題 考量試卷的同質性，以試題領域或英語文能力指標配合多樣式的試題 呈現方式在一定控制範圍內的多份試卷。 步驟 1 : 試卷測驗項目規劃 分別填入測驗的類別，適用等級，即可得到一份空白的試卷(無試題)。 圖 12 規劃新測驗試卷步驟 2 : 選擇試卷產生方法 點選依試題呈現命題。 圖 13 選擇試卷選題方法 步驟 3 : 選擇選題規則 選題選題規則變項，如試題領域及英語文能力指標。 圖 14 選擇選題規則 步驟 4 : 選擇各試題呈現題型的題數 系統依選題規則挑出符合的試題數自動帶出符合規則的所有試題的呈 現方式，請輸入要產生的試卷份數及選擇每份試卷各試題呈現方式的題 數，每份試卷總題數為所選各試題呈現方式的題數總合。
圖 15 輸入試卷份數及各試題呈視方式題數
步驟 5 : 系統依上步驟的規則，產生所有試卷
系統依每份試卷試題呈現方式的題數，產生所有試卷，試卷名稱為考量試 題呈現試卷－(n)。
4.5.2 依試卷重複題數選題 提供教師依以難易度挑題，更能以試題領域或英語文能力指標配合多 樣式的試題呈現方式為限制條件，從試題庫挑出符合條件的試題，且在有 限的試題庫試題，依全民網路英檢所需的試卷數輸入試卷間最大的重複題 數，系統自動產生最多的試卷數。 多份試卷選題流程圖如下： 新增試卷 圖 17 多份試卷選題流程圖 步驟 1 : 試卷測驗項目規劃 分別填入測驗的類別，適用等級，即可得到一份空白的試卷(無試題)。 選擇考試類型 (聽、讀、說、寫) 選擇考試級別 (入門級、基礎級、初 級、中級、中高級) 選擇選題規則 (試題領域、英語文能 力指標、試題呈現方 輸入試題重複數(3至8題) 系統自動帶出試題數在重 複題數內可產生的試卷數 試卷 １ 試卷 ２ 試卷 n ……. 符合選題規則題數
圖 18 規劃新測驗試卷 步驟 2 : 試卷試題選擇 點選依重複度選題，。 圖 19 選擇試卷選題方法 步驟 3 : 選擇選題規則 試卷與試題建好之後，老師可按編輯試題，進行每一題試題的預覽及 修正。
圖 20 選擇選題規則
步驟 4 : 依所需試卷數，輸入最大重複題數
系統依選題規則挑出符合的試題數自動帶出在最大重複題數內可產生 的最多試卷數，使用者依所需的試卷數輸入最大重複題數。
