• 沒有找到結果。

本章主要闡述研究背景、研究動機與目的、研究架構、研究問題及研 究限制。

1.1 研究背景與動機

隨著我國加入世界貿易組織(WTO),我們所需面對的是全球化市場的 競爭,因此具備良好的外語溝通能力,已成為職場競爭力之要件。鑑於此 行政院於 2002 年 5 月宣布「挑戰 2008 國家發展重點計畫」,而其中排名 首位也是大家所重視的「E 世代人才培育計畫」其計畫之四大議題的第一 項即為營造國際化生活環境,提昇全民英語能力[1]。英語文學習已是我國 現今最重要的學習課程。

然而測驗是評量學習成果和衡量知識能力的一套有效方法,若能配合 適當的測驗,對於學習效果將有很大的助益,綜觀今日英語教學多媒體化 已日趨進步且漸成潮流,將多媒體科技運用在測驗上也將引起學者專家的 日益重視,成為教育發展的重要趨勢。在現今資訊科技與網際網路快速發 展下,測驗亦已由傳統的紙筆測驗逐漸 e 化。且經由多媒體電腦呈現多樣 化的試題,並依造考生能力出題的適性化測驗亦成驅勢。

電腦科技的蓬勃發展,和網際網路的盛行,許多英語文能力測驗因而 產生,但如何依不同的測驗目的由題庫中選取題目產生試卷,以符合測驗 設計者欲達成之目標,將是項重要的研究,此外,欲建立多份平行測驗,

以試卷間試題的重複度是影響試卷品質的重要因素,本研究針對上述問題 在提供一個控制試卷間試題重複度的選題策略,使系統產生的所有試卷間 試題重複度能在一定比例內。

良好的英語文能力測驗系統,存在著以下列重要因素:

z 試卷如何組成,例如試卷內的試題呈現型式,每一試卷內的試題 類別,以及難易度等的變項應都在一定控制範圍內?

z 考量電腦測驗,如何在有限的試題庫控制試卷間試題的重複度,

防止再次測驗時試題和上次測驗重複度過高?

1.2 研究目的

性向。測驗的組合也因測驗的目的與受試者的樣本分佈不同而有不同的需 求。也因測驗需求的多樣性,使得測驗建構不易單純以人工方式處理。此 外,一份合適的測驗,涵蓋題庫、選題限制條件及選題策略的有效運用。

如何使測驗建構者由題庫中針對預期的測驗目的與對象,訂定適當的選題 限制條件,再控制試卷間試題重複度選題策略以組成多份試卷,亦應是重 要的研究方向。

本研究成果可應用於類似全民網路英檢(NETPAW)[2]同時多份試卷的 測驗系統:

z 考量一試卷的同質性,例能以試題領域或英語文能力指標配合多 樣式的試題呈現方式在一定控制範圍內的多份試卷;

z 考量二,從題庫挑出符合選題條件的試題,並應用貪婪演算法,

在有限的試題庫試題,使系統產生的所有試卷在試題重複度能達 到適當比例。

1.3 研究時程規劃

利用本實驗室以動態網頁(PHP)技術結合資料庫(MySQL)及網路伺服 器(Apache)的方式建置的多媒體網路英檢系統,來研究多份試卷的挑題策 略;研究步驟可分為四階段:

第一階段:前置作業

1. 由 相 關 文 獻 的 閱 讀 中 , 了 解 現 代 測 驗 理 論 - 項 目 反 應 理 論 (item response theory; IRT) 及 國 內 外 各 學 者 應 用 不 同 演 算 法 [3][4][5][6][7][14][16][17]而 設 計 的 挑 題 策 略 如 孫 光 天 等 人 [3]所 提 應用貪婪演算法於選題策略。

2. 收集分析現有測驗模式,整理歸納其優缺點。

3. 研究分析現有的題庫測驗系統,整理歸納其優缺點,定出測驗系統 的選題規則。

第二階段:試卷間試題重複度的選題策略設計與實作

1. 利用 Microsoft Excel 模擬試試題庫內所有試題,應用貪婪演算法 (Greedy Approach) 概念以 VBA 程式設計編寫程式。

2. 利用程式執行各種不同試題數在重複題數內的所有試卷數:

將 所 得 到 的 資 料 整 理 成 試 題 庫 試 題 數 依 重 複 題 數 的 不 同可產生的 試卷份數對照表。

第三階段:套用資料於本實驗室發展的多媒體網路英檢測驗系統

1. 將 訂 定 好 的 選 擇 規 則 及 題 庫 試 題 數 依 重 複 題 數 的 不 同 可 產 生 的 每 份試卷試題編號整理並建入 PHP 資料庫內。

2. 測試系統的正確性與實用性,並修改系統再測試。

第四階段:研究結果的分析與討論並提出論文結論與未來發展方向。

文獻探討

了 解 現 代 測 驗 理 論 - 項 目 反 應 理 論 及 國 內 外 各 學 者 應 用 不 同 演 算 法 而 設 計 的 挑題策略,如孫光天等人[3]

所 提 應 用 貪 婪 演 算 法 於 選 題策略。

第二階段研究:考量多份試 卷間的同質性的挑題策略。

研究結果之分析與討論 研究結論與建議

第一階段研究:考量試卷間 試題重複度的挑題策略。

多媒體英語檢測系統的挑題策略

圖 1 研究架構圖

1.4 研究限制

由於研究成果將應用於類似全民網路英檢(NETPAW),因題庫試題量 為有限的,以本實驗室多媒體網路英檢系統為例,各測驗項目:聽、讀、

說、寫及在各級別試題數為 300 題至 1300 題,且學校資源、時間及人力 上因素的考量,本研究僅提供測驗題庫試題數 300 至 1300 題,依 3 至 8

1.5 章節概要

在第二章中,介紹相關文獻如測驗方式、全民網路英檢(NETPAW)、

及選題規則變項如 SUMO (Suggested Upper Merged Ontology,建議上 層共用知識本體)、英語文能力指標。

第三章中,應用 Microsoft Excel 模擬試題庫,利用 VBA 程式以貪婪 演算法,研究在試卷間試題重複度限制內可得的最多試卷數。

在第四章中,將資料整理並建置在 PHP 資料表內,套用資料於多媒 體網路英檢測驗系統。

在第五章內,系統應用於類似 NETPAW 的英檢測驗系統的結果評估,

並對未來的發展方向提出建議。

相關文件