本節旨在利用表13、表14、表15及表16深入分析以傳統的電腦化測 驗、線上測驗以及電腦化適性測驗所探討的內容主題類別,本節所探討的 主題內容包括:(1)項目反應模式(Item Response Models)、(2)能力 估計、(3)題庫建置、(4)系統建置及(5)選題策略等五大項,依序說
明如下。
(一)項目反應模式的內涵研究
電腦化適性測驗主要使用的項目反應模式(Item Response Models),
依序分成單參數常態肩形模式、雙參數常態肩形模式、三參數常態肩形模 式、四參數常態肩形模式、單參數邏輯模式、雙參數邏輯模式、三參數邏輯 模式、四參數邏輯模式、名義反應模式、等級反應模式及連續變數反應模式
(Hambleton & Swaminathan, 1985)、部分給分模式等。而在電腦化適性測 驗所搜集到35篇博碩士論文文獻之中,探討模式的篇數只有4篇(簡月 梅,1998;秦靜儀,1999;郭東瑛,2001;林文質,2005),而且都探討 多點計分模式,其餘31篇都只在於二元計分的單參數、雙參數及三參數邏輯 模式,而且主要的探討主題都不是在模式的差異比較,因此在項目反應模式 的研究尚屬少數。
(二)能力估計議題的探究
能力估計在試題反應理論中,包括MLE、Joint maximum likelihood,
針對Rasch 模式的Conditional maximum likelihood,或者在Rasch及雙參數 模式下的Marginal maximum likelihood;Bayesian或者Approximate procedure 等模式,但在電腦化適性測驗的碩博士論文鮮少深入論及此主題方法之研 究,只有陳建榮(2001)探討在試題曝光控制下的電腦適性測驗:WLE與 OWLE+MLE估計能力之比較與何榮桂(1991)探討題庫中項目參數分配型 態對電腦化適性測驗能力估計的影響,由此可知,以能力估計為主題的篇數 不多。
(三)題庫建置主題的探討
題庫的發展在電腦化適性測驗中是一個關鍵的角色,不管是初始點的 選擇、考生能力的估計以及測驗的終止等相關議題,都與電腦化測驗中的 題庫有著密切的關係,但在這個議題上,以電腦化適性測驗這個主題所蒐集 的35篇論文中,談到題庫建置的論文,以何榮桂(1991)探討題庫中的項 目參數分配型態、陳麗如(1998)探討電腦化適性測驗題庫之品質管理策 略、陳新豐(2002)探討線上題庫與適性測驗整合系統的發展、林晉榮(
2004)探討以知識結構為基礎的線上電腦適性測驗題庫系統等主要以探討題 庫的建置與管理及其題庫特性的探究,所佔比例為11.43%,而在電腦化測驗 也僅佔9.09%;線上測驗6.06%。所以以題庫為主題的探討,仍有發展的空 間。
(四)系統建置相關主題的研究
以建置系統為主題,包括建置傳統的電腦化測驗系統、線上測驗平台 以及電腦化適性測驗系統在整個電腦化測驗的相關論文中,所佔篇數為最 多,內容也最為多元,就線上測驗33篇中,33篇皆以線上測驗的系統建置上 深入探討相關的應用問題,包括:學習診斷、補救教學、題庫建置、系統效 能、回饋訊息等;而在以電腦化測驗為關鍵字所搜尋的10篇相關論文中,其 中有7篇是探討電腦化測驗的系統建置;電腦化適性測驗關鍵字所搜尋的論 文中,也有18篇是主要以探討電腦化適性測驗的系統建置問題。因此,在系 統建置的議題上,可說是多元的發展,所以若能深入地探討系統建置過程 中,各個成份,例如:題庫的建置、選題策略、學習診斷、能力估計、終止 決定等相關要素,會對整個電腦化測驗的發展更為精緻。
(五)選題策略及其相關主題的研究
在電腦化適性測驗的發展中,如何從題庫中挑選適當的題目,曝光率 的問題對於題庫的安全以及能力的估計精準度有著決定性的關鍵。而在電腦 化適性測驗為關鍵字的論文中,有7篇為探討選題的策略,分別為杜玲均(
1997)發展一套以灰色預測選題之電腦化適性測驗系統、楊佳芳(2001)
階層法在分層的電腦適性測驗上之應用、陳柏熹(2001)選題限制與曝光 率控制對多向度電腦化適性測驗之測量精確度與試題曝光率的影響、翁相擇
(2002)以二次規劃方式控制初始試題機率達成試題曝光率之最佳化、李 明如(2002)測驗選題演算法之研究-以國中基本學測驗之國文.數學為 例、李俊儀(2005)以貝氏網路為基礎的電腦化適性測驗選題策略-以國 小數學科診斷測驗為例等。而在這7篇論文中,大部份皆以數理演算法及以 資訊工程相關系所為主的學位論文,因此,發展此類相關論文必需具備基礎 的數理基礎,可謂具有相當的門檻,不過從發表的數量上,可看出是穩定的
發展中。
(六)學習成效與學習診斷
在學習成效與學習診斷部分,將電腦化測驗的應用上此方面,可說 是最具發展潛力。若以研究論文的數量來看,以線上測驗為例,除11篇佔 33.33%為多數外,其次為學習診斷有6篇(18.18%),且是逐年增加,由於 線上測驗是在網際網路環境進行,因此若能結合教學、練習與評量三者,記 錄學習者反應,可充分強化電腦化測驗的應用成效。
(七)小結
綜合前面有關電腦化測驗的主題分析,可得到目前有關電腦化測驗的 博碩士論文,在主題方面:項目反應模式的內涵研究、能力估計議題的探 究、題庫建置主題的探討與學習成效與學習診斷的研究都不太多,特別是學 習成效與診斷若能結合數位學習的教學、練習部分,使教學、練習與評量結 合在一起。至於系統建置相關主題的研究,由於已有為數不少的建置糸統的 論文,因此,研究者認為:未來除了建置系統外,若能針對上述能力估計、
學習診斷等做更深入的研究也是一個研究方向。