圖圖
圖39 數學科推理測驗_模式2_MLE之RMSD變動圖
第三節 系統建置成果
本系統大致可分為受試者施測的適性測驗介面、管理者管理題庫與分 配試卷的介面與查詢測驗結果的介面,希望能藉由使用者容易上手的介面,
讓使用者操作時,可以避免浪費時間,以下分別介紹較重要的模組,其他 畫面請見附錄三。
壹、適性測驗介面
如圖40所示,畫面的左上角為目前所作的題數,而題目的內容分作題 幹敘述與試題選項,不同題幹敘述,會有不同呈現方式,除了有文字敘述,
可依題目需求配合圖片說明,當受試者選答完畢,按下『選擇完畢,進入 下一題』,即可繼續適性施測。
在適性測驗過程中,若受試者按重新整理或是想回到上一題,則系統 會出現警告標語並讓受試者重新開始測驗;若未選擇答案就按送出,則會 一直停留在本題。
0.0000 0.1000 0.2000 0.3000 0.4000 0.5000 0.6000 0.7000 0.8000 0.9000 1.0000
1 32 63
RMSD
模式 模式 模式
模式2_MLE
次級量尺1 次級量尺2 次級量尺3 主要量尺
圖 圖
圖圖40 適性測驗介面
貳、題庫管理介面
題庫管理者可以由此介面進行新增或修改題庫,如圖41所示,先決定 測驗名稱、次級量尺數量、各次級量尺名稱與迴歸參數等基本設定後,即 可開始新增試題,如圖42所示,上傳題目與選項的圖檔和該題目中所需的 試題參數後,就完成一題試題的新增。
圖 圖圖
圖41 題庫管理介面-1
圖圖圖
圖42 題庫管理介面-2
參、試卷管理介面
如圖43所示,試卷管理者可以由此介面先選擇班級,再從題庫中選擇 未開放的試卷,並設定各種適性功能,按下新增後,該班級就可以施測開 放的試卷;相對的,也可以將開放的試卷取消。
圖圖
圖圖43 試卷管理介面
肆、學習診斷報告介面
受試者完成測驗後,會針對該測驗的成績給予簡短的評語,並呈現受 試者相關的基本資料,如圖44所示;在學習紀綠中,會紀錄測驗日期、所 花費時間、該測驗的能力估計值以及適性測驗中所施測的題數,再依據不 同題庫所細分的子測驗計算出各分測驗的通過率,並以雷達圖表示之,如 圖45所示。
圖圖
圖圖44 學習診斷報告介面-1
圖 圖
圖圖45 學習診斷報告介面-2
第五章 結論與建議
第一節 結論
一、HCAT 在不同情境下之成效
本研究使用 Multidimensional CAT Approach 與 Unidimensional CAT
Approach 兩種方法,並分別搭配 MLE 與 MAP 能力估計法,將高階層試
題反應模型落實到 CAT 中。在模擬研究中,Multidimensional CAT Approach搭配MAP能得到最大 效益,在Huang(2009)的研究中,亦有相同之結果;而使用Unidimensional
CAT Approach時,搭配MLE或MAP,其差異不大。
二、實徵資料之成效
當題庫不完善時,Multidimensional CAT Approach搭配MAP之結果與 其他方法相比,其RMSD不一定優於其他方法,而Multidimensional CAT
Approach搭配MLE亦可能會有無法收斂之情形發生,當發生此種狀況時,
可試著編修題庫或使用Unidimensional CAT Approach。
三、HCAT 系統
本研究建置含 HCAT 的使用者介面,讓受試者經由登入介面的安全管 制後,依照不同受試者之需求,給予不同的試卷,之後經由網路執行系統 程式與資料庫讓受試者完成適性測驗後,可以立即觀看學習診斷報告;在 管理者方面,除了擁有題庫編修的功能介面,還有控制試卷的選單介面,
透過題庫管理介面,管理者可以隨時新增或修改題庫,而透過試卷管理介 面,可以針對使用者不同需求設定不同的適性測驗功能,例如使用不同測 驗模式的題庫時,在選單上就可以選擇符合該題庫之模式,還可以針對不 同題庫類型設定不同的測驗長度。