考量參與高溫超導競賽活動的所有參與者皆須先通過線上題庫的測驗，才能完成報 名的程序；然而，有關目前線上題庫之品質、學生線上答題行為，以及研究團隊要求學 生必需先完成測驗等程序，皆未有較具客觀的數據可供瞭解與驗證程序的得當性。有鑑 於此，本年度另一目標為設計與製作一「學生答題與題目分析即時線上查詢系統」
（http://140.116.39.176/Tracing/admin_login.php），以利題庫內容之精進與答題相關規定 的研擬（總答題次數上限、與上次測驗間隔時間下限等）。
本系統主要包括兩大子系統，一為學生答題分析子系統，二為題目分析子系統。各 子系統下所包含的功能，簡述如下：
（一） 學生答題分析子系統
此子系統主要紀錄 1408 位學員使用「線上測驗系統」的相關記錄。登入系統後，
可先由列表清單瞭解 1.學員總共測驗次數，2. 最後通過測驗與否，以及 3.個人基本資料
（如圖 1）。之後，即可選定任一特定學員，細部觀察不同測驗間的答題狀況，包括：1.
第 x 次測驗，2. 該次測驗之正確題數，3. 該次測驗之正確題數，4. 該次測驗之測驗花 費總時間，5. 該次測驗之測驗開始時間，以及 6. 該次測驗之與上次測驗間隔時間等資 料（如圖 2）。
為方便查看特定學生之答題狀況，系統特別加入允許使用者調整資料不同排列方式 的功能。前三欄（其中第 x 次測驗、該次測驗之正確題數、該次測驗之正確題數），經 由點選圖 2 表中所列之 A（由少到多）亦或 D（由多到少），即可決定資料是以該一欄 位為主的不同排列顯示方式。
圖 1. 學生答題分析之列表清單
圖 2. 特定學生之答題狀況一覽表
經由上述資料，研究者可根據一般學生平均答題所需的時間，以推估學生是否有隨 便答題的行為，以及此類答題行為的嚴重性；此外，也可知學生是否會在失敗後，額外 花些時間，再次研讀、查閱相關資料，以增強自我高溫超導之知識。
以圖 3 為例，簡同學總共完成 31 次測驗，但由「測驗花費總時間」可知，其中僅 有七次的答題時間是超過一分鐘，可見參與者並未仔細審閱題目就完成答題；此外，由
「與上次測驗間隔時間」之數據可知，僅有兩次是超過兩分鐘以上的間隔，可見參與者 並沒有在測驗完後，再研讀高溫超導相關資料，而僅是再登入系統完成測驗，以求通過 的結果。此類隨便答題與非學習導向之行為，同樣反應在圖 4 的阮同學記錄。
圖 3 簡同學答題細部資料
圖 4 阮同學答題細部資料
（二） 題庫分析子系統
除了學生答題子系統外，研究者進一步發展「題庫分析子系統」，以將目前測驗系 統內所包括的 92 個題目，做進一步的分析，瞭解每題的難易度，以及各選項的區別度，
輔助下一波試題的編修。
由於學生可能有之隨便答題行為，此子系統分析的母群分為兩類，第一類為將所有 學生的所有答題紀錄皆納入（圖 5：全部答題分析），第二類則僅納入學員通過測驗的最 後一次答題紀錄分析（圖 6：通過答題分析）。
如圖 5, 6 所示，有關每個題目的答對次數/答題次數、答對率、各選項的選擇次數/
選擇率等統計數據，皆可於此子系統中查詢。此外，為方便查看，所有數據性的欄位，
皆可允許使用者選擇 A（由低到高）或 D（由高到低）的不同排列方式。
有了上述的資料，題庫內各題目選項的修改、題目刪除，甚或訓練課程該強化的課 題（難度高、答題率低），以及其後訓練課程的效度，皆可更具基礎。
圖 5：全部答題分析
圖 6：通過答題分析