認知診斷評量模式

本研究所擬使用之評量模式的正式實施，是以發公函方式，通知全台北市 12個行政區共150所國民小學（市立138所、私立10所、國立2所），豉勵其 六年級學生踴躍上網接受測試，測驗時間為民國91年5月25日至91年6月7 日止，二十四小時全天開放施測。在施測過程的設計中，每一受試學生均可接受 三份複本測驗，以收集供後續分析使用之資料。最後，本研究獲得約313名有效 樣本的作答資料，足供後續的資料分析。

茲配合本研究程式的實施，將本研究所採用的認知診斷評量模式實施程序陳 述於后：

一、試題設計與編製

依據一般的成就測驗編製原理，進行命題（基本上，命任何類型的試題均可；

但在本研究中，以選擇題型試題為範例），並且，分別指出每道試題各是在測量 什麼樣的概念或能力目標，並將該概念名稱一一編號。最後，分別陳列一份『試 題概念表』（內容陳述每道試題所預期測量的概念名稱代碼），以及一份『概念 名稱表』（內容陳述該測驗所欲測量的所有概念名稱及其代碼）。以本研究使用 的資料為例，分別將此三份『數學科認知診斷成就測驗』的試題內容、『試題概 念表』、和『概念名稱表』，一併陳列在附錄裡，以供參考。

二、施測及診斷分析

其次，可將上述自編的測驗，拿給一群學生施測，施測完畢，再將每位學生 的作答反應組型，建檔記錄下來，使之成為一份『原始作答反應資料檔』（raw

response data file），其中，該檔中的每個元素值即是他所選擇的選項代號。接著，

即可代入『知識結構診斷評量程式』，執行診斷分析，陳列出整體（即全部受試 學生）的分析結果報表。如果需要針對個別學生的資料作分析討論，即可輸入該 學生的代號，再執行列印即可。

三、報告陳述與說明

本程式分析結果的報表，是全體受試學生的各項診斷指數訊息（即通過率、

PRX指數、GTD指數、PFC指數、Match指數、Over指數、和Miss指數等）的 彙總，僅是一個文字檔的表格資料，代表全部受試學生的概況。若要進一步分析 個別受試學生的結果，則需要輸入該學生的代號（通常是身份證字號、學號、或 座號等辨識號碼），再按『確定』一次，即可呈現或列印出該生的知識結構診斷 圖來，同時在該診斷圖的旁邊會附有該生的各項診斷指數的訊息，即可供診斷、

解釋、或說明討論之用。

茲以甲卷『數與計算』為例來說，一群低成就的受試學生的作答結果，經分 析後，他們的知識結構診斷圖及各項診斷訊息，分別如圖4至圖12所示。

圖4所示，即為根據此份甲卷『數與計算』測驗的標準答案，所繪製而成的 知識結構診斷圖。以圖4為基準，其餘低成就學生（即根據其在甲卷測驗上的通 過率低於50％者）的作答組型所繪製而成的知識結構診斷圖，紛紛與該圖作比 較，得出各種診斷訊息指標，如圖5至圖12所示。

由圖5至圖12所示可知，通過率愈低者（即愈是低成就者），其與標準答 案的知識結構診斷圖相比後，Match指數愈低，Miss指數愈高；顯示愈是低成就 者，其正確連結數愈少，而缺失連結數愈多，這項發現頗與過去的研究相呼應。

而由於甲卷只預計測得七個概念數而已，知識結構的空間比較狹隘，因此，全部 受試學生都沒有錯誤連結的訊息出現，故Over指數全部告零。

圖4 甲卷『數與計算』標準答案的知識結構圖

圖5 低成就學生（ID：11096）在甲卷作答的知識結構診斷圖

圖6 低成就學生（ID：10877）在甲卷作答的知識結構診斷圖

圖7 低成就學生（ID：10954）在甲卷作答的知識結構診斷圖

圖8 低成就學生（ID：10256）在甲卷作答的知識結構診斷圖

圖9 低成就學生（ID：11012）在甲卷作答的知識結構診斷圖

圖10 低成就學生（ID：11170）在甲卷作答的知識結構診斷圖

圖11 低成就學生（ID：11129）在甲卷作答的知識結構診斷圖

圖12 高成就學生（ID：11104）在甲卷作答的知識結構診斷圖