• 沒有找到結果。

第三章 研究方法

第二節 研究步驟

本研究建置題庫依據試題反應理論編製的程序,主要有「建立能力指標與 命題架構」、「命題原則與試題設計」、「修整與審查試題」、「預試與試題分析」、

「篩選試題」、「將試題內容與試題參數輸入電腦資料庫」等步驟(Wainer et al., 1990)。各研究步驟說明如下:

壹、 建立能力指標與命題架構

蒐集高中數學科歷屆學測試題,學測自民國 83 年開辦,而 91、92 年欲參 加大學多元入學之大學考試分發入學的甲、乙案之學生,若未通過學測一般檢 定標準者,需進行補考,故共蒐集83 年至 99 年共 17 年,但總卷數為 19 卷的 學測試題,並針對這19 卷歷屆試題進行分析整理,以建立 95 暫綱的能力指標,

並進一步根據能力指標訂定本測驗之命題架構,命題架構主要依據「教材內容」

作規劃。

貳、 命題原則與試題設計

本研究步驟中,依照上項完成的命題架構,邀請具有數學學科教學經驗之 專家教師,確立命題題數分配以建立測驗題數細目表,再根據命題原則進行編 製試題,並依據命題檢核表檢核試題,完成製作試題內容分析表。最後將試題 仿學測數學科編製成紙筆測驗試卷,以進行預試的紙筆測驗。

參、 修整與審查試題

所有試題均經由資深並具數學科教學經驗之專家教師命題,透過命題小組 以及學科專家會議,在預試組卷前進行命題完成試題之交互審查、檢驗與修整。

肆、 預試與試題分析

在預試的題本編製與試卷設計,根據建置數學科學測題數10 倍以上的試題 量,因受限於受試者受測時間之因素,採用定錨不等組設計之等化設計模式。

定錨不等組設計是將欲連結之不同測驗題本分別施測於不同受試者群,而 每群受試者均需要施測一定錨測驗,通常定錨測驗在每群受試者的測驗順序是 一樣的,以避免順序因素的影響,且測驗內容和難度必須與欲連結之不同測驗 十分類似,測驗長度相當於一個分測驗(von Davier, Holland, & Thayer, 2004;

Dorans & Holland, 2000; Tianyou, 2005)。

透過學習效能學會邀請各高中三年級學生參與模擬考試以進行預試,將收 集到的預試成績與作答反應進行試題分析,以了解其信、效度與試題參數的特 性。

伍、 篩選試題

利用上述步驟所估計之參數,依照臺灣學生學習成就評量資料庫(Taiwan Assessment of Student Achievement, TASA)對於不良試題選擇之標準進行檢測

(曾建銘、陳清溪,2009),針對不良試題進行標記後,會與學科專家判定該題 是否刪除,亦或修審後入庫,本研究不良試題標記標準如下:

一、 依據古典測驗理論訂定標準如下:

(一) 試題通過率低於0.25。

(二) 試題鑑別度指數介於0~0.2 之間,0<CTT 的鑑別度<0.2。

二、 依據試題反應理論訂定標準如下:

(一) 試題鑑別度參數介於0~0.4 之間。

(二) 試題難度參數小於或等於-3。

(三) 試題難度參數大於或等於3。

(四) 試題猜測度參數大於或等於0.3。

陸、 將試題內容與試題參數輸入電腦資料庫

將依上項不良標準標記後的不良試題刪除或重新編修、審核,以得到符合 入庫標準的試題數量,這些數量足夠的依 95 暫綱命題的試題需再配合 99 課綱

之命題原則,進行題數細目分配,若有不符99 課綱命題原則者,需重新配題或 修審試題,若有不足的題數需經過命題、檢核、…等標準化測驗命題步驟進行 補題動作,最後還需完成 95 暫綱轉 99 課綱的轉換,始可將試題相關檔案與資 料匯入電腦資料庫。

相關文件