• 沒有找到結果。

第三章 研究方法

第一節 研究流程

依據教育部發布之普通高級中學課程綱要為基礎,並參考學測範圍及各章 節授課時數,邀集專家學者共同訂定評量架構,以作為命題參考。本研究主要 目的係在量尺化高中學測數學科題庫系統的建置並能有效應用在高三學子,為 豐富評量工具與共享資源內容,將規劃由學習效能學會編製學測數學科試題,

以學測試題數10 倍題庫為原則、題型為選擇題命題。經高中學校進行模擬考試 預試後,所得受試學生答題反應資料,除了進行信度、效度分析,並將信、效 度分析完的結果,回饋給命題單位進行修題與審題,作為後續提升本系統命題 品質的依據,進一步更將利用測驗等化技術,建置『量尺化電腦測驗題庫系統』, 以受試者的模擬測驗成績與正式學測成績求得的相關係數,來驗證數學科量尺 化試題庫能有效的預測受試者在正式測驗的成績。

所謂測驗等化(Test Equating)是利用統計方法求得試題參數,透過試題參

數將受試者在某一測驗的分數轉換成另一種測驗的量尺分數,透過基於同一量 尺以比較兩測驗分數間的關係之過程(Kolen & Brennan,1995)。而轉換成量尺 分數前,需先將試題參數(如:難度值)進行量尺化的動作,意指需將試題參 數經過校準藉以換算成同一量尺單位的指標(余民寧,1993)。

本研究經由測驗等化技術的施行,得使參與不同測驗試卷的學生們所得分 數,亦可於同樣的基準上進行更客觀、有效的比較。欲進行各試卷間的測驗等 化,需先於收集作答反應資料前確定各測驗間有共同試題存在或是共同的考生 作答,才能進行測驗等化;本研究為避免再次施測耗時耗力,故將採用定錨不 等組設計(Non-Equivalent Groups with Anchor Test Design, NEAT)(Kolen &

Brennan, 2004)以節省成本開銷。定錨不等組設計中各分測驗間必須存有共同 試題亦即定錨試題,通常定錨試題在每群受試者的測驗順序必須是一樣的,以 避免順序因素的影響;定錨不等組設計可以避免單組設計或等群組設計所遭遇 到的問題(Klein & Jarjoura, 1985)。

本研究將學習效能學會的學科專家編製完成之試題設計成不同分測驗,不 同的分測驗施測於不同的受試群(Kolen & Brennan,1995;von Davier, Holland &

Thayer, 2004),定錨不等組設計如下表 3.1 所示,各分測驗中皆含有定錨題 X。

表3.1 定錨不等組設計

樣本 測驗一 測驗二 定錨題 X

P1 ˇ ˇ

Q1 ˇ ˇ

註:P1 是取自母群 P 的隨機樣本;Q1 是取自母群 Q 的隨機樣本;“ˇ”為受試者必須受測之測驗

本研究為經濟部工業局民國 99 年 12 月 07 日數位內容產業發展補助計畫 99 年度第 7 次審議會核定通過之「高中數學個別指導行動教學輔助示範計畫」

計畫產出結果的一部份(計畫編號 99-0094),分工流程圖如下圖 3.1 所示。學 習效能學會執行1~3、5~7、9 等七個步驟,本研究執行 4、8、10 等三個步驟。

計畫成果暨論文發表交互授權同意書,請參閱附錄十二。

圖3.1 量尺化題庫建置流程圖 1.蒐集整理學測歷屆試題資料

2.召開命題委員會分配命題的能力指標 3.仿學測數學科試題命題

4.題本編製與測驗設計 5.預試前審題挑選試題

6.組織預試所需試卷

7.找尋高三應屆畢業生進行預試

8.蒐集並分析作答反應

9.依據分析結果編修不良試題

10.試題置入電腦測驗試題庫

中華學習效能發展及教育學會

中華學習效能發展及教育學會

中華學習效能發展及教育學會 國立臺中教育大學(本研究作 者)

國立臺中教育大學(本研究作 者)

國立臺中教育大學(本研究作 者)

相關文件