• 沒有找到結果。

第三章 研究方法

第二節 研究步驟

根據圖3-1 的研究流程,以下依次說明各步驟之內容:

壹、蒐集歷年鑑定考試試題

本研究是針對 92~94 年歷屆考題進行分析,其中 94 年考題又分為資優班學 生入學鑑定國文科成就測驗與語文資優班甄試國文科試題,共四回考題。將歷屆 試題進行分析,據以瞭解各年度試題之內容,作為命題的依據。

貳、訂定雙向細目表

本研究中,依據「Bloom 教育目標分類之認知歷程向度」(葉連祺、林淑萍,

2003),參考「九年一貫課綱能力指標」與「基測國文科試題結構分析表」(鄭 圓鈴,2008),整理相關文獻資料,建立「國中語文資優鑑定測驗試題雙向細目 表」。並邀請二位臺中教育大學專家學者及三位具有語文資優教學經驗之教師,

共同研討檢核。在認知能力向度中,由於資優測驗受限於紙筆測驗,經由專家討 論後,將認知向度修改為記憶、理解、應用、分析四個。另外,學習內容向度分 為教學目標與評量指標,將內容修改為11 個教學目標,教學目標再分類為 42 個 評量指標,如表 3-1。藉以分析歷屆語文資優鑑定測驗試題的命題方向,作為本 研究分析試題的工具。

表3-1 國語科雙向細目表

表3-1 (續)

9-1 推論文化常識 ※ ※

9-2 推論文學常識 ※

9-3 推論書體 ※

9-4 推論六書常識 ※

9.認識文化常識

9-5 推論工具書 ※

10-1 實行適切語詞 ※

10-2 實行適切句子 ※

10-3 實行適切段落 ※

10.認識寫作格式

10-4 實行適切標點 ※

11.認識應用文 11-1 實行應用文 ※

註:標記※為評量指標中之試題能對應到認知能力向度的內容

叁、分析歷屆資優鑑定考試試題的命題原則

命題原則是透過對歷屆試題進行質的分析,在依據分析結果進行命題。本研 究針對92~94 年歷屆考題共四回試題,將試題分類至已訂定之雙向細目表中的認 知能力向度與學習內容向度,據以瞭解各年度試題雙向細目表中各細格出題比 例,作為命題的依據。

透過歷屆試題分析,瞭解各年度試題雙向細目表中各細格出題比例後,計算 各細格所需命題的題數,且結合學科專家意見茲將各細格命題題數進行調整。

肆、進行命題與預試

首先,確立命題題數分配後,進行編製試題,並邀請二位臺中教育大學專家 學者及三位具有語文資優教學經驗之教師,依據命題檢核表(如表 2-5)檢核試 題,其流程如圖 3-2。完成製作試題內容分析表(如附錄二),最後將試題編製 成紙筆試卷,共計有50 題,以進行預試紙筆測驗。

圖 3-2 雙向細目表試題化流程圖

伍、估計試題參數、受試者能力值

本研究藉由估計試題參數與受試者能力以瞭解試題特性,分析試題特性對於 題庫資料是相當重要的一環,藉由測量模式或一般性描述統計分析試題各項參數 的穩定性可以提高測驗的品質,以確實瞭解學生學習成就表現的結果。本研究使 用BILOG-MG(Zimowski, Muraki, Mislevy & Book, 2003)進行試題參數以及受 試者能力值之估計,估計之參數提供未來試題入庫後使用。

陸、依照刪題原則進行試題篩選

利用上述步驟所估計之參數,依照臺灣學生學習成就評量資料庫(Taiwan Assessment of Student Achievement, TASA)對於不良試題篩選之標準進行檢測。

本研究中,先刪除古典鑑別度為負的試題,再針對不良試題進行標記後,學科專 家判定該題是否刪除,亦或者將試題修審後入庫,本研究不良試題標記標準如下:

一、依據古典測驗理論(classical test theory, CTT)訂定標準如下:

二、依據試題反應理論(item response theory, IRT)訂定標準如下:

(一)試題鑑別度參數介於0 ~ 0.4 之間,0<a<0.4;

捌、建置國中語文資優鑑定測驗題庫

本研究建置題庫依據試題反應理論編製的程式,主要有「建立測驗雙向細目 表」、「根據命題原則設計試題」、「修整與審查試題」、「預試與試題分析」、

「篩選試題」、「將試題內容與試題參數輸入電腦資料庫」等幾個步驟(Wainer, Dorans, Flaugher, Green, Mislevy, Steinberg, & Thissen, 1990)建立國中語文資優鑑 定測驗題庫。

此外,本研究依據臺中市語文資優鑑定測驗所公佈的成績,計算出受試者於 預試所得之分數與實際參加資優鑑定測驗分數的相關。

相關文件