研究流程

本研究利用國中自然生活科技課程綱要中有關生活科技課程之中 內容綱要，布魯姆認知領域目標分類修正版作為分析工具，針對國中教 師甄試中的生活科技科筆試試題做分析；欲了解在教師甄試筆試試題中 的命題方向，及其欲評量的認知結構為何；另一目標則為利用試做試題 的方式，建立該試題之難度及鑑別度之資料，以供命題者作為參考。下 頁圖 3-2 係根據此目的研擬出之研究流程圖，另說明，圖中每項步驟前 之阿拉伯數字，為該步驟之流程編號。

圖 3-2 研究流程圖

資料來源：本研究整理

一、步驟 1：文獻收集

研究者根據本研究之研究目的收集並閱讀有關「試題分析」、「布魯 姆認知領域目標分類修正版」、「生活科技教師甄試」相關的文獻資料。

二、步驟 2：確定分析試題範圍

確認本研究試題分析之範圍設定為國中教師甄試中生活科技科的

1.文獻收集

2.確定分析試題範圍

3-1.確認分析者名單

3-2.分析者閱讀布魯 姆認知分類修正版

3-3.試分析

3-4.研究者及研究工 具信效度檢驗

3-5.討論並研擬適合 之分析規準

3-6.研究者正式分析

5.資料統計

重複至信 度達 0.9 4-1.確認試答者名單

4-2.寄出試題

4-3.進行試題催收

4-4.根據填答狀況統 計難度、鑑別度

6.結果與討論

筆試題目。取樣年份涵蓋從 91 學年度至 99 學年度之國中教師甄試聯招 中生活科技科之考題。

三、步驟 3-1：確認分析者名單

欲確保本研究中分析結果之效度，故選擇對國中生活科技課程有相 當教學經驗之人選作為本實驗之分析者。本研究的試分析流程由兩位國 中生活科技科教師，及研究者本身擔任，試分析人員之詳細資料於本章 第五節研究工具及信效度中呈現。

四、步驟 3-2：分析者閱讀布魯姆認知領域目標分類修正版

三名分析者分別就布魯姆認知領域目標分類修正版之定義進行閱 讀，以瞭解本研究中所使用之分類規準。

五、步驟 3-3：試分析

三名分析者分別閱讀布魯姆認知領域目標分類修正版的內容之後，

針對本次研究分析中之 14 份試題中，隨機抽樣一份考卷作為試分析對 象，由三名分析者針對該份考卷，分別獨立進行分析工作，並將結果依 照信度檢驗公式進行分析。

六、步驟 3-4：研究者及研究工具信效度檢驗

本實驗之研究者信度採用「評分者信度」及「研究者信度」，在獲 得試分析之分析結果後，根據「評分者信度」及「研究者信度」之計算 公式計算評分者信度；若信度未達 0.8 則重新閱讀布魯姆認知領域目標 分類修正版，並共同擬定適合之分析規準；若信度達到 0.8 則可開始進 行正式分析。

另針對研究工具中所使用的教學主題分析表，因由研究者自行改自 國中生活課技課程綱要，故在此步驟中，預計透過專家審查的方式，以 期確保此研究工具之效度。

六、步驟 3-5：討論並研擬適合之分析規準

由三位分析者針對三者意見相左的題目做討論，並且根據布魯姆認 知領域目標分類修正版之分類準則，製定出三者皆認同之分類規準。以 做為分類之根據。

七、步驟 3-6：研究者正式分析

由研究者根據三位分析者同討論出之分類準則，針對所收集的 14 份考題，並依以下兩個步驟開始進行正式分析。

(一) 確定該份試題內容所屬之教學主題：由研究者逐年逐題確認該 題目所測驗之內容所屬之教學主題，並在教學主題分析表的細 格中填入題號。若遇無法確定其教學主題內容之題目，可再參 考教學主題分析細目表。若題目內容在以上兩表皆無出現，無 法分類者，則填入其他類。

(二) 分析試題的知識類型與認知歷程：由研究者逐題確認該題目所 測驗之內容所屬之知識類型，做第一步的分析與檢驗；接著就 認歷程來判定，該題是屬於何種認知類型，做第二層的分析，

並將所屬題號填入布魯姆認知領域目標分類修正版分類表。

八、步驟 4-1：確認試答者名單

在研究目的及待答問題中，本研究需收集各份試題之難度以及鑑別 度資料，故針對此目的擬定試答者名單，設定在 60 歲以下，並領有國 中自然與生活科技領域生活科技科合格教師證者作為試答的名單。根據 文獻探討中難度及鑑別度的使用限制，故將目標設定每份考卷回收 30 份有效的填答結果。

九、步驟 4-2：寄出試題

根據有意願填答者之地址及電子信箱，將試題紙本以及 word 檔以 郵件及電子郵件方式寄出，並附回郵信封。

十、步驟 4-3：進行試題催收

寄出試題兩星期後針對尚未回覆之填答者，以電子郵件的方式進行 試題催收。

十一、步驟 4-4：根據填答狀況統計難度、鑑別度

根據回收之有效試題進行統計，並依照公式計算各試題之難度以及 鑑別度。其公式內容於第五節資料處理與呈現方式詳述。

十二、步驟 5：資料統計

將分析過程中所收集到的數據資料，利用統計表做記錄並統整。製 作資料分配圖。

十三、步驟 6：結果與討論

針對本研究之研究目的作結果與討論。

(一) 探討試題的內容在教學主題中的分佈範圍：統計教學主題分析 表之填表結果，了解各份試題在各個教學主題的分佈是否平 均。

(二) 探討試題的知識型態與認知歷程分佈情形：根據魯姆認知分類 修正版分類表分析填寫之結果做出統計，了解各份試題所評量 之認知向度是否平均分佈。

(三) 歸納整理歷年來各縣市於不同教學主題命題比率之情形：將分 析之結果作成統整表，提供參與考試者以及命題者作為參考。

(四) 根據試答者填答結果，整理出各份試題之難度以及鑑別度分佈 狀況，提供給命題者作為參考。