• 沒有找到結果。

第三章 研究方法與步驟

第四節 研究工具

為達本研究之目的,所使用的工具:壹、五年級能力指標量與實測的紙筆診 斷測驗;貳、學生試題結構分析軟體;參、電腦化適性診斷測驗;肆、動畫補救 教學,分別說明如下:

壹、五年級能力指標量與實測的紙筆診斷測驗 一、編製試題

將能力指標試題化,其試題化的方法則依據「電腦化適性診斷測驗之研究」

(陳怡如、吳慧珉、黃碧雲,2004),先建立能力指標專家知識結構,再依據能 力指標專家知識結構編製診斷測驗之試題。

能力指標試題化後,將試題編製成試卷,以進行紙筆診斷測驗。本測驗結合 五位共同以五年級數學科能力指標的研究者,將數學領域五年級全部的能力指標 試題,編製成 18 份試卷,每份試卷為 23 或 24 題,請九十三學年度剛升上六年 級的學生進行測驗,受試者需在二個月內全部施測完。試題內容如附錄一。

二、預試

選擇 306 位學生為預試的對象,因預試完資料分析結果,數據在可接受之範 圍內,故本研究預試為一次。

三、試題分析 (一)信度

在信度方面,其紙筆診斷測驗答題狀況的內部一致性α 係數為 0.9715,顯示 其結果良好。

(二)效度 1.內容效度

依教育部(2003)所訂的九年一貫數學領域五年級量與實測能力指標,參考 相關文獻資料,並根據知識結構編製原則,訂出各相關概念間的上下位次序關 係,建立知識結構草案。邀請有編製電腦化適性診斷測驗經驗的八位國小教師,

根據知識結構檢核表,建立五年級量與實測能力指標的專家知識結構圖,依此結 構編製診斷測驗之試題,根據命題程序,每一個節點編製兩題試題。

2.專家效度

本研究之紙筆診斷測驗試題完稿後,邀請一位教授及上述八位國小教師,根 據電腦化適性診斷測驗之命題檢核表檢核試題,均認為試題合宜,故本研究認為 此測驗之專家效度良好,專家名冊請見附錄三。

(三)試題的難度

本研究的難度分析方法是採用通過百分比分析,計算全體的受試者對該試題 答對人數的百分比例,稱之為難度指數(item difficulty index),若難度指數 愈高,代表該試題愈容易;反之,則代表該試題愈難,通過百分比分析的難度指 數計算公式如下:

P=R/N P:難度指數 R:答對的人數 N:受試總人數 本紙筆診斷測驗試題的難度(通過率)值介於 0.19~0.88。

(四)試題的鑑別度

本 研 究 的 紙 筆 診 斷 測 驗 鑑 別 度 是 採 用點 二 系 列 相 關 係 數 , 其值 介 於 0.0999~0.6877。

貳、學生試題結構分析軟體

一、能力指標內的試題結構:以 OT 訂出適當的閾值,分析二元記分的學生試題 順序結構,設計能力指標內的選題策略。

二、能力指標間的結構:以林文質(2005)之多點記分試題結構為基礎的電腦適 性測驗演算法,分析能力指標間的結構,以期節省更多試題。

參、電腦化適性診斷測驗

將測驗電腦化,利用架設之電腦化適性診斷測驗系統(郭伯臣等,2004)達 到省時省試題的線上測驗。

補救教學依據專家知識結構及參考相關資料,並與指導教授討論後利用 Macromedia Flash MX 2004 製作完成,再邀請有編製電腦化適性診斷測驗經驗的 八位國小教師進行專家效度的檢定,皆認為本工具可達到學習目標與補救教學之 成效,故本研究認為此工具之專家效度良好。