• 沒有找到結果。

第四章 分析與討論

第二節 資料統計分析

本節就本研究之基本學力測驗進行信度與效度之考驗。本研究之基本學力測 驗的信度考驗,以Cronbach α的係數及以單、雙數題目的折半信度來進行分析。

在效度上除了進行題本考核,分析內容效度,並以九十四學年度下學期社會領域 期末總成績來進行效標關聯效度(criterion-related validity)分析。以下分 別就信、效度來討論。

壹、信度

具有良好的信度是測驗工具的基本條件之一。本研究採用Cronbach α係數 及折半信度來判斷本研究的可信性或內部一致性。經SPSS軟體分析本研究之基本 學力測驗結果的Cronbach α係數為0.8062。若以試題折半信度來進行探討,分 析結果如下表4-2-1。

表4-2-1 折半信度分析表

名稱 個數 平均 變異數 標準差 信度值 單數題 13 8.30 7.36 2.71 0.6639 雙數題 12 8.35 6.58 2.57 0.7198

經過斯布校正公式(Spearman-Brown)來進行校正,單、雙數題間的相關為 0.6155,故本研究的折半信度估計值為0.7620。

貳、內容效度分析

內容效度是測驗試題的抽樣樣本內容是否具有教學目標、教材代表性或適當 性程度的指標。一般而言,測驗的試題若能涵蓋所有教學目標和教材內容,並且 根據雙向細目表來命題,且具有足夠的代表性試題,即能確立該測驗的內容效度 的適當性(余民寧,1997)此即表示教學目標與教學內容是內容效度評鑑的兩項 重要因素。

本研究係依社會領域第三個學習階段之部份主題軸能力指標及單元主題編 製雙向細目表,並依此雙向細目表編製試題,兼顧分段能力指標與教材內容,具 有適當的內容效度。

本測驗的效度是在於考驗試題是否具能測量出所欲測驗的能力,以題本考核 的問卷來進行內容效度的探討。施測的對象為目前於國小服務的教師,並且為社 會學習領域之教學者,總共進行6份問卷的施測,分別為4位男性與2女性教師,

其服務年資皆達5年以上,在學歷方面分別為1位碩士畢業、4位碩士學位進修中 與1位師範學院畢業;在學校行政職務方面有1位主任、3位組長及2位導師。

在試題檢核的部分,六位教師根據這 25 個題目回答結果如表 4-2-2。根據試題 檢核的結果進行百分比同質性檢定(test of homogeneity of proportions),

顯著水準為χ2.95(5)=2.109,未達顯著,表示六位教師認為是否符合試題內容的 百分比是沒有顯著差異,亦即六位教師教認為本研究工具能符合編製要求,因此 本研究工具的內容效度是相當高的。

表 4-2-2 試題檢核結果與分析

受試者 1 2 3 4 5 6

試題檢核項目 是 否 是 否 是 否 是 否 是 否 是 否 χ2 試題內容與社會科課程的評

量目標是否一致? 25 0 25 0 24 1 25 0 24 1 25 0 4.054n.s 試題的敘寫是否合乎社會科

課程的能力指標? 24 1 25 0 24 1 25 0 23 2 24 1 3.517n.s 試題的內容是否合乎社會科

課程的代表性? 25 0 24 1 24 1 25 0 25 0 24 1 3.061n.s 試題的術語或名詞是否以受

試者的社會學習領域為主? 24 1 25 0 25 0 23 2 25 0 24 1 5.137n.s 選用的短文、圖表、或地圖

等試題內容資料,是否符合 評量目標?

25 0 25 0 24 1 25 0 25 0 25 0 5.034n.s 試題用詞是否簡短明確? 22 3 23 2 23 2 24 1 25 0 23 2 3.429n.s 試題內容是否避免零散片段

知識? 22 3 23 2 22 3 24 1 24 1 23 2 2.174n.s 試題是否與學生的生活經驗

相結合? 25 0 24 1 23 2 24 1 25 0 24 1 3.517n.s 試題中是否避免出現歧視性

別或種族的字眼? 25 0 25 0 25 0 25 0 25 0 24 1 5.034n.s 試題的訊息是否避免某些群

體(種族、性別等)所熟悉? 25 0 25 0 25 0 23 2 24 1 25 0 7.143n.s 試題是否提供答題所需的完

整訊息? 24 1 24 1 24 1 23 2 24 1 23 2 0.733n.s 試題的敘寫是否合乎邏輯發

生程序? 25 0 24 1 25 0 24 1 24 1 25 0 3.061n.s 題幹是否語句完整? 24 1 25 0 24 1 25 0 24 1 25 0 3.061n.s 題幹中之關鍵詞或否定詞是

否醒目處理? 22 3 23 2 24 1 23 2 24 1 23 2 1.668n.s

表 4-2-2 試題檢核結果與分析(續) 百分比同質性檢定(test of homogeneity of proportions)的結果,顯著水準

為χ2.95(5)=7.677,未達顯著,表示六位教師認為是否符合題本內容的百分比是 沒有顯著差異,亦即六位教師教認為本研究工具能符合編製要求,因此本研究工 具的內容效度是相當高的。

表 4-2-3 題本檢核結果與分析

受試者 1 2 3 4 5 6

題本檢核項目 是 否 是 否 是 否 是 否 是 否 是 否 χ2 試題的設計是否依據教材

內容及其教學目標的雙向 細目表來制定?

24 1 25 0 25 0 24 1 25 0 25 0 4.054n.s 試題是否平均涵蓋各學習

內容的概念? 24 1 25 0 24 1 24 1 25 0 24 1 3.061n.s 試題是否注重概念原理的

理解與應用? 25 0 24 1 23 2 25 0 24 1 25 0 4.054n.s 題型或提問方式是否避免

連續多題相同? 25 0 24 1 25 0 23 2 25 0 25 0 7.143n.s 試題是否避免同時含有太

多概念? 22 3 23 2 23 2 24 1 23 2 25 0 3.429n.s 標準答案是否平均分配? 25 0 24 1 25 0 24 1 25 0 25 0 4.054n.s 題幹與選項是否安排在同

一頁次? 25 0 25 0 25 0 24 1 25 0 25 0 5.034n.s 相同教學單元之試題是否

按內容綱要適當配置? 24 1 23 2 24 1 23 2 24 1 24 1 1.056n.s 試題的數目與選用資料之

長度是否成恰當比例? 22 3 24 1 25 0 23 2 25 0 25 0 8.333n.s 試題是否未曾在課本、參考

書或補習班講義中出現? 25 0 24 1 25 0 24 1 25 0 25 0 4.054n.s 試題是否未曾在任何的考

試中出現? 23 2 25 0 24 1 24 1 24 1 23 2 2.547n.s

參、效標關聯效度

本研究以九十四學年度下學期社會學習領域學期末總成績為效標來進行效 度分析。簡單而言,本研究中所測得的結果應與學期末總成績有較高的相關程 度,因此兩變項均為連續變項,故採用皮爾遜(Pearson)的積差相關統計方式

(Product-moment correlation)。分析結果兩者相關係數為0.673**,達相關 顯著水準,代表本研究結果與社會領域的學期結果是有顯著相關,亦本研究的測 驗能有效測得學生的基本學力。