研究工具的信度與效度

壹、程式設計成就測驗：

一、試卷命題

本研究所使用之成就評量是根據旗立資訊所出版之「程式設計I」的教 材內容，運用Bloom認知行為目標層次來編擬試題，並請教校內曾擔任程 式設計教學的教師請教命題重點。在與資料處理科之程式設計任教老師討 論後，設計該次測驗之雙向細目表，如表3-5-1所示。試卷內容為四選一之 選擇題，預試測試卷有四十五題（如附錄一），以建立專家、內容效度，

供成就測驗後測試卷之選題。

表3-5-1 程式設計之資料處理概念、輸入與輸出、流程控制單元雙向細目表 認知層次

能力細目 知識 理解 應用 分析 綜合 總題數

基本資料型態 2 1 3

變數／ 常數 2 1 3

運算式(算術) 1 3 1 2 7

運算式(比較) 1 1 1 3

運算式(邏輯) 1 2 1 4

輸入指令 1 2 3

輸出指令 2 2 4

循序流程 1 1 1 1 4

判斷流程 1 2 1 3 7

重覆流程 1 2 1 3 7

總題數 10 9 13 6 7 45

二、試卷預試

依照古典測驗理論，對該預試試卷進行試題之信效度工作；研究者根 據資深老師的意見，修正預試的試題內容，以完成專家效度工作；並請任 教程式設計老師擔任主試，預試的對象選定台中市安和高級中學(化名)的 三年級學生共計102人，測驗時間為四十分鐘，指導說明力求一致，以作為 修訂試題之參考。

三、試題分析

程式設計成就預試卷的題數有四十五題，滿分100分。依照受試者的分 數，由高而低排序，以分數高的前27%的人作為高分組，分數低的後27%

的人為低分組，依測驗學者Ebel與Frisbie（1991）所提之鑑別度的判斷標 準，.19以下之題目是需要刪除或修改，至少要符合.20以上，難度指標最好 接近.50以便難易適中；然後進行難度和鑑別度分析。

四、試卷選題

程式設計成就後測試卷的題目選定，使用余民寧教授（2002）之成就 測驗軟體分析預試試卷的分數，挑選難度在0.40～0.85，且鑑別度在0.21～

0.89之間，作為刪除難度及鑑別度不佳的試題之標準，得到40題作為後測 試卷之試題，如表3-5所示。其Cronbach’s α（內部一致性係數）信度係數 0.72，表示本量表具有一致性和可靠性。

表3-5-2 後測試題之難度與鑑別度表

題號 難度 鑑別度 題號 難度 鑑別度

1 0.5217 0.2609 21 0.7174 0.2174

2 0.6739 0.3043 22 0.3913 0.3478

3 0.8043 0.2174 23 0.6522 0.2609

4 0.7174 0.3913 24 0.7391 0.2609

5 0.5000 0.3913 25 0.5000 0.2174 6 0.6522 0.2609 26 0.6957 0.3478

7 0.6957 0.2609 27 0.8043 0.3043 8 0.6957 0.2609 28 0.7609 0.3913

9 0.8261 0.2609 29 0.6957 0.4348 10 0.8261 0.3478 30 0.7609 0.3043

11 0.8043 0.2174 31 0.5870 0.4783 12 0.8043 0.2174 32 0.7609 0.3913

13 0.7826 0.3478 33 0.6957 0.2609 14 0.7391 0.2609 34 0.7391 0.4348 15 0.7826 0.2609 35 0.6739 0.2174 16 0.8696 0.2609 36 0.7391 0.3478 17 0.8043 0.3043 37 0.8261 0.2609 18 0.7174 0.4783 38 0.7609 0.3043 19 0.7609 0.3043 39 0.7391 0.3478 20 0.8478 0.2174 40 0.8478 0.3043

因本研究之範圍重點在於基本程式設計能力的教學，對於Bloom認知 行為目標層次的評鑑部份沒有列入，最後選定四十題，總分定為100分，編 為程式設計成就測驗後測的試卷，以收集實驗組和控制組在實驗後之學習 成效資料。

貳、學習風格量表

本研究之學習風格部份用Kolb學習風格量表（Learning Style Inventory;

LSI）KLSI-1984 進行測量。該量表（如附錄二）是一份自我陳述標準量 表，總共有12 個題目，每道題目有四項陳述，填答者依據符合個人經驗之 合適度依序排列這些陳述，選4為「最符合的」，選3為「經常符合的」，

選2為「偶而符合的」，選1為「最少符合的」等量化處理。最後將每一種 現象十二個項目的成績求其總和，以判斷其學習風格於那一類。

參、學習態度量表：

學習態度量表為參考中正大學研究生劉耀明論文的評量工具，由於研 究的對象同為私立高職一年級學生，學生性質也相近，同為商業類科故經 過同意後使用其問卷，問卷詳見附錄三。本問卷內容經專家建議修定，以 完成內容效度之後，預計發放二班150名學生進行預試；本量表預試後以 Cronbach’s α分析，取得其總量表的Cronbach’s α信度係數。

本量表使用Likert’s 五點評定量表的方式，共包含了30題。每一題依 據學習者的回答分為五種不同的答案，在正向題方面，勾選「非常同意」

給五分，勾選「同意」給四分，勾選「普通」給三分，勾選「不同意」給 兩分，勾選「非常不同意」給一分，負向題則反之評分。以認知、情感、

行為三個分量表來設計問題，各分量表包含十個問題，量表上的得分總和 做為其個人學習態度的指標，得分越高者代表其學習態度越好，反之則越 差。

最終取得有效樣本數99名進行相關統計，該量表的信度方面，「電腦 態度量表」之總量表的Cronbach α係數為.885。「認知」、「情感」、「行 為」三分量表的Cronbach α係數如表3-5-3，而且相關係數如表3-5-4相關 係數在.33 ~ .81，相關顯著係數均達.001的顯著水準，表示本量表具有一致 性和可靠性。

表3-5-3學習態度量表預試之Cronbach α係數摘要表

表3-5-4 各題項與量表總分之積差相關係數摘要表 (續)

本量表使用Likert’s五點評定量表的方式，共包含了12題。每一題依據 學習者的回答分為五種不同的答案，皆為負向題，勾選「沒有影響」給五 分，勾選「有點關係」給四分，勾選「普通」給三分，勾選「次重要」給

兩分，勾選「最主要」給一分，量表上的得分總和做為其個人成就歸因的 指標，得分越高者代表其學習困擾越低，反之則越高。

最終取得有效樣本數99名進行相關統計，該量表的信度方面，總量表 的Cronbach α係數如表3-5-5所示為.696。而相關係數如表3-5-6所示，相關 係數在.33 ~ .81，相關顯著係數均達.001的顯著水準，表示本量表具有一致 性和可靠性。

表3-5-5 學習態度量表預試之Cronbach α係數摘要表

成就歸因量表 Cronbach α 係數 項目的個數

全量表 .696 12

表3-5-6各題項與量表總分之積差相關係數摘要表

題項 總和 題項 總和

1 Pearson 相關 .386(**) 7 Pearson 相關 .336(**) 顯著性 (雙尾) .000 顯著性 (雙尾) .001 2 Pearson 相關 .517(**) 8 Pearson 相關 .514(**)

顯著性 (雙尾) .000 顯著性 (雙尾) .000 3 Pearson 相關 .447(**) 9 Pearson 相關 .535(**)

顯著性 (雙尾) .000 顯著性 (雙尾) .000 4 Pearson 相關 .425(**) 10 Pearson 相關 .562(**)

顯著性 (雙尾) .000 顯著性 (雙尾) .000 5 Pearson 相關 .354(**) 11 Pearson 相關 .473(**)

顯著性 (雙尾) .000 顯著性 (雙尾) .000 6 Pearson 相關 .491(**) 12 Pearson 相關 .541(**)

顯著性 (雙尾) .000 顯著性 (雙尾) .000

第六節 資料分析與處理

本研究中需要統計分析的部分是學習態度和學習成效，在實驗中實驗 組與對照組為兩個獨立的樣本。利用SPSS 12.0 作為統計分析工具，採用 之統計分析方法有：

對於研究設計所使用問卷和量表等研究工具，皆參照所引用文獻，然 後 處 理 其 信/ 效 度 ， 同 時 成 就 評 量 之 試 卷 也 以 SPSS 進 行 內 部 一 致 性 Cronbach’s α係數分析，以確定研究工具之信度。

在進行變異數分析之前，為確定兩組學員之同質性，會採用獨立樣本t 檢定之同質性檢測，以考驗兩組學員是否有顯著差異。

本研究主要進行兩種不同教學法的比較，資料分析使用單因子變異數 分析（ANOVA）考驗不同教學法對學員之學習成效的影響。