• 沒有找到結果。

AREOLEST 戶外科學教育課程學習評量設計

第三章 研究方法

五、 AREOLEST 戶外科學教育課程學習評量設計

(一) 評量編制

1. AREOLEST 成就測驗設計

本研究依據理論設計的 AREOLEST 課程,亦編制五個成就測驗建檢測成效,

分別是「氣候變遷的衝擊、我是小小水醫生、我是環境觀察員、我是環境守護者、

我是小小生物學家」,以這五個部分設計題目,比較接受 AREOLEST 學習課程的 實驗組學生,其在 AREOLEST 成就測驗得分是否與未接受 AREOLEST 課程的 控制組學生有顯著差異。此評量的題型為填充題,每答對一題得 1 分,答錯者不 給分亦不扣分。各選題分數總合當成受試者之 AREOLEST 成就測驗的總得分,

總分愈高表示該生的學習成效愈佳。

AREOLEST 成就測驗初稿擬定後,函請 3 位審查委員(名單請見附錄十二)

進行試題審視,針對測驗內容適切性、正確性等,進行專家內容效度檢測修正,

專家修改內容,AREOLEST 成就測驗審查委員建議事項見附錄四,修改後成為 初步預試測驗,再邀請十位國小六年級生針對初步預試測驗進行填寫,並針對題 目描述、選項設置進行填答,以了解題目描述、選項設置是否有不清楚之處再稍

40

做修正以符合國小高年級使用,最後完成 AREOLEST 成就測驗預試測驗,詳見 附錄五。

2. 學習風格評量

本研究用來考驗學習者學習風格之量表工具,採用 Kolb(1984)提出的學習 風格量表(Learning Style Inventory, LSI)作為量化評量的研究工具,以學習者的 自身表述標準量表,用於幫助自我了解、探索及發展的評估工具估,在各項研究 中常被使用,國內、外有相當多的實證研究採用 LSI 量表進行相關教學研究。此 LSI 量表具有內容效度與專家效度,其內部一致性信度介於.73-.83。LSI 量表共 有 12 道題,每題皆描述四種不同狀況由受試者依自己適合程度依阿拉伯數字 4 至 1 順序來排列,要強調不可以漏填,並重複排列。若被施測者以 4 表示,則認 為此句子的說明最適合自已,以此類推,不相近的則用 1 來表示。

Kolb 量表之計分採計方式為:

A.首先各題號的第一選項的分數相加,則為具體經驗項目的總分;各題號的 第二選項的分數加總,則為省思觀察項目的分數;各題號的第三選項的分數相加,

則為抽象概念項目的總分;各題號的第四選項的分數加總,則為主動驗證項目的 分數。

B.將抽象概念的分數減去具體經驗的分數,來獲得偏好具體經驗/抽象概念 維度的分數;主動驗證的分數減去省思觀察的分數,來獲得偏好主動驗證/省思 觀察維度的分數。

C.接續將偏好「具體經驗/抽象概念」及偏好「主動驗證/省思觀察」二個向 度的分數,分別為 X 軸及 Y 軸,以這兩個維度的正負,交織而成四個象限,即 區分為四種學習風格,分別為:分散型(第一象限)、同化型(第四象限)、聚合 型(第三象限)、適應型(第二象限),如圖 2 所示。

本研究參考 Kolb(1984)提出的學習風格量表,初稿擬定後,函請 3 位審 查委員(名單請見附錄十二)進行試題審視,針對量表內容適切性、正確性等,進 行專家內容效度檢測修正,專家修改內容,學習風格量表建議事項見附錄十,修 改後成為初步預試量表,再邀請十位國小六年級生針對初步預試量表進行填寫,

並針對題目描述、選項設置進行填答,以了解題目描述、選項設置是否有不清楚 之處再稍做修正以符合國小高年級,最後完成學習風格預試量表,詳見附錄十一。

3. 認知負荷量表

本研究之認知負荷量表參考陳新豐(2016)的研究進行改編制,以五點量尺 來測量國小六年級學生在學習 AREOLEST後的認知負荷程度,題目共 8 題,分別 在心智努力(mental efforts)和心理負荷(mental load)兩個向度來進行分析探討。

41

認知負荷測量題目,將自身感受相符之程度圈選出來,得分由 1 分至 5 分,得分越 高代表認知負荷程度越高。

認知負荷量表初稿擬定後,函請 3 位審查委員(名單請見附錄十二)進行試題 審視,針對量表內容適切性、正確性等,進行專家內容效度檢測修正,專家修改 內容,認知負荷量表建議事項見附錄六,修改後成為初步預試量表,再邀請十位 國小六年級生針對初步預試量表進行填寫,並針對題目描述、選項設置進行填答,

以了解題目描述、選項設置是否有不清楚之處再稍做修正以符合國小高年級,最 後完成認知負荷預試量表,詳見附錄七。

4. 學習滿意度問卷

資訊科技融入 AREOLEST 課程學習滿意度問卷施測的目的,用於分析實驗 組學生對於 AREOLEST 課程接受的程度、學習的態度、想法及建議。題目共有 15 題,採用 Likert-type 五分量尺計分方式,5 分表示「非常同意」,4 分表示「同 意」,3 分表示「尚可」,2 分表示「不同意」,1 分表示「非常不同意」,請實驗組 學生依其同意程度進行選取,蒐集學習者對系統性思考取向課程的接受程度。

本問卷初稿擬定後,函請 3 位審查委員(名單請見附錄十二)進行試題審視,

針對問卷內容適切性、正確性等,進行專家內容效度檢測修正,專家修改內容,

學習滿意度問卷建議事項見附錄八,修改後成為初步預試問卷,再邀請十位國小 六年級生針對初步預試問卷進行填寫,並針對題目描述、選項設置進行填答,以 了解題目描述、選項設置是否有不清楚之處再稍做修正以符合國小高年級,最後 完成學習滿意度問卷,詳見附錄九。

(二) 預試

立意取樣(Purposive Sampling)台南市巴克禮紀念公園周圍的國小六年級班 級,共 5 班 150 位學生做預試抽樣,預試問卷回收後,進行資料編碼,以 ITEMAN 及 SPSS22.0 版統計軟體進行難度和鑑別度分析及信度分析,並據此所得結果選 取適切的題目,再修訂為正式問卷。AREOLEST 學習評量量表正式問卷見附錄 五。

1. 預試問卷結果分析

本研究在預試量表回收後,進行資料建置,並以統計套裝軟體對量表進行信、

效度分析,本研究主要以項目分析和Cronbach α 來考驗本量表之信、效度。各分 析步驟說明如下:

(1)題目分析

題目分析主要根據各題項的難度及鑑別度考驗測驗題目是否合宜,研究者就 AREOLEST 成就測驗中題目採題目分析考驗其內容效度,根據預試樣本在

42

AREOLEST 成就測驗的作答反應,利用 ITEMAN 進行分析,選題標準在難度方 面根據王文科(2002)認為難度指數以.50 為最適中,但基於若干統計上的理由 與動機,測驗難度的範圍以位於 .20 至 .80 之間為宜;鑑別度方面根據 Noll, Scannell, & Craig(1979)認為鑑別度最低標準至少在.25 以上。所以依各試題統 計分析結果,當難度指數介於 .20 至 .80 之間且鑑別度大於.25 以上,則該題予 以保留。

AREOLEST 成就測驗共分成五大分測驗,各分測驗的測驗題數分別是:「氣 候變遷的衝擊測驗 6 題、我是小小水醫生測驗 7 題、我是環境觀察員測驗 7 題、

我是環境守護者測驗 6 題、我是小小生物學家測驗 5 題,共計有 31 題,經題目 分析結果發現,各題難度均達.25 以上,且鑑別度亦都大於 .25,故全部題目均予 以保留,相關題目分析結果如表 4 所示:

表 4 AREOLEST 成就測驗題目分析

分析測驗名稱 題號 難度 鑑別度 刪題與否

氣候變遷的衝擊

1 .75 .47 保留

2 .70 .60 保留

3 .76 .49 保留

4 .78 .48 保留

5 .73 .42 保留

6 .77 .41 保留

我是小小水醫生

1 .72 .45 保留

2 .78 .42 保留

3 .72 .50 保留

4 .67 .46 保留

5 .76 .42 保留

6 .72 .42 保留

7 .77 .51 保留

我是環境觀察員

1 .71 .54 保留

2 .75 .42 保留

3 .70 .47 保留

4 .72 .42 保留

5 .78 .41 保留

6 .67 .71 保留

7 .69 .59 保留

43

我是環境守護者

1 .73 .37 保留

2 .80 .36 保留

3 .67 .45 保留

4 .69 .47 保留

5 .71 .51 保留

6 .79 .46 保留

我是小小生物學家

1 .78 .42 保留

2 .68 .51 保留

3 .70 .53 保留

4 .69 .62 保留

5 .75 .45 保留

(2)項目分析

根據者 Gay(1992)的觀點,若測驗的信度係數在 .90 以上,表示信度非常 良好。本研究採用吳明隆(2011)所提,當 α 係數值介於 .60 至 .70 間為最小可 接受值,α 係數值介於 .70 至 .80 間為相當良好。學習風格量表各題項經預試分 析後,在具體經驗、抽象概念、主動驗證及省思觀察四個學習階段上的Cronbachα 係數皆達 0.6 以上,表示此研究工具內部一致性良好為可用量表,各向度測驗信 度分析結果如表 5 所示:

表 5 學習風格各分量表信度分析

向度 Cronbach α 係數

具體抽象 .73

抽象概念 .60

主動驗證 .80

省思觀察 .87

(3)認知負荷量表

認知負荷量表各題項經預試分析後,在「心智負荷」、「心理負荷」二個 學習階段上的Cronbachα 係數皆達 0.8 以上,顯示此研究工具內部一致性良好,

為可用量表,相關分析結果如表 6 所示:

表 6 認知負荷量表各向度信度分析

向度 Cronbach α 係數

心智負荷 .96

心理負荷 .80

44