• 沒有找到結果。

第三章 研究方法與設計

第二節 實施步驟

壹、確定研究主題

研究者先以繪本教學相關之關鍵詞(例如:繪本教學、圖畫書教學等)在台 灣博碩士論文知識加值系統與台灣期刊論文索引系統等資料庫進行交叉搜尋,發 現此一主題的教學實驗研究超過 150 篇可供分析,才確立了此研究主題的後設分 析。

貳、收集相關文獻與研究報告

本研究確立研究主題後,即開始蒐集與彙整相關的文獻及研究報告,資料來 源可分為幾種:

一、台灣博碩士論文知識加值系統。

二、台灣期刊論文索引系統 三、學術研討會論文

參、建立研究報告選用之標準

根據研究目的,界定本研究所選用研究報告之標準如下:

一、研究主題必須是針對繪本教學所進行的實證研究,且必須是繪本教學與傳統 或其他教學之比較。

二、研究型態必須是真實驗研究、準實驗或前實驗研究設計。

三、研究結果必須提供足夠之數據:(一)實驗組及控制組之平均數、標準差及 樣本大小,(二)F 值及樣本大小或(三)t 值及樣本大小。因為有足夠的數 據,研究者方能計算出每一篇研究報告之效果大小值(effect size)。

五、本後設分析的研究以研究對象為國人之研究報告為範圍。

63 肆、篩選符合標準之研究報告

研究者以「繪本教學」與「圖畫書教學」為關鍵詞,自國內期刊論文索引系 統、台灣博碩士論文知識加值系統及行政院國家科學委員會的政府研究資訊系統 進行搜索,其中實驗研究超過 150 篇。研究者依據篩選標準,於 2013 年 4 月底 前篩選出 103 篇的研究作最後的討論。

伍、檢驗出版偏差

後設分析在蒐集文獻時,可能會遇到抽樣偏差與檔案抽屜的問題,導致研究 結果的高估。因此,本研究應用廖遠光(2009)所建議的 Rosenthal (1991)的計 算 Fail-safe Number ( FSN)方法來檢驗出版偏差,使用達顯著水準的研究篇數與 未達顯著水準的研究篇數計算,是用來確定未達顯著性、未出版、或未尋獲的研 究是否會影響結果。在 FSN 數值的判定上,應大於 Tolerance level 才能確保出版 偏差因素對結果影響不大,若數值小於 Tolerance level,則代表有出版偏差的問 題。

藉由 Rosenthal 之計算 FSN 方法,本研究檢驗出版偏差:套入公式後的認知 學習的 FSN = 2689,而 Tolerance level = 175;情意學習的 FSN = 4091.4,而 Tolerance level = 335;高層次思考能力學習的 FSN = 1014.4,而 Tolerance level = 95。三個面向之學習成效 Fail-safe Number 皆大於 Tolerance level,表示繪本教學 對學生學習成效影響之教學實驗文獻中,未達顯著性、未出版或未尋獲的研究,

並不繪影響本研究後設分析的後果。

陸、設定研究變項,並發展登錄表格

研究者根據篩選後的研究報告,經彙整而將研究變項分為文件性質、受試者 性質、研究方法與研究案性質等四大類,各類之下又細分成許多相關子變項,如:

學科領域、出版形式、出版年代、年級、學習位置、研究工具、教學者、工具信 度、樣本人數、統計方式、研究設計形式、教學實驗節數、實驗組指導方式的形

64

式、繪本的使用方式、實驗組教學處理、對照組教學處理、繪本主要教學方式、

繪本討論活動類型、繪本延伸活動類型、繪本類型、繪本來源等二十一個調節變 項,並據此發展登錄表格。各變項之內容與界定說明如下:

一、文件性質

(一) 學科領域:繪本教學應用於何種學科領域,本研究利用九年一貫課 程中的七大領域及七大議題做為區分,分為語文與人文(國語、英 語、社會、藝術與人文)、理科(數學、自然與生活科技)、綜合活 動(團體活動、輔導活動、情緒教育、人權教育)、性別平等教育、

品德教育、生命教育與其他類。

(二) 高層次思考能力領域:僅在高層次思考能力學習成效的面向分類。

包含創造力、問題解決能力與閱讀理解能力。

(三) 出版形式:資料的來源,分為期刊論文、博碩士論文與研討會論文。

(四) 出版年代:以西元年代登錄。統計分析時分為 2003 ~ 2006、2007 ~ 2009 及 2010 ~ 2013。

三、受試者性質

(一) 年級:分成不同學習階段,幼稚園、國小低年級(1-2)、國小中年 級(3-4)、國小高年級(5-6)、混合與其他。

(二) 學習位置:受試者隸屬的學校其地理位置,位於台灣北區(基隆、

台北、桃園、新竹)、中區(苗栗、台中、南投、雲林、彰化)、南 區(嘉義、台南、高雄、屏東)、東區(宜蘭、花蓮、台東)四區域 的哪一區。

四、研究方法

(一) 研究工具:用以獲得研究分數之研究評量工具係自編、標準化或混 合。混合則是自編與標準化工具均採用。

(二) 教學者:分為相同教學者與不同教學者,控制組與實驗組為同一教 師時,在此視為相同教學者。

65

(三) 工具信度:研究工具是否嚴謹,研究者是否提供該研究工具的信度 或是未說明,還是說明不足。

(四) 樣本人數:將總樣本人數分為 1~50 人、51~100 人及 100 人以上。

(五) 統計方式:在研究文獻中,可提供後設分析使用的數據是哪一種類 型,分為平均數和標準差、t 值、F 值。

(六) 研究設計形式:視該研究報告係採用何者實驗設計形式,是單組前 後測、等組前後測、不等組前後測或其他。

五、研究案性質

(一) 教學實驗節數:由於週數無法明確表示學生實際上課的時間,因此 本研究以節數計算,分為 0–8 節、9–16 節、17–24 節、25–32 節、超過 32 節及未說明。

(二) 實驗組指導形式:實驗組指導方式是採大群體、小群體(分小組)、 個人或混合形式。

(三) 繪本的使用方式:以繪本作為教學媒材的觀點來看,分為僅使用繪 本單一媒材進行教學或繪本搭配其他輔具(電腦、錄放影機、投影 片、電視等)進行教學。

(四) 實驗組教學處理:是一般繪本教學或是繪本搭配其他學習策略教學

(團體輔導方案、搭配戲劇教學等)。

(五) 對照組教學處理:分為無對照組、一般傳統教學、其他教學方式或 無處理。

(六) 主要教學方式:依據繪本發展活動時的教學方式分為朗讀、導讀、

獨立閱讀、教師口述故事、共讀、混合或未說明。

(七) 討論活動類型:分為無討論活動、教師帶領全班討論、分小組討論、

混合與未說明。

(八) 延伸活動類型:無延伸活動、體驗活動、遊戲、藝術活動(做小書、

66

67 柒、資料編碼與登錄

篩選符合標準的研究報告,並將每一篇的內容依據設定之調節變項,編碼於 登錄表格之中。「編碼者信度」在後設分析中受到相當重視,為降低個人主觀因 素之影響,以提高編碼的可信度,編碼者信度在後設分析中顯得相當重要(廖遠 光,2009)。研究者將會明確定義每個調節變項的概念,再經過兩位編碼者進行 編碼,並於編碼登錄後,檢核兩者編碼結果的一致性。兩位編碼者須針對編碼相 異之處進行討論以達成共識。若無法達成共識部分,則請求專業的後設分析研究 者給予意見及協助。

由於研究者繪本教學相關實驗研究篇數較多,故請教後設分析專家後,從蒐 集到的研究報告中隨機抽取 55 篇(53%)研究報告進行編碼者信度。本後設分 析編碼登錄的工作,由研究者與國立台灣師範大學課程與教學研究所一位研究生 共同進行編碼工作,兩人編碼一致性達 87%。其中最容易產生不一致的變項為「研 究工具」、「教學者」與「繪本主要教學方式」等。兩位編碼者針對編碼相異之處 進行討論,以達成共識完成編碼。

捌、計算每一篇研究之效果值

本研究採用 Hedges 和 Oklin (1985)的公式,採用後測的評量結果,將實驗組 與控制組的分數之差除以標準差,其公式如下:

𝑔𝑖 = X�1− X�2

𝑠

其中𝑔𝑖為效果量X�1為實驗組之平均數,X�2為對照組之平均數,S 為包含實驗 組與對照組之所有樣本的標準差,其公式為:

S =�(𝑛1− 1)𝑆12+ (𝑛2− 1)𝑆22 𝑛1+ 𝑛2− 2

其中,n1為實驗組之樣本數,n2為對照組之樣本數,S1為實驗組之標準差,

S2為對照組之標準差。

68

其次,為調節小樣本所產生之偏差,再以公式調整偏差。

𝑑𝑖 = �1 − 3 4N − 9� 𝑔𝑖 N=n1+ n2

因此,在計算效果量之前,要先將學習成效類別、實驗組平均數、實驗組標 準差、對照組平均數、對照組標準差、樣本等資料登入表格之中後再利用統計軟 體計算。

若是研究僅提供 t 值或 F 值及實驗組與對照組的樣本大小,而未提供平均數 或標準差,以致上述的公式無法用來計算 ES 時,可運用統計軟體的轉換鍵盤計 算效果量,公式如下:

𝑔𝑖 = t�𝑛1+ 𝑛2 𝑛1𝑛2

𝑔𝑖 = √𝐹�𝑛1+ 𝑛2 𝑛1𝑛2

上述 t 值與 F 值轉換為效果量的計算公式,其中𝑔𝑖為效果量,𝑛1為實驗組之 樣本數,n2為對照組之樣本數。在求出 ES 後,接著可以求出個別研究之變異數、

標準差,公式如下:

𝜎2 = 𝑛1+ 𝑛2

𝑛1𝑛2 + 𝑑𝑖2 2(𝑛1+ 𝑛2)

然後再以變異數求得個別研究 ES 的 95%信賴區間,公式如下:

𝑑𝑖 − 𝐶𝛼

2𝜎(𝑑𝑖) ≤ 𝛿 ≤ 𝑑𝑖+ 𝐶𝛼

2𝜎(𝑑𝑖)

在求出個別研究之 ES 後,即可依據樣本數進行加權,求得最重要的整體研 究加權 d+值與變異數𝜎(𝑑2+),公式如下:

𝑑+ =

∑ 𝑑𝑖 𝜎(𝑑2𝑖)

𝑘𝑖=1

∑ 1 𝜎(𝑑2𝑖)

𝑘𝑖=1

69 𝜎(𝑑2+) = 1

∑ 1 𝜎(𝑑2𝑖)

𝑘𝑖=1

= 1 𝑇𝑇

最後根據整體研究加權 d+值及σ(𝑑2 +)值求出整體研究的 95%信賴區間,公式 如下:

𝑑𝑖 − 𝐶𝛼

2𝜎(𝑑𝑖) ≤ 𝛿 ≤ 𝑑𝑖+ 𝐶𝛼

2𝜎(𝑑𝑖)

在求出整體研究的信賴區間後,若信賴區間不包含零(信賴區間的上限與下 限皆為正數或者皆為負數),表示實驗組與對照組達顯著差異;反之,若 95%信 賴區間包含零,表示實驗組與對照組未達顯著差異。

玖、同質性檢定

同質性檢定的目的是為了檢驗從搜集到的研究所測得之 ES 是否在相同的構 念下,亦即各研究間所顯示的差異是否源自同一母群體的抽樣誤差。若同質性檢 定結果達顯著差異,即表示這些研究不只因為教學方法造成學習成效的差異,或 許有其它調節變項影響了整體研究,則需進一步分析可能影響整體成效變異的因 素。同質性檢定公式如下:

𝑄 = �(𝑑𝑖− 𝑑+)2 𝜎(𝑑2𝑖)

𝑘

𝑖=1

若同質性檢定達顯著性差異,且調節變項為類別變項,則可採用 Q-Statistics 來檢定哪些調節變項對整體研究有顯著影響。詳細之公式如下

𝑄𝑗 = � 𝑤𝑤𝑠𝑠𝑤𝑤 −(∑ 𝑤𝑤𝑠𝑤)2

∑ 𝑤𝑤

其中,wesj 為每一研究之變異數之倒數乘以每一研究之效果量;wessqj 為每

其中,wesj 為每一研究之變異數之倒數乘以每一研究之效果量;wessqj 為每