第二章 文獻探討
第五節 系統性文獻分析法
(3) 製作(Producing):學生能根據給予的目標,創造出滿足目標描述之產 品,意指學生能執行明確之解決問題方案。
【示例】證明√2 + √3為無理數。
除了六個教育目標之外,修訂版還將教育目標分分成兩部分:知識向度
(knowledge dimension)和認知歷程向度(cognitive process dimension)(Anderson et al, 2001),前者為協助教師區分教什麼(what to teach),後者在促進學生保 留(retention)和遷移(transfer)所習得的知識。
第五節 系統性文獻分析法
近年來,由於證據為本(Evidence-based Practice)的教育理念日益被國內外 的學者重視與推廣,因此應用系統性文獻分析法(Systemic Review)為建立此理 念最佳的方法之一。然而,面對各式各樣的個別研究證據,該如何有效地整合這 些相關研究是相當重要的議題。系統性文獻分析法即能藉由收集、評估以及整合 已存在之研究報告,進而提供實務者做決策之運用(謝進昌,2010)。
一、系統性文獻分析法之歷史演變
系統性文獻分析法之起源可以從 Feldman(1971)所提出的文獻系統性分析 和整合(Systematic reviewing and integrating)之概念開始,其提出四個在分析中 主要的步驟,包括搜尋高度相關文獻程序之策略、文獻整合的問題、整合之功能
以及整合之價值。在醫學領域中,當面對龐大的研究證據時,若使用傳統的敘事 分析則無法將證據做有效的整合,且其傾向著重在研究範圍中的某一小部分而已
,也無明確地說明如何選取相關的研究文獻,所以存在研究者自我偏誤、無法評 估研究論文之品質以及相關研究論文無法做適當的整合等議題(Dixon-Woods et al, 2006;Tranfield, Denyer & Smart, 2003)。Cochrane 合作聯盟(The Cochrane Collaboration)為國際的非營利組織,成立於 1993 年,以建立證據為本的醫學與 健康照顧(Evidence-based Medicine and Health Care)為目的,Cochrane 資料庫
(Cochrane library)提供許多醫學領域相關的研究報告,並且針對各種的醫療介 入之效果做系統性之分析。
然而,經過這幾年的演變,系統性文獻分析法被非醫學領域,例如心理、教 育等社會科學領域的學者效仿,以從事類似的研究工作。在教育領域中系統性分 析組織之發展歷史不長,但有基礎之架構(謝進昌,2010)。西元 1993 年英國 倫敦大學成立 Evidence for Policy and Practice Information and Co-ordinating Centre
(EPPI-Centre),針對一系列的主題進行系統性文獻分析,其領域包含:教育與 社會政策(Education and social policy)、健康促進與公共健康(Health promotion and public health ) 、 國 際 健 康 系 統 與 發 展 ( International health systems and development)以及參與研究與政策(Participative research and policy)等,而其相 關資料皆可在 EPPI-Centre 網站證據資料庫(Evidence library)取得(EPPI-Centre Web Site, 2012)。此外,美國教育部亦於 2002 年成立 What Works Clearinghouse
(WWC),目的為運用客觀的、透明化的標準和程序來系統性分析教育介入的 相關研究之有效性,以及在科學證據上的價值(What Works Clearinghouse, 2011)。
不管是醫學還是社會科學領域,都企圖藉由系統性文獻分析法將累積的相關 研究證據或知識,經由一個嚴謹的、系統性的文獻搜尋、選擇、評論等過程,來 檢視能否有效幫助實務或政策之裁決。Evans 與 Benefield(2001)認為系統性文 獻分析成功地運用在醫學領域上,若能將之適當地引導到教育的情境中運用,可
以將系統性文獻分析之研究視為一種呈現教育實務和政策累積效果的方法。
二、系統性文獻分析法之流程
系統性文獻分析法的過程和相關步驟已發展近十年了,目前在證據為本的實 務中扮演相當重要的角色(Tranfield, Denyer & Smart, 2003)。系統性文獻分析法 不同於傳統的敘事分析(narrative review),其為一個可複製的、科學的、以及 明晰的過程,也就是透過一連串詳細的研究方法,將已出版或未出版的研究論文,
藉由一連串詳盡的搜尋與審核進而做決定、實行程序步驟以及做結論(Tranfield et al, 2003)。不管使用系統性文獻分析法的目的為何,其有以下幾項特徵(Bronson
& Davis, 2011):
1. 企圖搜尋所有相關的研究文獻,包含已出版和未出版的文獻。
2. 從已存在的研究文獻中蒐集資料並將資料做有意義的整合。
3. 為了確定相關研究是否納入,必須清楚並詳細地說明包含和排除之準則。
4. 有明晰的搜尋文獻方法且此方法是可被複製的。
系統性文獻分析法整個流程包含確定研究主題與研究問題、搜尋相關研究論 文、評估研究論文之品質、資料萃取、結果之綜合呈現與詮釋等步驟(Tranfield et al, 2003;Bronson & Davis, 2011),各個步驟之說明如下:
1. 定義研究問題與準備系統性分析計畫表
定義研究問題與發展系統性分析計畫表是相當重要的,因為此會影響到後續 一連串的步驟,像是如何蒐集相關文獻與如何進行分析等等。
(1) 系統性分析之研究問題:
為驅動系統性分析和決定如何進行文獻搜尋,必須定義明確之研究問題。研 究問題除了要符合系統性分析之研究目的,也要注意其範圍不宜太廣泛或太 狹隘,因為太廣泛容易導致搜尋文獻出錯、不易制定文獻的包含或排除標準 以及最後結論描述無法聚焦;太狹隘會導致符合標準的文獻太少,使得最後 綜合的評論是有限的。所以訂定研究問題之前可以實施範圍的分析(Coping
Review)或是系統性之規劃(Systematic Mapping)。
(2) 準備系統性文獻分析之計畫表:
此計畫必須清楚地說明和解釋分析之方法,這份計劃表也表示此分析方法的 可複製程度與最後結果的整體品質。而在進行相關文獻搜尋之前,分析者必 須先清楚地敘述研究問題以說明搜尋文獻之重點,接著確定搜尋文獻的方法 以辨識相關的資訊,並且訂定特定的包含和排除之標準以決定文獻是否該納 入。一旦研究問題的範圍、文獻的搜尋方法、訂定文獻包含和排除之標準後 就完成系統性文獻分析法之計畫。
2. 搜尋相關之研究文獻
在實施相關文獻的搜尋時,使用的搜尋策略應該廣泛,因為有些文獻雖不符 合包含的標準,但卻具有參考的價值。而透過多種且廣泛的搜尋策略以取得相關 文獻,可以降低文獻選擇偏誤(Selection Bias)之影響。此外,在進行文獻搜尋 之前,應具體訂定文獻的包含和排除標準(Inclusion and Exclusion Criteria)以更 能精確搜尋到欲搜尋的相關文獻。
(1) 文獻搜尋策略:
系統性文獻分析法強調使用徹底的搜尋策略(exhaustive search strategy),
無論是已出版或未出版的文獻都是文獻搜尋的範圍。在操作上,先依據研究 主題來列出相關且適當的搜尋字串,再選擇與主題相關的檢索系統或平台。
文獻來源包含:電子資料庫、手動搜尋主要期刊、檢視先前系統性文獻分析 中的參考文獻、訪談領域專家、搜尋灰色文獻(gray literature)。
(2) 文獻之包含和排除準則:
包含和排除準則主要是依據研究目的與研究問題來界定,它們有助於文獻搜 尋,也決定了系統性文獻分析研究的外在效度、可推論性以及介入的策略等 等。除此之外,納入研究分析的文獻之研究設計(準實驗或真實驗設計)、
語言(英文或是其他語言)以及研究時間等也必須清楚界定。
3. 評鑑被包含文獻之品質
若將品質不佳的研究納入會對整合後結果產生不良的影響,而使得整合的結 果呈現無意義或是完全錯誤,所以應該將搜尋到的文獻做品質的評估以避免發生 上述情形。Higgins & Greens(2006)認為沒有任何一項標準可以明確地評斷某 個試驗的真實效度,因為其有限制性,但至少可以依循基本的原則來評估研究的 品質。文獻品質的評估包含:研究方法之內在效度與外在效度以及研究者的可信 度。
4. 資料萃取表
系統性文獻分析法如同將既存的研究資料做第二次分析,在進行分析之前,
應該事先將資料萃取表格設計好(Bronson & Davis, 2011)。資料萃取表具有三 個功能:
(1) 表格可以直接連結要分析的研究問題,計畫整合研究的評估。
(2) 在系統性分析過程中,表格扮演一個歷史紀錄的角色。
(3) 表格內容之資訊是從資料儲存庫( data repository)中來分析。
資料萃取表依據研究的本質進行設計,是具有彈性的。分析者在設計資料萃 取表時應考慮哪些資訊應被納入,而這些資訊將影響後續的資料整合與呈現。資 料萃取表需詳細記錄蒐集到的文獻之各類資訊,包含一般的資訊(例如題目、作 者、期刊以及出版物等等)、研究特徵以及特定的資訊,像是研究情境、研究細 節以及研究法等(Tranfield, Denyer & Smart, 2003)。
5. 資料整合與結果呈現
將從大量且不同的文獻中發現的現象做適當的分類與整合。資料的整合與呈 現方式有敘事分析、後設分析以及最真實的整合方法。分析者應該依據研究的目 的與問題選取最適宜之方法。
三、系統性文獻分析法與後設分析流程圖
為了清楚說明系統性文獻分析法的文獻篩選流程,Moher et al(2009)提出 系統性文獻分析法(Systemic Review)須以 PRISMA(Preferred Reporting Items for Systematic Reviews and Meta-Analyses)流程圖呈現分析過程之資訊,圖 2-2 即為
Moher et al(2009)所提出之文獻在各個階段搜尋流程資訊的示意圖,圖中最上 方的兩個方塊記錄了從資料庫與其他來源共蒐集到的文獻篇數,中間各步驟包含 將重複文獻刪除,接著訂定篩選文獻之準則,將不符合準則之文獻刪除並且清楚 說明刪除之理由,以及評估保留文獻之品質,這些過程必須詳細記錄,最後則是 將保留之文獻做綜合彙整。
圖 2- 2 系統性文獻分析之不同階段資訊之流程(Flow of information through the different phases of a systematic review. (Moher et al))
Gough, Oliver & Thomas(2012)將 Moher 等人所提出的 PRISMA diagram 用 另一種方式呈現,如圖 2-3 所示,雖然呈現圖的方式不盡相同,但一樣可清楚知
Gough, Oliver & Thomas(2012)將 Moher 等人所提出的 PRISMA diagram 用 另一種方式呈現,如圖 2-3 所示,雖然呈現圖的方式不盡相同,但一樣可清楚知