信度與效度

本節說明本研究之信度與效度之檢測，本研究採取評分者信度與專家效度，

以下針對信度與效度檢測實施之情形，一一說明。

一、信度

內容分析法中的信度係指研究者在分析內容分析之類目及分析單位時，是否 能將內容歸入同樣的項目中，並使所得結果一致，倘若一致性越高，內容分析的 信度也就越高，反之，若一致性越低，則內容分析的信度就越低。換言之，信度 會影響研究結果。

而在教育大辭書中對於「評分者信度」的解釋為：有些測驗的評分會受到評 分者主觀判斷的影響，如創造思考測驗、論文式測驗、投射測驗等。因此有必要 提供評分者間的評分者信度，以做為使用者的參考；評分者信度的計算方法，是 從測驗卷中抽取一些樣本，由兩位或兩位以上評分者對每一分試卷評分，然後根 據所評的分數求相關，求得的相關係數就是評分者信度（朱經明，2012）。

為使研究更具信度，本研究擬採「評分者信度」做為信度檢測之方式，透過 求取兩個以上的分析者在相同時間點上之分析結果相互比較，來進行信度檢測。

（一）評分者

本研究除研究者本身以外，擬再邀請兩位現任職於臺中市國中之專任英語教 師作為評分者，加上研究者共三位評分者，兩位現職教師均為外文系畢業，且均 完成碩士學位之進修，並具備多年國中英語教學資歷，對於現行九年一貫國中英 語課程綱要及英語專業認知上應有足夠的認識，可以讓本研究更具信度。

（二）信度檢測步驟

(三) 評分者信度實施之情形

研究者與另兩位評分者依據本研究之漫畫內容分析類目表進行分析，樣本為 A 版第一冊第三課、B 版第五冊第五課及 C 版第三冊第一課。而根據研究者與兩位 評分者針對漫畫內容分析類目隻分析結果，依照評分者信度公式所得之評分者信 度如表 3-6 所示。

表 3-6

漫畫內容分析類目之評分者信度一覽表

評分者 評分者 A 評分者 B

評分者 B 0.72

研究者 0.77 0.72

評分者信度 0.90

>0.8 達高水準

資料來源：研究者自行整理。

二、效度

效度係指研究的準確性和真實性，可分為下列三種：1. 內容效度；2. 效標效 度；3. 構念效度。其中，內容效度指的是測驗題目對有關內容取樣的適當性，此 種衡量效度的方法，必須根據課程目標及內容，以邏輯性思考方式分析題目是否 能達成所想要詢問之目標。

本研究之漫畫內容分析類目表，為研究者於閱讀相關文獻、理論、及九年一 貫課程綱要與教科書評選規準後，自行歸納編製而成。為使研究更具效度，在效 度檢驗方面，本研究採取專家效度，邀請兩位具有英語專長並任職於大學之專家 學者，針對分析量表之類目編定提出建議，並依其建議進行本研究分析量表之修 正。

表 3-7

國中英語教科書中漫畫內容分析之專家學者效度表

專家學者 專長領域 現職

教授 A 英語 國立臺灣師範大學英語系教授 教授 B 英語 國立臺灣師範大學英語系教授 資料來源：研究者自行整理。

本研究中之漫畫內容分析類目表，為研究者自行編製而成，將類目表分成圖 像與文字兩大部分，後在進行專家效度檢驗時，經由專家建議，原先「版面配置」

及「色彩」兩大類目挪至圖像部分進行討論，並且將原本隸屬於「版面配置」裡 頭的「圖文搭配合宜」另外抽出成為單一類目放至文字部分進行分析，而因「多 元化」與「多元文化」判斷標準不明確易混淆，故將「多元化」合併進「趣味性」

類目，形成「主題趣味多元」此一類目。