第三章 研究方法
第四節 研究工具
壹、個人資料
一、性別:分為男性及女性,共二個項選項。
二、年級:分為七年級、八年級及九年級,共三項選項。
三、精通外語數量:分為無、一種、二種、三種以上,共四個選項。
四、外語溝通能力:分為流暢、稍能理解、完全無法溝通,共三個選項。
五、出國頻率:分為從來沒有、幾年1次、每年1次、每年2次以上,共四個選 項。
六、接觸國際新聞頻率:分為幾乎不接觸、每週1~2次、每週3~4次、幾乎每天 接觸,共四個選項。
七、父母親教育程度:分為不識字、未上學但識字、小學畢業或肄業、國中畢 業或肄業、高中職畢業或肄業、專科畢業或肄業、大學畢業或肄業、研究 所以上,共八個選項。
八、父母親職業:分為非技術性工人、技術性工人、半專業人員、專業人員、
及高級專業人員,共五個選項。
貳、問卷內容
一、世界公民知識測驗
(一)測驗編製
本測驗旨在探討國中學生的世界公民知識之現況,依據文獻探討之結 果,以世界公民知識內涵之四大主類目:「全球關連體系」、「全球性議題」、
「跨文化理解」、以及「全球史地」為編製測驗題的主要架構。試題編製除 參考簡妙娟(1991)、樊德慧(2005)、易安邦(2006)、高振擇(2007)
等所設計的相關研究工具外,亦參酌現行國中社會領域能力指標與康軒、南 一、翰林等版本的課程內容,更兼及以社會領域為主,其他領域為輔的時事
議題,並以研究者本身教學實務經驗為基礎,篩選出符合國中生程度的初稿 試題共36題(詳見附錄二)。初稿完成後與指導教授多次討論,再請專家學 者提供意見,以進行專家效度之鑑定。在參考專家學者的意見作適度修正 後,預試問卷的內容便告完成,如表3-4-2所示,隨即進行預試問卷施測,並 依據預試的結果,將預試問卷的內容再次調整,正式問卷即編製完成。
(二)測驗初稿內容
本研究所編製之「世界公民知識測驗」初稿試題計有36題,包括「全球 關連體系」、「全球性議題」、「跨文化理解」、以及「世界史地」四個主 類目,與其所屬的12個次類目,如表3-4-1所示:
表 3-4-1 世界公民知識測驗初稿試題各主類目題項分布情形
主類目 次類目 題號 題數
全球關連體系 包含政治與經濟體系 1、2、3、4、5、6 6
全球性議題 包含科技、人權、種族、
能源與糧食、生態環 境、戰爭與和平等六方 面
7、8、9、10、11、12、13、14、15、
16、17、18、19、20、21、22、23
17
跨文化理解 包含文化與宗教 24、25、26、27、28、29 6
世界史地 包含全球歷史與全球地
理
30、31、32、33、34、35、36 7
總計 36
(三)填答及計分方式
本量表採用選擇題方式,每題均有四個選項,受試者依個人對全球的了 解程度,從中選出最恰當的答案。計分方式則參照標準答案計分,答對者該 題得 1 分,答錯者該題得 0 分,總分採累加方式計算,滿分為 25 分。得分 愈高者表示對全球事務的瞭解程度愈佳。
(四)專家效度
本研究之世界公民知識測驗初稿共36題,採「適合」、「修改後適合」、
「不適合應刪除」三項修改意見,為確實掌握本問卷的可靠效度,敦請專家 學者及現職公民科教師填答「專家效度評定卷」,以協助鑑定題意是否與各 類目相符合,並提供修正意見,專家名單如表3-4-2。再將專家的意見加以彙
整統計後,若該題被評定「適合」、「修改後適合」的比例合計達80%以上,
則將該題列為預試問卷內容,反之則剔除,依此標準經專家效度後刪除6題,
再與指導教授討論修改專家意見為「修改後適合」的文字敘述,在題號排列 上也重新調整以符合其邏輯與順序,依此標準編成預試問卷,研究者將專家 對問卷初稿之修正意見及其處理情形整理如附錄二。
表 3-4-2 專家效度名單(依姓氏筆畫排序)
姓名 服務單位 研究專長
王錦雀 國立臺灣師範大學公民教育與活動領導系副教授 政治學
公民資質理論
呂秋萍 台北縣立中山國民中學公民教師 公民教學
洪泉湖 私立元智大學社會暨政策科學學系教授 多元文化教育
公民教育
黃乃熒 國立臺灣師範大學教育政策與行政研究所教授 教育行政
教育行政哲學
陳珊華 國立嘉義大學教育行政與政策發展研究所副教授 教育社會學
多元文化教育
(五)預試分析
本研究採用難度與鑑別度指數進行項目分析,依極端組比較法的分析程 序,將預試樣本的知識總分依最高與最低的 27%為高分組與低分組,取得兩 組的百分比,將兩組的兩個百分比數字求取平均值得到難度指數;將兩組的 兩個百分比數字相減得到鑑別度指數。
根據 Ebel 與 Frisbie 指出,難度指數以 .50 為佳,鑑別度高低的評鑑標 準, .400 以上為非常好的題目; .300 以上為合理可用的題目,可能需細部 修正; .200 以上為邊緣題目,通常須大幅修改; .200 以下為不好的題目,
須淘汰或重新修改(引自王保進,2002)。
因此本研究對於鑑別度指數在 .200 以下的題目,予以剔除,並針對 .200 與 .400 之間的題目進行修改。本研究之世界公民知識預試測驗剔除的 題目為第 2、6、26、29、30 題,共剔除 5 題,完成世界公民知識測驗問卷 之最後正式問卷試題,計有 25 題,如表 3-4-3。
表 3-4-3 世界公民知識測驗項目分析結果
(續)表 3-4-3
(六)正試測驗內容
依據預試分析結果,剔除 5 題鑑別度低於 .200 的題目後,本研究世界 公民知識測驗正式測驗題共 25 題,其內容分為四大主類目及其所屬次類目 之題號如表 3-4-4 所示:
表 3-4-4 世界公民知識測驗正式測驗題內涵
主類目 次類目 題號 題數
全球關連體系 包含政治與經濟體系 1、2、3、4、5 5
全球性議題 包含科技、人權、種族、
能源與糧食、生態環 境、戰爭與和平等六方 面
6、7、8、9、10、11、12、13、14、
15
10
跨文化理解 包含文化與宗教 16、17、18、19、20、21 6
世界史地 包含全球歷史與全球地
理
22、23、24、25 4
總計 25
二、世界公民態度量表
(一)量表編製
本量表之編製主要參考國內外已有之態度量表,依據文獻探討所架構出的 層面,而後依研究所需自行編製而成。為期試題之代表性,具有內容效度。實 施專家效度,篩選出符合國中生程度的預試問卷,再請數位國中生進行試答,
根據試答結果稍加修正。研究者參考之相關量表如下列:
1. 簡妙娟(1991)在「臺北市國中學生之世界知識與態度」之研究參考Samson
& Smith(1957)「世界胸懷量表」、Armstrong(1979)「世界胸懷量 表」及美國測驗服務社(ETS,1981)「大學生知識與信念—全球瞭解 之調查」後,加以編製共29道題目,以探討國中生世界態度;其Cronbach α係數各為.85,符合量表之信度要求。
2. Clarisse(2006)在「巴西與美國12-17歲學生世界公民素養調查」之研究,
編製12道世界公民態度的題目,其Cronbach α係數各為.721,符合量表之 信度要求。
3. 蔡幼倫(2007)在「國中教師世界觀教學之相關研究」參考簡妙娟(1991)
世界態度量表,並加以編製共21道題目,其Cronbach α係數各為.8699,
符合量表之信度要求。
4. 高振擇(2007)在「國中學生全球知識與態度」之研究參考Sampson 與 Smith(1957)、Petrie(1988)、簡妙娟(1991)、郭金水等(1994)、
沈坤宏(1995)、鍾娟兒與陳坤德(2000)、樊德慧(2005)、以及楊 雅鈴(2002)等所設計的相關研究工具,同時配合國內外實際情況,編 製37道題目,其Cronbach α係數各為.9185,符合量表之信度要求。
(二)量表初稿內容
本研究所編製之「世界公民態度」初稿試題計有32題,內容包括:「維 護世界正義」、「重視生命與人權」、「尊重文化差異」、「關懷生態環境」
及「具世界公民責任」五個層面,如表3-4-5所示。為提昇本量表的效度,敦 請專家學者及現職公民科教師填答「專家校度評定卷」,採「適合」、「修 改後適合」、「不適合應刪除」三項修改意見,以協助鑑定題意是否與各層 面相符合,並提供修正意見。再將專家的意見加以彙整統計後,若該題被評 定「適合」、「修改後適合」的比例合計達80%,則將該題列為預試問卷內 容,反之則剔除,依此標準共剔除7題。再與指導教授討論修改專家意見為
「修改後適合」的文字敘述,在題號排列上也重新調整以符合其邏輯與順 序,依此標準編成預試問卷,研究者將專家對問卷初稿之修正意見及其處理 情形整理如附錄二。
表 3-4-5 世界公民態度量表初稿試題各層面題項分布情形
層面 題號 題數
維護世界正義 1、2、3、4、5、6 6
重視生命與人權 7、8、9、10、11、12 6
尊重文化差異 13、14、15、16、17、18、(19) 7
關懷生態環境 20、21、22、(23)、24、25、26 7
具世界公民責任 27、28、29、30、(31)、32 6
總計 32
註:( )為反向題
(三)填答及計分方式
本量表採李克特(Likert)式五點量表,請受試者就題目內容與自己的看 法,從「非常同意」、「同意」、「沒意見」、「不同意」、及「非常不同意」
等五選項中勾選一項。若屬正向題,其計分方式分別給予5、4、3、2 與1分;
若為反向題,其計分依次為1、2、3、4與5分。本量表共計20題,單題總分為5 分,總量表滿分100分。
(四)預試分析
本研究將預試問卷蒐集之資料,利用 SPSS for Microsoft Windows 統計軟 體 17.0 版電腦套裝軟體程式,進行資料的統計分析,透過項目分析,因素分 析建構問卷之效度,並以 Cronbach's α 做為信度之考驗。
1. 項目分析
問卷預試完成後,根據樣本填答的資料分別就研究者所擬定的研究類 目,進行「項目分析」,採用以下四種方式作為選題標準之依據:
(1) 極端組比較法:將填答者世界公民態度量表的得分,由高至低排 列,取得分最高的 27%為高分組,而得分最低的 27%為低分組;繼 而進行高低分組在各題項得分平均數的 t 考驗,以求其決斷值 (critical ratio,CR) 之後,將 t 值未達顯著水準(p< .05)或 t 值小於 3.0 的題項刪除。
(2) 同質性檢驗一:計算預試量表每個題項與總分之間的相關係數,
採分層面執行檢驗,凡相關係數小於 .30 或未達顯著水準(p< .05) 者,即予以剔除。
(3) 同質性檢驗二:信度檢驗。
(4) 同質性檢驗三:採因素分析法之因素負荷量,分層面執行檢驗,
凡因素負荷量小於 .60 者,即予以剔除。
根據項目分析的結果,如表3-4-6,將第7、9、15、19、25題等5題未 達選題標準,均予以刪除。
表 3-4-6 世界公民態度量表項目分析結果
2. 信度分析
本研究之世界公民態度量表經項目分析、因素分析後所保留之題項,
採用「內部一致性分析法」進行信度分析,以Cronbach α值考驗問卷的內 部一致性。求得Cronbach α值如表3-4-7所示,顯示各層面的Cronbach α值分 別為 .733、 .646、 .744、 .713、 .725,整體問卷Cronbach α值為 .889。