• 沒有找到結果。

第三章 研究方法

第四節 研究工具

壹、個人資料

一、性別:分為男性及女性,共二個項選項。

二、年級:分為七年級、八年級及九年級,共三項選項。

三、精通外語數量:分為無、一種、二種、三種以上,共四個選項。

四、外語溝通能力:分為流暢、稍能理解、完全無法溝通,共三個選項。

五、出國頻率:分為從來沒有、幾年1次、每年1次、每年2次以上,共四個選 項。

六、接觸國際新聞頻率:分為幾乎不接觸、每週1~2次、每週3~4次、幾乎每天 接觸,共四個選項。

七、父母親教育程度:分為不識字、未上學但識字、小學畢業或肄業、國中畢 業或肄業、高中職畢業或肄業、專科畢業或肄業、大學畢業或肄業、研究 所以上,共八個選項。

八、父母親職業:分為非技術性工人、技術性工人、半專業人員、專業人員、

及高級專業人員,共五個選項。

貳、問卷內容

一、世界公民知識測驗

(一)測驗編製

本測驗旨在探討國中學生的世界公民知識之現況,依據文獻探討之結 果,以世界公民知識內涵之四大主類目:「全球關連體系」、「全球性議題」、

「跨文化理解」、以及「全球史地」為編製測驗題的主要架構。試題編製除 參考簡妙娟(1991)、樊德慧(2005)、易安邦(2006)、高振擇(2007)

等所設計的相關研究工具外,亦參酌現行國中社會領域能力指標與康軒、南 一、翰林等版本的課程內容,更兼及以社會領域為主,其他領域為輔的時事

議題,並以研究者本身教學實務經驗為基礎,篩選出符合國中生程度的初稿 試題共36題(詳見附錄二)。初稿完成後與指導教授多次討論,再請專家學 者提供意見,以進行專家效度之鑑定。在參考專家學者的意見作適度修正 後,預試問卷的內容便告完成,如表3-4-2所示,隨即進行預試問卷施測,並 依據預試的結果,將預試問卷的內容再次調整,正式問卷即編製完成。

(二)測驗初稿內容

本研究所編製之「世界公民知識測驗」初稿試題計有36題,包括「全球 關連體系」、「全球性議題」、「跨文化理解」、以及「世界史地」四個主 類目,與其所屬的12個次類目,如表3-4-1所示:

表 3-4-1 世界公民知識測驗初稿試題各主類目題項分布情形

主類目 次類目 題號 題數

全球關連體系 包含政治與經濟體系 1、2、3、4、5、6 6

全球性議題 包含科技、人權、種族、

能源與糧食、生態環 境、戰爭與和平等六方 面

7、8、9、10、11、12、13、14、15、

16、17、18、19、20、21、22、23

17

跨文化理解 包含文化與宗教 24、25、26、27、28、29 6

世界史地 包含全球歷史與全球地

30、31、32、33、34、35、36 7

總計 36

(三)填答及計分方式

本量表採用選擇題方式,每題均有四個選項,受試者依個人對全球的了 解程度,從中選出最恰當的答案。計分方式則參照標準答案計分,答對者該 題得 1 分,答錯者該題得 0 分,總分採累加方式計算,滿分為 25 分。得分 愈高者表示對全球事務的瞭解程度愈佳。

(四)專家效度

本研究之世界公民知識測驗初稿共36題,採「適合」、「修改後適合」、

「不適合應刪除」三項修改意見,為確實掌握本問卷的可靠效度,敦請專家 學者及現職公民科教師填答「專家效度評定卷」,以協助鑑定題意是否與各 類目相符合,並提供修正意見,專家名單如表3-4-2。再將專家的意見加以彙

整統計後,若該題被評定「適合」、「修改後適合」的比例合計達80%以上,

則將該題列為預試問卷內容,反之則剔除,依此標準經專家效度後刪除6題,

再與指導教授討論修改專家意見為「修改後適合」的文字敘述,在題號排列 上也重新調整以符合其邏輯與順序,依此標準編成預試問卷,研究者將專家 對問卷初稿之修正意見及其處理情形整理如附錄二。

表 3-4-2 專家效度名單(依姓氏筆畫排序)

姓名 服務單位 研究專長

王錦雀 國立臺灣師範大學公民教育與活動領導系副教授 政治學

公民資質理論

呂秋萍 台北縣立中山國民中學公民教師 公民教學

洪泉湖 私立元智大學社會暨政策科學學系教授 多元文化教育

公民教育

黃乃熒 國立臺灣師範大學教育政策與行政研究所教授 教育行政

教育行政哲學

陳珊華 國立嘉義大學教育行政與政策發展研究所副教授 教育社會學

多元文化教育

(五)預試分析

本研究採用難度與鑑別度指數進行項目分析,依極端組比較法的分析程 序,將預試樣本的知識總分依最高與最低的 27%為高分組與低分組,取得兩 組的百分比,將兩組的兩個百分比數字求取平均值得到難度指數;將兩組的 兩個百分比數字相減得到鑑別度指數。

根據 Ebel 與 Frisbie 指出,難度指數以 .50 為佳,鑑別度高低的評鑑標 準, .400 以上為非常好的題目; .300 以上為合理可用的題目,可能需細部 修正; .200 以上為邊緣題目,通常須大幅修改; .200 以下為不好的題目,

須淘汰或重新修改(引自王保進,2002)。

因此本研究對於鑑別度指數在 .200 以下的題目,予以剔除,並針對 .200 與 .400 之間的題目進行修改。本研究之世界公民知識預試測驗剔除的 題目為第 2、6、26、29、30 題,共剔除 5 題,完成世界公民知識測驗問卷 之最後正式問卷試題,計有 25 題,如表 3-4-3。

表 3-4-3 世界公民知識測驗項目分析結果

(續)表 3-4-3

(六)正試測驗內容

依據預試分析結果,剔除 5 題鑑別度低於 .200 的題目後,本研究世界 公民知識測驗正式測驗題共 25 題,其內容分為四大主類目及其所屬次類目 之題號如表 3-4-4 所示:

表 3-4-4 世界公民知識測驗正式測驗題內涵

主類目 次類目 題號 題數

全球關連體系 包含政治與經濟體系 1、2、3、4、5 5

全球性議題 包含科技、人權、種族、

能源與糧食、生態環 境、戰爭與和平等六方 面

6、7、8、9、10、11、12、13、14、

15

10

跨文化理解 包含文化與宗教 16、17、18、19、20、21 6

世界史地 包含全球歷史與全球地

22、23、24、25 4

總計 25

二、世界公民態度量表

(一)量表編製

本量表之編製主要參考國內外已有之態度量表,依據文獻探討所架構出的 層面,而後依研究所需自行編製而成。為期試題之代表性,具有內容效度。實 施專家效度,篩選出符合國中生程度的預試問卷,再請數位國中生進行試答,

根據試答結果稍加修正。研究者參考之相關量表如下列:

1. 簡妙娟(1991)在「臺北市國中學生之世界知識與態度」之研究參考Samson

& Smith(1957)「世界胸懷量表」、Armstrong(1979)「世界胸懷量 表」及美國測驗服務社(ETS,1981)「大學生知識與信念—全球瞭解 之調查」後,加以編製共29道題目,以探討國中生世界態度;其Cronbach α係數各為.85,符合量表之信度要求。

2. Clarisse(2006)在「巴西與美國12-17歲學生世界公民素養調查」之研究,

編製12道世界公民態度的題目,其Cronbach α係數各為.721,符合量表之 信度要求。

3. 蔡幼倫(2007)在「國中教師世界觀教學之相關研究」參考簡妙娟(1991)

世界態度量表,並加以編製共21道題目,其Cronbach α係數各為.8699,

符合量表之信度要求。

4. 高振擇(2007)在「國中學生全球知識與態度」之研究參考Sampson 與 Smith(1957)、Petrie(1988)、簡妙娟(1991)、郭金水等(1994)、

沈坤宏(1995)、鍾娟兒與陳坤德(2000)、樊德慧(2005)、以及楊 雅鈴(2002)等所設計的相關研究工具,同時配合國內外實際情況,編 製37道題目,其Cronbach α係數各為.9185,符合量表之信度要求。

(二)量表初稿內容

本研究所編製之「世界公民態度」初稿試題計有32題,內容包括:「維 護世界正義」、「重視生命與人權」、「尊重文化差異」、「關懷生態環境」

及「具世界公民責任」五個層面,如表3-4-5所示。為提昇本量表的效度,敦 請專家學者及現職公民科教師填答「專家校度評定卷」,採「適合」、「修 改後適合」、「不適合應刪除」三項修改意見,以協助鑑定題意是否與各層 面相符合,並提供修正意見。再將專家的意見加以彙整統計後,若該題被評 定「適合」、「修改後適合」的比例合計達80%,則將該題列為預試問卷內 容,反之則剔除,依此標準共剔除7題。再與指導教授討論修改專家意見為

「修改後適合」的文字敘述,在題號排列上也重新調整以符合其邏輯與順 序,依此標準編成預試問卷,研究者將專家對問卷初稿之修正意見及其處理 情形整理如附錄二。

表 3-4-5 世界公民態度量表初稿試題各層面題項分布情形

層面 題號 題數

維護世界正義 1、2、3、4、5、6 6

重視生命與人權 7、8、9、10、11、12 6

尊重文化差異 13、14、15、16、17、18、(19) 7

關懷生態環境 20、21、22、(23)、24、25、26 7

具世界公民責任 27、28、29、30、(31)、32 6

總計 32

註:( )為反向題

(三)填答及計分方式

本量表採李克特(Likert)式五點量表,請受試者就題目內容與自己的看 法,從「非常同意」、「同意」、「沒意見」、「不同意」、及「非常不同意」

等五選項中勾選一項。若屬正向題,其計分方式分別給予5、4、3、2 與1分;

若為反向題,其計分依次為1、2、3、4與5分。本量表共計20題,單題總分為5 分,總量表滿分100分。

(四)預試分析

本研究將預試問卷蒐集之資料,利用 SPSS for Microsoft Windows 統計軟 體 17.0 版電腦套裝軟體程式,進行資料的統計分析,透過項目分析,因素分 析建構問卷之效度,並以 Cronbach's α 做為信度之考驗。

1. 項目分析

問卷預試完成後,根據樣本填答的資料分別就研究者所擬定的研究類 目,進行「項目分析」,採用以下四種方式作為選題標準之依據:

(1) 極端組比較法:將填答者世界公民態度量表的得分,由高至低排 列,取得分最高的 27%為高分組,而得分最低的 27%為低分組;繼 而進行高低分組在各題項得分平均數的 t 考驗,以求其決斷值 (critical ratio,CR) 之後,將 t 值未達顯著水準(p< .05)或 t 值小於 3.0 的題項刪除。

(2) 同質性檢驗一:計算預試量表每個題項與總分之間的相關係數,

採分層面執行檢驗,凡相關係數小於 .30 或未達顯著水準(p< .05) 者,即予以剔除。

(3) 同質性檢驗二:信度檢驗。

(4) 同質性檢驗三:採因素分析法之因素負荷量,分層面執行檢驗,

凡因素負荷量小於 .60 者,即予以剔除。

根據項目分析的結果,如表3-4-6,將第7、9、15、19、25題等5題未 達選題標準,均予以刪除。

表 3-4-6 世界公民態度量表項目分析結果

2. 信度分析

本研究之世界公民態度量表經項目分析、因素分析後所保留之題項,

採用「內部一致性分析法」進行信度分析,以Cronbach α值考驗問卷的內 部一致性。求得Cronbach α值如表3-4-7所示,顯示各層面的Cronbach α值分 別為 .733、 .646、 .744、 .713、 .725,整體問卷Cronbach α值為 .889。