第三章 研究方法
第四節 研究工具之設計及實施
本研究依不同學習階段的素養指標分為:幼兒園、國小低、中、高年 級、國中、高中職、大學(一般)、大學(專業)及國中小教師等九個階段,
共發展9種問卷。完成之問卷還需防災技術及教育專家(表3-5)審查修正通 過,本研究初步發展成9份問卷,邀請坡地防災素養題庫審題專家其進行 審查、彙整及修正意見(詳見附件六,以第三次專家審查為例)。
其次,再經過二次預試,每次預試都要檢視其信度、難度、鑑別度;
若不合於規範,必須修正各試題,直到合於規範範圍才能成為正式施測問 卷(詳見附件三),方能進行後續全國性大規模師生防災素養檢測;並根據 檢測結果建立成全國性防災素養常模。
本研究計畫之坡地防災素養檢測系統,主要針對我國目前推行坡地防 災教育對象,以各年段學生學生及中、小學教師進行坡地防災素養檢測,
進行全國性的施測,並從中獲得相關數據,以了解目前推動坡地防災教育 之成果是否達到預先設定目標。計畫推動建立全國性坡地防災素養常模,
並施以標準化評量,了解坡地防災教育推動實際成效為何,並規劃101年 後未來全國常態性坡地防災素養檢測模式,未來可做為政府相關單位制定 未來坡地防災政策參考
本研究為廣泛測知師生所具備的坡地防災素養檢測之通過率,故以 表 3-5 坡地防災素養題庫審題專家名單
專長災害領域 姓名 職稱 服務單位
坡地災害
游繁結 教授 國立中興大學水土保持系 陳建元 教授 國立嘉義大學土木與水資源工程
學系
單信瑜 教授 國立交通大學土木工程系
難度指數 0.20-0.85,鑑別度為 0.25 以上,信度為 0.7 以上為試題挑選 標準,試題鑑別度指數之評鑑標準請見表 3-6,其說明如下:
一.難度、鑑別度、信度計算方式
(一)難度(P 值)計算方式
以全體受試者通過某題人數的百分比求得,題目越容易,通過的百 分比越高。本研究知識題以全體受試者通過某題的百分比求得,而態度及 技能量表是以勾選「同意」以上(五等第 4 分以上)視為通過(即得分),依次 為通過人數之百分比計算。難度的計算公式如下:
B
P AX100%
P:難度指數
A: 該題答對人數
B:全體受測者,而態度及技能則是指五等第 4 分以上的人 數和。
(二)鑑別度(D 值)計算方式
計算方式如下:將受試者分為三組,得分最前面的 27%為高分組 (U
P ),得分最後面的 27%為低分組(L P ),中間組則佔 46%,難度的計算
公式如下:
U L D UP P
D:鑑別度指數。
U P
:高分組通過某一題目的人數。L P
:低分組通過某一題目的人數。U:高分組總人數。
(三)題目信度分析
本研究在計算題目之難度及鑑別度,並據以篩選試題後,皆會請專 家進行內容效度審查;且進行內部一致性信度Cronbachα係數運算,以檢 視試題之信度,Cronbachα值達0.7以上,即達到預試信度的標準。第二 次預試九份問卷之
Cronbach
α值如下:幼兒園0.646、國小低年級0.757、國小中年級0.773、國小高年級0.820、國中0.873、高中0.771、大學(一 般)0.869、大學(專業)0.900、中小學教師0.885,除了幼兒園稍差之外,
其餘年段皆在標準值0.7以上。
二.問卷架構及計分方式
本研究使用的研究工具為自編之「坡地防災素養標準化評量問卷」。
問卷內容依序為「坡地防災知識」、「坡地防災態度」、「坡地防災技能」及
「個人基本資料」四個項目。問卷內容編製過程茲分為下列說明:
(一) 防災知識選擇題
坡地防災的知識,以四選一之選擇題的型式進行編寫,且對應於坡地 防災知識內涵,而國小低年級之問卷因考量該階段學生的理解與判斷能 力,改採三選一的選擇題型式。幼稚園文字認識不多或完全不認識具採二 選一的選擇題型式卷,主要以圖像為主,每題僅有一個正確答案,計分方 式為答對了給「1」分,答錯則以「0」分計算。
(二) 防災態度、技能題
態度與技能題的填答方式一樣,皆採採取李克特式(Likert-type)五 點量表,每題均有五個選項,態度題以受測者對問題同意的程度分為「非 常同意」、「同意」、「普通」、「不同意」、「非常不同意」五種選項,依作答
表 3-6 試題鑑別度指數之評鑑標準
鑑別度指數(
D
) 鑑別度之評鑑 .40 以上 非常優良.30~.39 優良,如能再改進則更佳 .20~.29 尚可,仍須再改進
.19 以下 劣,必須淘汰或再修改
(引自陳英豪、吳裕益,2003)
情形依序給予 5、4、3、2、1 分。技能題則以受測者依自己所能做到題目 中所提之行為的程度,勾選「非常能夠做到」、「能夠做到」、「普通」、「不 能做到」、「非常不能做到」其中一個符合自己狀況的選項,計分方式與態 度題相同,依序為 5 至 1 分,反向題則予以反向記分方式處理,唯幼兒園 階段因考量幼兒心理及發展程度改採三點量表的形式。
(三) 個人基本資料
基本資料的調查依受測者身分之不同,內容也略有所不同,但大致上 皆包含以下幾個項目:
1.學校所在地縣市名稱
2.學校所在地類型(都市、市郊、鄉村/山區、海邊、平地)
3.居住地是否鄰近核電廠
4.性別
5.學生學習階段或系所類組
6.課業指導者學歷
7.災害知識獲得管道
8.災害經驗
9.任教年資/職務/任教領域(中小學教師)
(四) 正式施測
本研究正式施測之對象以「101年度校園師生防災素養檢測計畫」內 選定之各年段學生(包含:幼兒、國小低、中、高年級、國中、高中、大 學學生)及中小學教師為母群體,並從中依比例分層抽樣進行施測。依研 究目的需求,國小、國中師生及高中職學生在抽測前,須先將抽測名單依 是否參與校園防災教育計畫分為兩類,再依比例抽測。
正式施測時,將以班級為單位進行施測。施測學校選定後,研究者先 以電話連繫該校負責人,再委由班級導師擔任施測人員,並將施測說明及 相關注意事項隨同問卷寄予施測人員(一人一份),力求每個班級的施測程 序皆能標準化。施測說明內容包含 1.施測時間長度,2.指導語說明,3.各
大題作答方式,4.作答時的注意事項。
(五) 信度驗證及建立全國性常模(norm)建立:
正式施測問卷回收整理、資料輸入完畢後,以 Cronbachα係數進行 內部一致性信度檢驗,檢視問卷信度是否≧0.6。接著統計各年段學生師 生問卷之原始總分,再利用百分等級、Z 分數、T 分數建立全國性常模對 照表,以討論施測結果。常模衍生分數計算公式如下
1.百分等級(percentile ranks):
2.Z 分數
Z X SD - M
X:原始分數
M:原始分數的平均值 SD:標準差
3.T 分數:Z 分數進行線性轉換後即為 T 分數 T=10Z+50