第四章 結果與討論
第一節 坡地防災素養問卷之建置
一、本研究發展坡地防災標準化問卷之素養依據
本研討建置坡地防災素養問卷主要依林明瑞(101年)新研修之101年 度防災素養指標(防災素養請見附錄二)為依據，再參照歷年防災素養檢 測之問卷、教育部九年一貫科技防災網站內容中(教育部，2000)、農委 會土石流防災資訊網(農委會土石流防災資訊網全球資訊網，2012)、97 年度「防災教育深耕實驗研發計畫」之師生防災素養檢測計畫中之防災 素養題庫(葉欣誠，2008)，及98年葉欣誠教授及劉湘瑤教授等人所建立 之防災素養題庫進行分析(葉欣誠等人，2008)，並彙整全球暖化(倪宏 坤，2006；林明賢，2006；幙英智，2006)、氣候變遷所引發的極端氣候及 複合式災難(黃文玲，2010年)等全球變遷(黃建峯，國教新知，2011)相 關文獻，融入新的防災素養概念納入題庫中(葉欣誠，2008)，期間增加 目前我國政府單位正在全國各級學校中大力推行之家庭防災卡(防災教育
數位平台，2010)，與1991網路留言平臺(內政部消防署1991報平安網，
2010)等相關防災教育議題，而發展出八年段學生及中小學教師標準化坡 地防災問卷。
二、本研究發展的坡地防災問卷流程如下
本研究針對各學習階段防災素養指標作修訂，並發展出不同學習階段 的防災素養架構，而不同學習階段依序為(1)幼兒園、(2) 國民小學1~2 年級、(3) 國民小學3~4 年級、(4) 國民小學5~6 年級、(5) 國民中 學，(6) 高級中學、高級職校、(7) 大學、大專院校(一般性防災素養) 及(8) 大學、大專院校(專業性防災素養)、(9)中小學教師等共九個學習 階段發展九種標準化問卷。
針對原各防災素養指標內涵及用詞遣字不合宜之處進行修正。最 後，經防災技術、防災教育、素養指標的專家共8位(表2-11)審查修正通 過。初步發展成第一次預試坡地防災素養問卷，共分成各年段學生及國 中、小教師共9種問卷，並邀請坡地防災技術專家、教育專家庫審題專家 如表4-1，進行問卷審查、逐一檢視各題用字遣詞、詞彙及內容否有符合 101坡地防災素養指標內容，直到專家修正完畢後符合效度試題，始得進 行第一次坡地防災預試。而其發展流程如圖4-1所示
圖 4-1 坡地防災問卷發展流程圖
三、第一次坡地防災問卷專家審查
依 101 年度坡地防災素養指標為依據，編製好各年段初步問卷，其 產生過程為首先經指導教授林明瑞教授逐題審查，再加上本研究計畫組 成之防災小組五位研究生，大家多次共同討論，每二星期聚會一次，就 彼此問卷逐一審查相互交流，集思廣益，檢視各題用字遣詞、詞彙及內 容是否有符合各年段學生及中小學教師需求，若語字不通順者逐一改 正，直到發展出八個年段及中小學教師之坡地防災標準化初版問卷，第 一次專家書面審查為 102 年 3 月中旬，而發展出第一次坡地防災素養評 量預試問卷試題。
四、坡地防災標準化評量預試問卷調查結果
本研究為發展坡地防災標準化評量之研究，共計有八個學習階段及 中小學教師共計九種坡地防災素養問卷，期間進行兩次預試，每一次預 試各年段學生及中小學教師之受測樣本數為 100-200 份之間，八年段及 中小學教師份問卷共計預試有效樣本為 900-1,800 份，有效回收率為 50-90%之間，預試後每題逐一計算其信度、難度及鑑別度，以作為後續問卷 修正的參考依據，第一次預試結果如下：
(一)第一次問卷調查基本資料分析
第一次預試問卷調查結果分析如表 4-1 所示:發出問卷 1800 份，回收有 效問卷 1281 份，有效問卷回收率為 71％。
階段 預計發放樣本數 有效回收樣本數
有效問卷回收率(％）幼兒園 150 148 99
國小低年級 200 92 46
國小中年級 200 150 75
國小高年級 200 137 69
國中 350 314 90
高中 250 163 65
大學(一般) 200 85 43
大學(專業) 100 78 78
中小學教師 150 114 76
表 4-1 坡地防災素養標準化評量第一次預試問卷有效回收摘要表
(二)第一次預試試題效度、難易度及鑑別度調查結果
1.難度與鑑別度
表 4-2 為第一次預試試題難易度及鑑別度調查結果，表中標有*號為 落在規範標準外之試題，即需要改正或刪題之試題。其主要目的在於使 研究者能依據分析結果適當修改問卷內容，檢視其不合於標準之原因，
主要是題目太難或太簡單，或不具鑑別度；若題目太難，則需要改簡 單；反之，則需要改難些。若題目不具鑑別度，則表示題目具有陷阱，
則需改去或修正具陷阱的答案。若上述方法都很難做到，則刪去或更換 該題，研究者依前述原因以及參照專家審查意見進行第一預試後試題之 修正，並發展出第二次預試試卷。
綜合表 4-2 資料歸納發現較差之年段在主要在幼稚園、國小、中小 學教師，將這些不合格試題逐一檢視其不合於標準之原因有二：其一，
*K3-4 0.906 0.433 技能題 *B3-1 0.9 0.25 *C2-12 0.96 0.135 D2-11 0.701 0.701 E2-14 0.699 0.776 F2-8 0.53 0.96 G2-7 0.5 0.919 *H2-9 0.9 0.243
*K3-5 0.94 0.267 *A3-1 0.924 0.127 *B3-2 0.847 0.4 *C2-13 0.91 0.26 D2-12 0.672 0.744 E2-15 0.711 0.756 F2-9 0.553 1 G2-8 0.641 0.952 *H2-10 0.903 0.303
*K3-6 0.913 0.4 *A3-2 0.869 0.32 B3-3 0.76 0.54 *C2-14 0.93 0.2 D2-13 0.586 0.821 E2-16 0.694 0.837 F2-10 0.517 0.849 G2-9 0.59 0.878 *H2-11 0.824 0.517
*K3-7 0.913 0.4 *A3-3 0.87 0.359 B3-4 0.76 0.6 平均 0.916 0.249 D2-14 0.596 0.843 E2-17 0.705 0.715 F2-11 0.506 0.884 G2-10 0.513 0.915 H2-12 0.79 0.578 平均 0.91 0.40 *A3-4 0.881 0.204 *B3-5 0.88 0.27 技能題 平均 0.633 0.773 E2-18 0.73 0.714 F2-12 0.47 0.924 G2-11 0.551 0.867 *H2-13 0.894 0.364 n=148 *A3-5 0.848 0.435 *B3-6 0.89 0.29 *C3-1 0.89 0.282 技能題 平均 0.723 0.677 F2-13 0.423 0.889 G2-12 0.59 0.82 H2-14 0.807 0.515
*A3-6 0.914 0.282 *B3-7 0.88 0.19 *C3-2 0.86 0.334 D3-1 0.608 0.79 技能題 F2-14 0.529 0.923 G2-13 0.641 0.904 H2-15 0.806 0.576 平均 0.884 0.287 *B3-8 0.873 0.35 C3-3 0.8 0.462 D3-2 0.586 0.808 E3-1 0.485 0.856 F2-15 0.589 0.96 G2-14 0.577 0.963 H2-16 0.684 0.881
n=92 平均 0.848 0.361 *C3-4 0.92 0.256 D3-3 0.621 0.824 E3-2 0.503 0.711 F2-16 0.576 0.924 G2-15 0.513 0.915 平均 0.849 0.434
n=150 *C3-5 0.88 0.308 D3-4 0.653 0.835 E3-3 0.693 0.799 平均 0.541 0.875 平均 0.584 0.906 技能題
*C3-6 0.92 0.206 D3-5 0.57 0.878 E3-4 0.687 0.823 技能題 技能題 H3-1 0.737 0.695 平均 0.878 0.308 D3-6 0.666 0.834 E3-5 0.663 0.867 F3-1 0.588 0.803 G3-1 0.436 0.955 *H3-2 0.895 0.333
n=137 D3-7 0.516 0.921 E3-6 0.65 0.911 F3-2 0.623 0.957 G3-2 0.5 0.86 H3-3 0.553 0.836 D3-8 0.596 0.866 E3-7 0.675 0.756 F3-3 0.518 0.857 G3-3 0.513 0.816 *H3-4 0.877 0.388 D3-9 0.631 0.844 E3-8 0.669 0.777 F3-4 0.564 0.793 G3-4 0.5 0.861 *H3-5 0.842 0.473 D3-10 0.593 0.787 平均 0.628 0.812 F3-5 0.518 0.693 G3-5 0.438 0.907 *H3-6 0.833 0.5
D3-11 0.646 0.801 n=163 F3-6 0.565 0.88 G3-6 0.564 0.673 H3-7 0.806 0.556 D3-12 0.615 0.889 F3-7 0.624 0.913 G3-7 0.5 0.909 H3-8 0.763 0.695 平均 0.608 0.839 F3-8 0.506 0.88 G3-8 0.552 0.907 H3-9 0.781 0.529
n=314 F3-9 0.541 0.924 G3-9 0.5 0.907 平均 0.787 0.556 F3-10 0.494 0.967 G3-10 0.488 0.907 n=114
F3-11 0.494 0.933 G3-11 0.478 0.861 F3-12 0.541 0.967 G3-12 0.487 0.952 F3-13 0.588 0.924 G3-13 0.512 0.907 F3-14 0.612 0.88 平均 0.497 0.878
平均 0.555 0.883 n=78
n=85
主要題目太簡單，很多題目因第一次出題，所以用字遣詞較不成熟，題 目內容也太簡單需要改難些，若題目不具鑑別度，則表示題目具有陷 阱，則需改去或修正具陷阱的答案。其二，在知識題中各試題在答案選 項中常有「以上皆是」作為答案之一，因而成為受測者主要的選擇答 案，基於上述兩點研究者需重新檢視題目內容、參考相關坡地防災文獻 後，斟酌內容及遣詞用字後修正而成，若上述方法都很難做到，則刪去 或更換該題，修正後的題目最後再經由坡地防家專家、素養檢測專家審 查修正通過，方可做為第二次預試題目，第二次預試問卷如附錄二。
2.第二次問卷預試回收調查結果分析:
第二次問卷調查共發出問卷 2150 份，回有效問卷 1510 份，有效問 卷回收率為 70％，其數量統計表如表 4-3 所示。
階段 預計發放樣本數 有效回收樣本數 有效問卷回收率
（％）
幼兒園 250 172 69
國小低年級 250 173 69 國小中年級 250 164 66 國小高年級 250 184 74
國中 350 336 96
高中 250 163 65
大學(一般) 200 73 37 大學(專業) 150 145 97 中小學教師 150 100 67
第二次問卷預試結果之信度
Cronbach
α、難易度、鑑別度標準如同 第一次預試一樣，試題難易度、鑑別度如統計表 4-5，表中標有*號為落 在規範標準外之試題，需將不符合本研究標準之問卷進行修改(第二次問 卷請見附錄二)。1. 第二次問卷預試信度分析
第二次問卷預試之信度
Cronbach
α，將其整理如表 4-4 所示，各年 段的學生及中小學教師其知識題信度數值落於 0.607~0.847 之間，八年表 4-3 坡地防災素養標準化評量第二次預試有效問卷回收數量統計表
段數值皆為 0.7 以上;態度題數值落於 0.592~0.949 之間，以幼兒園數值 最低 0.592，其餘年段數值皆為 0.7 以上;技能題數值落於 0.706~0.932 之間，所有年段數值皆為 0.7 以上。
幼兒 園
國小 低 年級
國小 中年 年級
國小 高 年級
國中 高中 大學
(一般)
大學 (專業)
中小學 教師
知識題 0.639 0.674 0.607 0.707 0.758 0.606 0.731 0.847 0.779 態度題 0.592 0.830 0.868 0.907 0.929 0.846 0.947 0.929 0.949 技能題 0.706 0.768 0.843 0.845 0.932 0.860 0.928 0.924 0.926
2. 難度與鑑別度
表 4-5 為第二次預試試題難易度及鑑別度調查結果，表中標有*號為 落在規範標準外之試題，即需要改正或刪題之試題。與第一次預試相較 結果，幼兒園部份知識題合於難度範圍還是不高，這是因為幼兒題目作 答方式為圈選題，知識題只有兩個選項，由老師唸題目幼兒作答，可能 老師會有所提示，故大部份幼兒皆能答對，造成難易度太簡單，知識題 平均答對率很高，這個部份改進方法為改難一點及未來大規模施測時要 在施測說明中告知幼稚園老師請勿提示學生答案，其他在態度及技能題 方面為三個圖圏選一個，大部分幼兒圏選圖示為笑臉(得分 3 分)難度數 值太高，表示很多人圏選 3 分，則表示題目太簡單需改去或修正具陷阱 的答案，不過因幼兒特殊的作答方式，此部份修改題目有一定的難度，
可能效果不大，研究者依前述原因以及參照專家審查意見進行第二預試 後試題之修正，並發展出正式大規模施測試卷。
表 4-4 坡地防災素養標準化評量第二次預試問卷信度分析表
表 4-5 坡地防災素養標準化評量第二次預試各試題之難度鑑別度統整表
茲將兩次預試合於標準題目相比較，可發現第二次預試比第一次預 試時合於規定之題數增加，顯示多次預試會使題目趨向完善。
上述比較中也發現在幼兒園之知識題、態度題目通過並不太理想，
主要原因為幼兒因對文字的認知發展情況並不成熟，故出題主要以圖示 圈選題為主，因為幼兒作答時主要以老師唸，幼兒再圈選出答案，若老 師唸題目時有所提示，又或有其他幼兒聽不懂時老師可能會進一步說 明，老師可能會過度解答進而會誘導學童作答，有些希望學生得到高分 使小朋友有成就感，因為幼兒其認知發展情況具特殊性與作答的適合程 度也不能太難，如此題目答對率就會偏高，後續大規模問卷調查時，應 會在問卷施測須知時說明清楚，除了學生看不懂題目外，其餘不要有提 示行為。國小中、低年級，還是有某些題目難度太簡易，答對率很多在 0.85 以上，因此本研討以加深題目難度以為因應，針對試題情境敍述太 簡單加以澄清說明，使題目的完整度更為提升，若題目為防災指標所必 要指定的題目，則即使不符合本研究規範的難易度及鑑別度範圍內，還 是予以保留，並與指導教授討論如何改變內容詞句，例如選項本來為單 選題(1)甲，(2)乙，(3)丙，(4)丁，將各個單選項結合成複選項，其改 造如下:(1)甲丙，(2)乙丙丁，(3)甲丙丁，(4)以上皆是，如此會增加試 題答對難度，學生要全部了解甲、乙、丙、丁各單項敍述才能答對，某
D3-9 0.70 0.77 E3-8 0.7 0.67 F3-4 0.43 0.81 G3-5 0.59 0.78 H3-5 0.74 0.77 D3-10 0.70 0.71 平均 0.55 0.72 F3-5 0.49 0.67 G3-6 0.59 0.86 H3-6 0.70 0.87 D3-11 0.68 0.76 N=163 F3-6 0.49 0.86 G3-7 0.52 0.86 H3-7 0.60 0.92 D3-12 0.70 0.71 F3-7 0.60 0.76 G3-8 0.53 0.82 H3-8 0.57 0.92 平均 0.68 0.73 F3-8 0.53 0.86 G3-9 0.59 0.8 平均 0.65 0.79
N=336 F3-9 0.55 0.81 G3-10 0.56 0.78 N=100 F3- 0.54 0.86 G3-11 0.5 0.82
F3- 0.56 0.90 G3-12 0.56 0.84 F3- 0.49 0.81 G3-13 0.5 0.9 F3- 0.59 0.67 平均 0.53 0.82 F3- 0.58 0.86 N=145 平均 0.54 0.78
N=73
些並加入陷阱選項更改使其更加完善，其他年段則大致已符合本研究所 規範之難度、鑑別度、信度