問卷效度與信度

壹、建立問卷之專家效度

一、專家效度問卷：

本研究問卷的編製係依據相關文獻的探討，以及與指導教授、同學、長官、同事討 論之後，逐步確認問卷的架構與內容。其次，研究者多年來任職於臺東縣各鄉鎮市公所 及臺東縣政府之人事室，對於公務人員訓練進修及提升英語能力業務，乃業務職掌範 圍，得以了解公務人員參與英語研習之原因或理由訊息。經由研究者與指導教授討論之 後，確定問卷的初步內容，為了確定本問卷的代表性及適當性，於民國 95 年 12 月 18 日送請台東大學從事相關研究與教學的學者專家及台東縣政府負責員工教育訓練之主 管官員共 6 位，名單如表 3-4，針對問卷內容加以鑑定，包括問卷架構、用字遣詞、

重要概念，及題目的適切性等加以審查，以形成專家效度，作為預式問卷編製的重要參 考。

表 3-4 審查預試問卷專家資料表（依姓氏筆劃）

姓名 服務學校機關／職稱 備考

林聰男 台東縣政府人事室主任 何俊青 國立台東大學進修暨推廣部教授 連廷嘉 國立台東大學教育學系教授 溫宏悅 國立台東大學英美語文學系系主任 廖本裕 國立台東大學教育學系教授

蔡東鐘 國立台東大學教育學系系主任 指導教授意見指導 資料來源：研究者自行整理

二、效度分析

專家效度問卷「公務人員參與英語研習動機與學習滿意度之調查問卷【建立專家效度 用卷】」共回收 6 份，回收率 100％。茲分別以表 3-5 列出英語學習動機預試問卷專家 效度摘要表、表 3-6 英語學習滿意度預試問卷專家效度摘要表如下，由此可看出，問卷專

表 3-5 英語學習動機預試問卷專家效度摘要表

3-5 英語學習動機預試問卷專家效度摘要表（續）

表 3-6 英語學習滿意度預試問卷專家效度摘要表（續）

17 6 100 0 0 0 0 18 6 100 0 0 0 0 19 6 100 0 0 0 0 20 6 100 0 0 0 0 21 6 100 0 0 0 0 22 6 100 0 0 0 0 23 4 67 2 33 0 0 學習成果

24 6 100 0 0 0 0 25 6 100 0 0 0 0 26 6 100 0 0 0 0 27 5 83 1 17 0 0 28 4 67 1 17 0 0 行政支援

29 6 100 0 0 0 0 30 6 100 0 0 0 0 31 4 67 1 17 0 0 32 6 100 0 0 0 0 33 6 100 0 0 0 0 學習環境

34 6 100 0 0 0 0

總計 34 189 92.7 15 7.3 0 0 除部分修正外 全部保留 備考 適合＋修正後適合＝204（100％）

貳、預試問卷的實施與分析

問卷初稿在經過學者專家審核，並與指導教授討論之後，乃根據討論結果擬定預試 問卷（附錄四），並進行預試。以下將預試問卷的實施及分析情形與結果說明之。

一、預試對象、時間、樣本分配

本研究完成預試問卷編製已屆 95 年末，台東縣政府、花蓮縣政府、台北市政府及 高雄市政府 95 年度各項英語研習班皆已結束。96 年度各機關大多計劃 1 月中旬開始 辦理招生，2 月中旬開始上課。因此，決定以 95 年度參加英語研習之公務人員為預試

對象。預試實施的對象、時間與樣本分配數詳列如表 3-7：

表 3-7 預試樣本發出數及回收可用數統計表

發出日期 機關別 發出數 回收數 可用數 可用回收率 95年12月22日 台東縣政府 45 43 39 87％

95年12月22日 花蓮縣政府 30 26 24 80％

95年12月22日 台北市政府 30 24 24 80％

95年12月22日 高雄市政府 30 30 30 100％

合計 135 123 117 86.7％

資料來源：研究者自行整理 二、項目分析

透過項目分析可以提高問卷的信度與效度（郭生玉。1995）。本問卷之項目分析，

主要是針對決斷值（critical ration，以 t 值呈現）及相關係數（correlation）二項來進行 分析。

（一）決斷值

決斷值越高，代表個別題目的得分與測驗總分的關聯性越密切，亦即各題目的反應 情形與整個測驗得分的一致性越高（周文欽等，1995）。決斷值的計算方法，是將可用 問卷選取得分較高者與較低者各 25％，作為高分組與低分組，再將兩組在各題的得分 作 t 考驗，求得 t 值作為決斷值（CR 值）以為問卷題目取捨之依據。根據行為科學 辭典（Dictionary of Behavior Science）的建議，凡決斷值在 3.0 以下，表示該題深受機 率的影響，意義不大（王如哲，1988）。由附件 t-test 之 Independent Samples Test 中發 現，各題 t 值均介於 4.772 ~ 8.324 之間。

（二）相關係數

相關係數（r）的功能即是用以衡量兩變數間的關係（陳景堂，1997）。本研究利 用皮爾森（Pearson）相關係數求問卷各題與總分之間的相關程度，用以表示內部一致性 的高低。

一般而言，判斷相關程度的高低是以相關係數的絕對值來判斷， .8 以上稱為高度 相關；介於 .3 到 .7 之間者，稱為中度相關； .3 以下稱為低相關（江建良，1996）。

但是，林清山（1995）認為只看相關係數的大小，並不能說這兩變數之間有高或低相關，

還需考慮統計時的個數。而使用 SPSS 統計軟體求相關係數，若選取「 Display actual significance level」，則會顯示一般的水準，也就是 p 值。若不選擇，則鑑定顯著相關 以星號（＊）表示，顯著相關達.05時，以一個＊表示；顯著相關達 .01 時，以二個＊

表示（陳景堂，1997）。因此，本研究在判斷內部一致性時，不以相關係數數字為主要 依據，相關與否以是否呈現星號為主。由附件 t-test 之 Independent Samples Test 中發 現，所有題目 p 值均小於 .01，均達顯著相關。

本研究綜合上述專家意見、預試之後項目分析與相關係數等統計結果，除將問卷之 題目作刪除或修改、修正之外，本研究「公務人員參與英語研習動機調查問卷」的各向 度仍維持「認知興趣」、「自我成長」、「社交關係」、「外界影響」、「轉變單調生 活」、「職業進展」等六項；「公務人員參與英語研習滿意度調查問卷」的各向度仍維 持「教師教學」、「課程內容」、「人際關係」、「學習成果」、「行政支援」、「學 習環境」等六項。

三、信度分析

為了瞭解各因素題目之內部一致性是否良好，故需進行信度考驗，以確保問卷的可 信度。本研究問卷之信度，係根據上述專家效度、項目分析與相關分析的結果，利用 SPSS／PC 之 Reliability 考驗，求得每一因素的 Cronbach α 值係數，若α係數愈高表 示各因素的內部一致性也愈高，由表 3-8、表 3-9 得知本問卷各因素的α值介於 .768

～.802 之間。另外整份問卷之 Cronbach α 值為 0.9473，顯示本問卷的信度尚佳。

表 3-8 英語學習動機預試問卷信度係數摘要表

向度 Cronbach α 值 題數

1 認知興趣 .789 8

2 自我成長 .788 5

3 社交關係 .791 2

4 外界期望 .797 7

5 逃避／刺激 .784 5

6 職業進展 .802 7

表 3-9 英語學習滿意度預試問卷信度係數摘要表

向度 Cronbach α 值 題數

1 認知興趣 .796 7

2 自我成長 .782 5

3 社交關係 .788 4

4 外界期望 .787 8

5 逃避／刺激 .773 5

6 職業進展 .768 5