第三節 第三節
第三節 研究工具 研究工具 研究工具 研究工具
本研究工具為研究者自編之「台中市國民小學學生家長對實施教師評鑑意見 調查問卷」為調查工具。問卷形成與修改分為預測問卷與正式問卷兩階段,茲就 研究工具編製過程說明如下:
壹、擬定問卷初稿
本問卷係研究者透過文獻分析,並參酌其他有關問卷,依據國內外相關文 獻,學者專家,結合開放性問卷及封閉性問卷之優點,編製成「結構式問卷」的 型式。本研究調查問卷之基本架構。共分為三個部分編製而成。第一部分為「個 人基本資料」;第二部分為家長對實施「教師評鑑」內涵的意見;第三部分為「其 他」。其中第二部分又細分為家長對實施教師評鑑的目的的意見、家長對實施教 師評鑑的項目的意見、家長對實施教師評鑑的方式的意見、家長對實施教師評鑑 資料的來源的意見、家長對實施教師評鑑結果之運用的意見等五個部分,進行分 析與研究。
貳、編製問卷
一、建立專家內容效度
研究問卷初稿完成後,自行編製「台中市國民小學學生家長對實施教師評鑑 意見之研究調查問卷」,並與指導教授討論後編成專家問卷(見附錄一)。經與 指導教授討論及指導教授推薦,函請7位專家學者,教學與實務經驗豐富者,撥 冗填答「專家意見調查」,進行專家意見調查,針對本預試問卷內容之適切性加 以鑑定,並提供寶貴意見,作為修正問卷的重要參考。專家名冊詳見表3-6 所示。
表3-6 問卷效度之專家學者與教育人員名單(依姓氏筆劃排列)
編號 姓名 服務單位 專長 職稱 1 沈月清 黎明國小 教育行政 校長 2 林志忠 國立暨南大學 課程教學 副教授 3 陳聖謨 國立嘉義大學 教育行政 副教授兼嘉大
附小校長 4 楊振昇 國立暨南大學 教育行政 教授 5 蔡璧珍 協和國小 校務參與 家長會長 6 蕭月卿 協和國小 教育行政 校長 7 羅玉霞 東光國小 教育行政 教務主任
專家效度評析用問卷」回收後,依據專家、學者提供之修正意見及勾選資料 進行統計分析如表3-7。
表3-7 家長對實施教師評鑑意見之研究調查問卷專家效度統計
刪除 修改後適合 適合 結果
向度 題號
N % N % N % 保留 刪除 1 0 0% 0 0% 7 100%
2 0 0% 0 0% 7 100% 3 0 0% 0 0% 7 100% 4 0 0% 0 0% 7 100%
目的的意見對實施教師評鑑
5 0 0% 1 14% 6 86% 1 0 0% 0 0% 7 100% 2 0 0% 0 0% 7 100% 3 0 0% 1 14% 6 86% 4 0 0% 1 14% 6 86% 5 0 0% 0 0% 7 100% 6 0 0% 0 0% 7 100%
項目的意見對實施教師評鑑
7 0 0% 1 14% 6 86% 1 0 0% 0 0% 7 100% 2 0 0% 0 0% 7 100% 3 0 0% 0 0% 7 100% 4 0 0% 0 0% 7 100% 5 0 0% 0 0% 7 100% 6 0 0% 0 0% 7 100%
方式的意見對實施教師評鑑
7 0 0% 0 0% 7 100%
表3-7 (續)
刪除 修改後適合 適合 結果
向度 題號
N % N % N % 保留 刪除 1 0 0% 2 28% 5 72%
2 0 0% 1 14% 6 86% 3 0 0% 0 0% 7 100% 4 0 0% 0 0% 7 100% 5 0 0% 0 0% 7 100% 6 0 0% 1 14% 6 86%
資料來源的意見對實施教師評鑑
7 0 0% 0 0% 7 100% 1 0 0% 0 0% 7 100% 2 0 0% 1 14% 6 86% 3 0 0% 0 0% 7 100% 4 0 0% 0 0% 7 100% 5 0 0% 1 14% 6 86% 6 0 0% 0 0% 7 100% 7 0 0% 0 0% 7 100%
結果之運用的意見對實施教師評鑑
8 2 28% 0 0% 5 72%
1 0 0% 0 0% 7 100% 2 0 0% 0 0% 7 100% 3 0 0% 0 0% 7 100% 4 0 0% 1 14% 6 86% 5 1 14% 1 14% 5 72% 6 0 0% 1 14% 6 86% 7 0 0% 1 14% 6 86%
態度的意見對實施教師評鑑
「台中市國民小學學生家長對教師評鑑意見調查問卷」中凡專家、學者勾選
「適合」及「修正後適合」兩項合計百分數值在85%以上的題目均予以保留,並 依專家提供之意見加以修改;彙整所有修正意見,並與指導教授共同討論進行題 目評析、增添及文字潤飾,就認知歧異與語意不佳之題目加以修正,編製發展成 本研究之預試問卷。
二、預試問卷實施與統計分析
本問卷包含教師評鑑的目的、評鑑的項目、評鑑的實施方式、評鑑資料的來源與 評鑑結果之運用及其他。量表初稿編製完成後,隨即運用小樣本預試問卷調查,
藉以了解其可用性與適當性,並作為修訂題目與編製正式問卷的依據。
於 2008 年 6 月 5 日發出,2008 年 6 月 11 日截止回收。根據上述共計發出問 卷 78 份,回收 78 份(回收率 100%),可用為 78 份(100%)(詳見表 3-8)。
表 3-8 預試取樣學校、人數及問卷回收情形
三、預試結果分析
預試問卷回收後,將資料建檔以 SPSS12.0 電腦套裝軟體進行分析處理,並 採以項目分析和信度考驗,建構本問卷之信度。為力求編製過程的嚴謹與精確,
乃進行問卷信度的檢證;本研究根據 78 份有效預試問卷樣本的填答結果,分別 學校規模 預試抽樣
學校
預試抽樣 人數
回收份數 回收率 可用份 數
可用率 30 班以下 泰安國小 15 15 100% 15 100%
31-45 班 軍功國小 18 18 100% 18 100%
46-60 班 和平國小 21 21 100% 21 100%
61 班以上 東興國小 24 24 100% 24 100%
總計 78 78 100% 78 100%
就問卷上 40 個題目,進行項目分析與 Cronbach's α信度係數考驗。在項目分析 方面,採用題目與問卷中各量表之相關係數及其決斷值(critical ratio)為選題 的參考;在效度方面,係以原題意設計,並依據文獻探討與專家學者之意見建構 本研究問卷之效度;信度方面則以 Cronbach's α信度係數考驗內部一致性。
(一)項目分析
根據上述,本研究採用「台中市國民小學學生家長對實施教師評鑑意見 之研究調查問卷」的 Likert 氏四點量表題目,以相關係數和決斷值兩種方式,
作為是否刪題依據。首先,將所有受試者在預試量表之得分總和,依高低分排序,
以分數較高的 27%者為高分組,分數較低的 27%者作為低分組,運用 t 考驗方法 進行考驗高低分組在該題得分平均數之差異顯著性,作為每一個題目的決斷值,
當 CR 值達.03 以上顯著水準時,表示該題能有效鑑別不同受試者反應的程度,
應予以保留;本研究「台中市國民小學學生家長對實施教師評鑑意見之研究調查 問卷」量表中共有 2 題未達.03 顯著水準,故予以刪除。茲將分析的結果分別摘 要成如表 3-9。
表 3-9 台中市國民小學學生家長對實施教師評鑑意見之研究調查預試問卷項目分析摘要
(二)信度分析
本問卷信度用 Cronbach's α信度係數,以進行內部一致性考驗,所求出之 Cronbach's α係數如表 3-9 所列,本研究α係數整體信度達.90。由表中之α係 數可知本問卷具高信度之信度,乃可行的研究工具。
(三)效度分析
本研究經七位專家學者及教育人員協助,對問卷層面及各層面問題加以審 視,研究者再據以修正,故本研究應具有相當之內容效度。
參、填答方式與計分方式
本研究工具「台中市國小教育人員對教師評鑑意見調查問卷」採 Likert 四 點量表方式作答,施測時係採自陳法,受試者依據其知覺與感受針對問題勾選合 適的程度。在第一部分背景變項中,填答者依實際情形勾選出適當的選項。而在 第二及第三部分問題中,填答方式由填答者依個人對文句敘述指標之同意與否的 判斷結果,依序給予標記意見,按四分、三分、二分、一分換算,再分別計算各 題的得分。問卷得分越高的題目,表示該項指標對教師評鑑意見的差異判定上愈 為顯著。
三、 正式問卷之編製
根據預試問卷的分析結果,刪除不適宜之題目並修改題目內容及陳述語句,
經與指導教授討論確認後,形成正式問卷。