第三章 研究設計與實施
第三節 研究工具
第三節 第三節 研究工具 研究工具 研究工具 研究工具
本研究所使用的研究工具為研究者探討相關文獻及教師專業發展評鑑辦理 方式之後,自編「臺北市國民中學教師專業發展評鑑實施成效」調查問卷為研 究工具,問卷內容包含「基本資料」與「實施成效」兩部分,「實施成效」又分 為教師專業發展評鑑「辦理方式」與「評鑑層面」兩方面的實施成效,經學者 專家協助建立內容效度後,實施預試,再依因素分析、信效度分析所得結果加 以修改,刪除部分不適合題目,編製成本研究所需之正式問卷。以下就「問卷 編製過程與內容」、「填答與計分」及「效度與信度」三部分說明如下。
壹 壹 壹
壹、、、、問卷編製過程與內容問卷編製過程與內容問卷編製過程與內容問卷編製過程與內容
問卷編製過程與內容關乎本研究實證資料的蒐集,以下就「問卷編製過程」
與「問卷內容」分別說明如下。
一 一 一
一、、、、問卷編製過程問卷編製過程問卷編製過程問卷編製過程
本研究調查問卷係研究者探討相關文獻資料與實際參與教師專業發展評鑑 的經歷,依據研究架構擬定問卷題目編製問卷初稿,除指導教授給予修正意見,
並經指導教授推薦,函請 11 位學者專家與教育人員協助審題提供意見,詳表
3-3,以建立問卷內容效度,確定問卷內容的適當性。專家意見調查問卷採「適 合」、「修正後適合」及「不適合」三類來瞭解學者專家之意見,詳如附錄一。
問卷回收後,根據 11 位學者專家所提出的意見進行整理分析,如附錄二。經與 指導教授討論後,保留「適合」、「修正後適合」達 80%以上之題項,刪除 9 題
(包括背景變項-「評鑑角色」),其餘題項僅作文字修正後予以保留,完成預試 問卷之編製,總計 69 題。
表 3-3 協助建立內容效度之學者專家與教育人員名單
姓名 服務單位/職稱
郭昭佑 國立政治大學教育學系/教授兼政大實驗小學校長 鄭淑惠 國立臺灣師範大學教育學系/助理教授
郝永崴 國立臺灣師範大學教育學系/助理教授
張素貞 國立台灣師範大學師資培育與就業輔導處/助理教授 張德銳 臺北市立教育大學教育行政與評鑑研究所/教授 丁一顧 臺北市立教育大學教育行政與評鑑研究所/副教授 葉興華 臺北市立教育大學課程與教學所/副教授
陳今珍 臺北市立弘道國中/校長 王意蘭 臺北市立龍門國中/校長 李芝安 臺北市立三民國中/校長 李珀玲 臺北市立南門國中/校長 資料來源:研究者自行整理。
二 二 二
二、、、、問卷內容問卷內容問卷內容問卷內容
問卷內容分成兩大部分,第一部分為填答者個人「基本資料」;第二部分為
「實施成效」,「實施成效」包括兩個分量表,即教師專業發展評鑑「辦理方式」
與「評鑑層面」兩部分作為問卷編製的架構,來探究教師專業成長方面的實施 成效,玆將問卷內容說明如下。
(一)第一部分「基本資料」
包括性別、年齡、最高學歷、服務年資、現任職務、(教師)參與評鑑年資 及學校參與教師數,共 7 個背景變項。
(二)第二部分「實施成效」
第二部分「實施成效」共分為兩個分量表,一為教師專業發展評鑑「辦理 方式」之實施成效;另一為「評鑑層面」之實施成效,玆說明如下。
1.教師專業發展評鑑「辦理方式」之實施成效
教師專業發展評鑑「辦理方式」為研究者探討學校教師專業發展評鑑的實 施,歸納評鑑辦理方式可分為 4 個面向,包括「參與宣導與研習」、「編訂規準」、
「自評與校內評鑑」及「評鑑結果的應用」,綜合探討其對教師專業成長的實施 成效,依據學者專家審題的意見修訂完成後,共計 28 題。玆將此 4 個面向的題 目列如下表 3-4。
表 3-4 預試問卷題目—教師專業發展評鑑「辦理方式」分量表 面
向 題
號 題 目
參與宣導與研習
1.
2.
3.
4.
參加評鑑知能宣導活動讓我更瞭解評鑑的內涵 參加評鑑相關研習能讓我具備評鑑工作的知能 參加評鑑相關研習能讓我獲得教學上的專業成長 參加評鑑相關研習能讓我獲得班級經營上的專業成長
編訂規準
5.
6.
7.
8.
9.
透過討論評鑑規準,我更瞭解教師應具備的專業能力 討論訂定的評鑑規準切合我教學上的實際需求 討論訂定的評鑑規準切合我班級經營上的實際需求 討論評鑑規準對我的教學具引導、啟發的助益 討論評鑑規準對我的班級經營具引導、啟發的助益
表 3-4(續)
表 3-5 預試問卷題目—「評鑑層面」分量表
表 3-5(續)
層 面
題
號 題 目
敬業精神與態度
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
我更能遵守教育人員專業倫理規範 我更能遵守教育相關的法令規定 我更尊重學生及家長資料的隱私性
我更關懷文化與經濟弱勢學生,尊重其受教權 我更熱心參與學校各項教學事務
我更樂意參與學校各項訓輔事務
我更樂意參與校務行政工作,協助推動校務革新 我更願意參與校內外各種教師組織或專業社群 我更能與學校教師同儕合作,形成教學夥伴關係 我更能與家長或社區維持良好的互動關係
資料來源:研究者自行整理。
研究者根據專家意見調查結果,修正完成預試問卷後即進行預試問卷調 查,從 98 學年度參與教師專業發展評鑑的 40 所公立國民中學,依學校參與評 鑑年資,抽取 4 所學校實施預試,總計發出預試問卷 150 份,回收 124 份,回 收率約 82﹪,經篩檢後去除無效問卷 1 份,共計有效問卷 123 份。預試問卷回 收後即進行編碼、建檔,利用統計套裝軟體 SPSS 17.0 for Windows 進行因素分 析,以建構問卷之信度與效度。
貳 貳 貳
貳、、、、填答與計分填答與計分填答與計分填答與計分
本研究問卷第一部分「基本資料」按實際填答情形記錄,第二部分「實施 成效」部分採用 Likert 五點量表(Likert-five-point-scale)計分,分為教師專業 發展評鑑「辦理方式」與「評鑑層面」兩分量表,其填答與計分說明如下。
一一
一一、、、、教師專業發展評鑑教師專業發展評鑑教師專業發展評鑑教師專業發展評鑑「「「「辦理方式辦理方式辦理方式辦理方式」」」」之填答與計分之填答與計分之填答與計分之填答與計分
此部分的填答與計分,係由填答的教師依照自身參與教師專業發展評鑑的 情形,於參與教師專業發展評鑑之後對各題項的敘述,勾選最符合自身情形的 選項,以瞭解填答的教師在參與教師專業發展評鑑之後對其專業成長的實施成 效。選項設計從「非常不同意」至「非常同意」,分別給予 1~5 分之計分,分
二 二 二
二、、、、「「「「評鑑層面評鑑層面評鑑層面評鑑層面」」」」之填答與計分之填答與計分之填答與計分之填答與計分
此部分的填答與計分,係由填答的教師於參與教師專業發展評鑑之後對各 題項的敘述,勾選最符合自身狀況的選項,以瞭解填答的教師在參與教師專業 發展評鑑之後在評鑑層面的專業成長實施成效。選項設計從「非常不符合」至
「非常符合」,分別給予 1~5 分之計分,分數愈高,表示該層面實施成效愈高。
參 參 參
參、、、、效度與信度效度與信度效度與信度效度與信度
預試問卷回收後,研究者即開始進行因素分析與信效度分析,以建構問卷 之信效度。根據分析結果,刪除不適當之題目,編製成正式問卷。玆說明如下。
一一
一一、、、、效度分析效度分析效度分析效度分析
本研究問卷除了就問卷內容的適切性,進行學者專家審題提供修改意見,
以建立內容效度。接著於臺北市 98 學年度參與教師專業發展評鑑之 40 所公立 國民中學中,考量不同學校參與評鑑年資,選取 4 所學校進行問卷預試,並於 99 年 11 月 5 日完成預試工作,總計發出 150 份問卷,回收有效問卷 123 份。問 卷回收後以 SPSS 17.0 for Windows 進行因素分析(factor analysis),採用「主成 份分析法」(principal component analysis),抽取出共同因素進行分析,選取特徵 值大於 1.0 且因素負荷量(factor loadings)達.60 以上之題目,並以最大變異法
(Varimax method)進行直交轉軸(orthogonal rotation),以建立問卷之建構效 度(construct validity),形成正式問卷。玆分別從問卷的兩個分量表說明如下。
(一)教師專業發展評鑑「辦理方式」分量表
進行因素分析前須先考驗問卷「取樣適切性量數值」(Kaiser-Meyer-Olkin measure of sampling adequacy, KMO)之大小,當 KMO 值愈大(KMO>0.5), 且達顯著水準(P<.05)時,代表變項共同因素愈多,愈適合做因素分析。本 分量表之 KMO 值為.931,及 Bartlett’s 球形檢定的 Chi-Square 值為 2739.958(自 由度 378)達.000 顯著水準,代表本問卷極適合進行因素分析建構效度。
本問卷「辦理方式」實施成效分量表共 28 個題項,經主成份分析法,可萃
取出 4 個主要成份,可解釋總變異量為 68.545%,預試問卷因素分析結果及刪
低之第 5 題,保留 4 題;「自評與校內評鑑」面向,經共同性分析,第 12、13、
19 題共同性較低刪除,第 20 題因素負荷量較低亦刪除,保留 7 題;「評鑑結果 的應用」面向刪除第 21、22、23 題,保留 5 題。總計教師專業發展評鑑「辦理 方式」實施成效分量表共刪除 8 題,保留 20 題題項。
(二)教師專業發展評鑑「評鑑層面」分量表
本分量表之 KMO 值為.943,及 Bartlett’s 球形檢定的 Chi-Square 值為 5713.825(自由度 820)達.000 顯著水準,代表本問卷適合進行因素分析建構效 度。
表 3-7(續)
因素負荷量較低之第 1、3、5 題,保留 8 題;「敬業精神與態度」層面刪除第 7、
10 題,保留 8 題。總計教師專業發展評鑑「評鑑層面」實施成效分量表共刪除 6 題,保留 35 題。修正後的正式問卷題目詳如表 3-8。
表 3-8 修正後之正式問卷題目一覽
面向 題號 題 目 1 參加評鑑知能宣導活動讓我更瞭解評鑑的內涵 2 參加評鑑相關研習能讓我具備評鑑工作的知能
面向 題號 題 目 1 參加評鑑知能宣導活動讓我更瞭解評鑑的內涵 2 參加評鑑相關研習能讓我具備評鑑工作的知能