第三章 研究設計與實施
第三節 研究工具
本研究所採用的方法包括個別訪談與問卷調查。其工具是由研究者自編之「訪談表」與
「問卷」,用以調查學校教育人員實施自我評鑑經驗與其所知覺的困境與成效。茲將訪談大綱與 問卷的編製,分述如後。
壹、訪談大綱的編製與內容 一、訪談大綱編製過程
研究者根據文獻探討編擬訪談大綱作為訪談最初依據。訪談大綱經指導教授討論、修正,
最後編製 9 題開放式問題探究學校自我評鑑的實施,6 題開放式問題探究自我評鑑的利用,3 題 開放式問題探究其對學校自我評鑑的評價。在正式進行訪談前,將擇一位教師進行預試,把訪 談大綱作最後一次修正。唯紮根理論主張最初草擬的問題是暫時的,會被所蒐集資料所顯現的
69
概念所取代。因此,研究者將保持彈性,隨蒐集資料所顯示的概念來修改訪談問題。
二、訪談大綱內容
1-1 貴校實施自我評鑑的目的是什麼?
1-2 貴校什麼時候會實施自我評鑑?
1-3 貴校自我評鑑實施的成員包括哪些人?為什麼是這些人?
1-4 當實施自我評鑑時,您多常與您的上司或同事溝通?如何溝通?
1-5 您如何讓老師能投入學校自我評鑑的實施?(校長、主任)
1-6 貴校同仁怎麼看待學校自我評鑑?
1-7 貴校實施自我評鑑時,有什麼伙伴、團體或網絡提供協助支持?
1-8 您認為學校自我評鑑應該和外部(上級)評鑑保持什麼樣的關係?
1-9 在自我評鑑實施期間,您曾經遇到那些困難?原因是什麼?
2-1 貴校會採用那些方式或管道,向校內人員溝通、說明或討論自評結果?
2-2 貴校完成學校自我評鑑後,如何利用自我評鑑結果?
2-3 學校實施自我評鑑對你個人有產生什麼改變?
2-4 您認為貴校有因實施自我評鑑而有產生什麼改變?
2-5 貴校相關人員對於學校自我評鑑所發現的缺點,會做哪些因應?
2-6 貴校在利用自我評鑑結果時,有遇到什麼困難?
3-1 如果學校自我評鑑能產生功能,是什麼功能?
3-2 如果學校自我評鑑會帶來缺失,是什麼缺失?
3-3 您認為學校有必要實施自我評鑑嗎?
貳、調查問卷的編製與內容 一、問卷編製過程
(一)擬定問卷大綱
本研究根據研究目的、文獻探討與第一階段個別訪談的結果,再經由指導教授討論後,擬 定問卷大綱,其程序如圖3.2。問卷大綱內容包括學校如何實施自我評鑑、如何利用自我評鑑結 果與過程中產生什麼學習,以及實施學校自我評鑑獲得什麼成效等方面,作為設計問卷的架 構。
70
圖 3.3 問卷擬定程序 資料來源:作者自擬
(二)編擬問卷初稿
根據上述問卷大綱,編擬問卷內容。在問卷內容上,係根據訪談結果與文獻探討內容,進 行問卷題目的設計。最後,經由指導教授討論後,並請教學現場服務的校長、主任、組長與教 師,針對問卷的題意表達、題目適切性進行討論之後,形成問卷初稿,作為建構問卷的表面效 度(如附件一)。
(三)進行專家效度
完成初稿後,延請 7 位教育評鑑領域的專家學者和 6 位學校現場的資深從業人員(校長 3 位、教務主任3 位)提供意見,以進行專家效度檢測。 於各專家學者與學校資深從業人員所填 之問卷版本中,針對問卷各題目皆列三個選項:適合、修正後適合、不適合等,並於各選項 下,列出「修正意見」空格,請各專家學者針對問卷內容及合宜性提出意見。茲將上述格式呈 現如下:
一、下列是實施學校自我評鑑的可能目的,貴校符合的程度如 何?
4 4 3 2 1 非 符 有 不 常 合 些 符 符 不 合 合 符
合
1. 蒐集資料,供外部評鑑檢視………
2. 保障學生學習機會………
3. 自我檢視學校表現是否符合教育局(處)要求…………
4. 發現缺失,進行改善………
5. 其它(請說明)
□ □ □ □
□ □ □ □
□ □ □ □
□ □ □ □
□ 1. 適合 □ 2.修正後適合 □ 3. 不適合 修正意見:
_________________________________
彙整各專家學者意見,整理如表3.4 所示。由表 3.4 可知,第一、三、五、七、八、九題各 質性訪談結
指導教授討論指
擬定問卷大綱 文獻探討結果
71
有一位專家學者認為問題題目應進行修正,第九題則另有一位專家建議刪除。學者專家的建議 與本研究的回應如附件二所示。
表3.4 專家效度意見彙整表
題號 適合(人) 修正後適合(人) 不適合(人)
一 12 1 0
二 13 0 0
三 12 1 0
四 13 0 0
五 12 1 0
六 13 0 0
七 12 1 0
八 12 1 0
九 11 1 1
十 13 0 0
十一 13 0 0
二、正式問卷內容
本研究依據文獻探討與個別訪談結果,提出「學校自我評鑑之調查問卷」。其內涵包括三個 主題:學校自我評鑑的實施、學校自我評鑑的利用與學校自我評鑑的評價。經由上述專家學者 的意見修正後,本研究正式問卷包括個人基本資料與問卷內容二大部分(如附件三),說明如 下:
(一)個人基本資料:旨在瞭解填答者的背景資料,包括性別、年齡、職務、學歷、學校規模 等 6 項。
(二)問卷內容:本問卷係以研究目的為骨架,以第一階段質性研究結果為基石,編製本研究 的調查問卷。問卷內容分成九大類,分別說明如下:
1「學校自我評鑑實施目的」題組,旨在測量填答者對學校為什麼實施自我評鑑的看法。
2「學校自我評鑑實施流程」題組,旨在測量填答者對學校實施自我評鑑應有步驟的看 法。
3「學校自我評鑑優點」題組,旨在測量填答者對於學校實施自我評鑑發揮那些功能的看 法。
4 「學校自我評鑑缺失」題組,旨在測量填答者對於學校實施自我評鑑遭發生那些缺點的 看法。
72
5 「學校自我評鑑結果利用阻礙因素」題組,旨在測量填答者對於那些因素阻礙學校利用 自我評鑑結果的看法。
6 「激勵學校人員投入自我評鑑」題組,旨在測量填答者對於何種方法可以有效激勵學校 人員投入自我評鑑的看法。
7 「學校自我評鑑困境困擾程度」題組,旨在測量填答者對於不同自我評鑑實施困境,困 擾學校的程度如何看法。
8 「學校自我評鑑的參與人員」題組,旨在測量填答者對於不同人員參與學校自我評鑑重 要性的看法。
9 「學校自我評鑑的運作」題組,旨在測量填答者對於學校自我評鑑運作方式的看法。
10「學校自我評鑑必要性」題組,旨在測量填答者對於學校自我評鑑有否實施必要的看 法。