• 沒有找到結果。

American Journal of Evaluation, 19(1),1-19

在文檔中 壹、優質學校的意義 (頁 29-37)

性?什麼是知識的判準?

3. 評鑑結果如何應用?可為決策者直接採用或只是發揮啟蒙之功能?評 鑑結果與決策是否為線性關係?決策過程中涉及許多利益團體的權力 角逐,這些政治因素如何影響決策?

4. 方案如何運作?其如何有助於社會問題之解決?方案的改變如何帶動 社會的改變?是漸進式的改變或激進式的改變?

Mayne、Divoriski 和 Lemaire(1998;引自曾淑惠,2002)指出改進評鑑實務 的十六項議題:

1. 從最高層級獲得支持。

2. 產生有效的要求。

3. 設定真實的期望。

4. 系統化的評鑑活動。

5. 評鑑與預算的處理要相互連結。

6. 選擇適當的評鑑人員。

7. 規劃評鑑。

8. 評鑑時程的適切性。

9. 符合使用者的需求。

10.確定相關性。

11.在評鑑的過程中加入評鑑的關係人。

12.確保方法論的品質:評鑑的發表可以是一種品質控制的機制。

13.做成判斷與建議。

14.溝通評鑑的發現:建立一個評鑑結果的對話管道做解釋與行銷,呈現 並且互動的解釋評鑑的發現,另外像是研討會、工作坊、討論群均可 安排。

15.監督與追蹤。

16.考慮參與人員的需求提供訓練與支援。

此外,Nevo(1986)透過文獻分析方式,歸納出評鑑可能面臨之十個問題,包 含:評鑑的定義、功能、對象、所應蒐集的資訊、判斷評鑑對象的價值與優點的 標準、服務的對象、過程、方法、評鑑人員以及後設評鑑的標準。

綜合上述,研究者認為評鑑主要在於所評鑑人員、判斷的準則、決定評選對 象、知識判斷準則、需求性、品質之確保、行政體系的輔助資源方式、所採用的 方式、後設評鑑等相關內涵。

(五)評鑑過程

社會科學界的多元典範並存將使評鑑更具包容性(潘慧玲,2005)。因而 在質量方法運用中可見質量的相互併用。

專業的評鑑過程在專業標準的指引之下實施(請參閱圖 2-9),其要點如表 2-2 所示:

表 2-2 教育評鑑過程及重點摘要表

類別 重點

評鑑過程

評鑑準備 與受評學校建立良好的溝通與工作關係 告知學校教職員工評鑑重點與過程 雙方同意評鑑的流程

對於學校的額外要求降至最低

說服學校不要另外準備各種檔案資料 初步分析家長與學生對學校的看法 雙方瞭解評鑑的主題與內容

評鑑委員清楚瞭解受評學校所提供的資料 評鑑委員建立評鑑重點與過程的共識 評鑑委員完成各項評鑑準備工作

實用 可行 準確 正當 評鑑準備

實地訪評 結果運用

訪評結果

圖 2-9 專業評鑑的標準與過程

資料來源:引自林天祐(2004a)。教育評鑑實施過程與方法的專業化。教育 資料集刊,29,27-52。

接下頁

類別 重點

實地訪評 訪視委員每天結束之前聚會討論 訪視委員必須蒐集充足的證據

評鑑委員要逐一驗證各項待驗證的事項

評鑑委員對於新發現的問題要重新蒐集證據加以 驗證

評鑑委員需將將所見之證據及時記錄在表格中 評鑑委員對於學校表現的判定需取得一致 評鑑委員在評鑑過程必須恪遵專業倫理

評鑑委員需給予受評學校完整而有效的回饋意見 訪評結果 書面的評鑑報告必須及時完成

報告送交受評學校以及委託單位參考

清楚說明評鑑的發現以及對受評學校具體改進建 議

說明判斷學校表現的依據 提出支持報告內容的有力證據 結果運用 指出表現優異的學校

找出缺乏能力、部分特別薄弱或有能力卻低表現的 學校

評鑑結果通知行政單位

受評學校充分瞭解評鑑委員的評鑑結果 進行追蹤評鑑及後設評鑑

品質保證 訂定評鑑倫理標準 訂定評鑑品質標準 實施評鑑監督 實施評鑑申訴制度

資料來源: 引自林天祐(2004a)。教育評鑑實施過程與方法的專業化。教育資料 集刊,29,27-52。

由於對評鑑意義詮釋角度的不同,評鑑可透過不同的方式進行,整體而言評 鑑常是為了某種特定的目的而在焦點問題與關切的主題、蒐集適當的資訊、分析 與解釋資訊作完整考量(曾淑惠,2002);而在方案運作時,評鑑關注重點的整 體概念,如下圖 2-10。

當中衝擊與影響乃為方案結果的達成程度,而在方案立即結果的質與量達成

規劃(plan)階段

實施(implement)階段 1. 評鑑目的與程序的控管。

結果運用(utility)階段 1.公布評鑑結果。

由上述可知,評鑑過程中,應從事先評鑑準備與規劃、實地訪評、對於訪評 的紀錄與提出建議、以及對結果的運用,包含是否應公布評鑑結果、評鑑報告的 推廣與回饋、效益分析與評估,同時對於評鑑亦應有品質確保;此外,實施申訴 制度與監督的機制,藉以提升與確保品質的完善。

(六)評鑑品質保證

林天祐(2004a)指出建立品質保證機制,乃因在評鑑過程當中,維持品質 是專業的最基本要求,像是在英國學校校務評鑑準則當中,特別訂定品質保證系 統,分別從訂定評鑑倫理、評鑑品質標準、實施評鑑監督與申訴制度著手,從靜 態面與動態面雙管齊下,進而管控教育評鑑品質。

為確保評鑑的專業權威,如英國校務評鑑建有品質保證機制,包括訂有評鑑 倫理與評鑑品質標準,以及實施評鑑監督與申訴制度(OfSTED, 2003;轉引自 林天祐,2004a)。

1. 評鑑倫理

評鑑委員在評鑑過程中,要遵守以下六項倫理信條:

(1) 公正、客觀的評鑑學校,與受評學校有關係之評鑑委員應迴避。

(2) 公平、誠實的撰寫評鑑結果。

(3) 評鑑過程力求一致,並以真誠與尊重的態度對待受評學校與個人。

(4) 對學校例行運作的干擾降至最低,優先考慮受評學校的最大利益。

(5) 與受評者建設性的對話,清楚與坦承的溝通評鑑者的評鑑判斷。

(6) 尊重個人及其工作的隱私權。

2. 評鑑品質標準

評鑑品質標準的訂定,在於確保評鑑的專業性,評鑑召集人必須負起評 鑑品質的責任,使每一位評鑑委員在評鑑過程均能夠遵守品質標準,評鑑標 準包括:

(1)公平、正確的判斷。

(2)充分、可信的證據。

(3)清楚、有效的溝通。

(4)瞭解、恪遵專業倫理。

(5)召集人負起品質保證責任。

3. 評鑑的監督

評鑑倫理與品質標準是否遵循,必須透過監督的機制來檢核,英國 校務評鑑的監督機制包括:

(1)由教育標準局的皇家督學負責評估評鑑實施與評鑑報告的品質、評

鑑委員的效能、委辦單位品質保證的作法、評鑑問題與缺失的改進 情形。

(2)評鑑實施單位也得監督評鑑委員以及委辦單位的表現。

(3)對受評學校實施意見調查,廣泛蒐集對於評鑑的回饋意見。

(4)皇家督學有權調閱評鑑過程與發現的資料。

4. 評鑑的申訴

申訴也是品質保證的重要一環,受評學校對於評鑑過程與結果如有疑 義,得依據規定程序提出申訴,申訴程序如下:

(1)受評學校必須在收到評鑑報告三個月內,向評鑑委員提出申訴事 項,並由召集人給予解答。

(2)如不滿意召集人的回應,可以將申訴事項送達評鑑實施單位,由評 鑑實施單位回答。

(3)如再不滿意評鑑實施單位之回應,則可以向教育標準局提出再申 訴。

(4)如仍不滿意教育標準局的回應,在收到教育標準局回應的三個月 內,可以向獨立申訴仲裁單位提出最後申訴。

(七)評鑑報告

Posavac 和 Carey(1992)指出正式報告呈現具有提供已完成之評鑑相關資料 給方案贊助人,回答評鑑過程所發現的問題或即將被提出的相關評鑑方法,評鑑 報告可作為做決定之後盾以及評鑑報告可作為繼續評鑑的使用依據之功能。曾淑 惠(2002)指出評鑑的洞察力可以證明評鑑報告的有效可行,從對於評鑑各項措 施洞察方案的現象,進而提升評鑑的視野,同時也可突顯方案優缺之處。要使評 鑑發揮功能,必須善用評鑑報告;同時,評鑑報告之提出並非評鑑計畫的結果,

而是另一階段改進方案的開始(潘俊程,2003)。

此外,陳漢強(2002)提出評鑑報告結果的調查結果沒有排行榜的問題,而 是提供學校訂定改進週而復始,使學校像一池有氧活水,永保新鮮、進步。評鑑 結果的應用。評鑑結果之運用應視評鑑目的而定,若評鑑目的在於學校自我改 善,政府機關自然不宜再作他用;若是品質保證與績效責任,則除了作為品質改 善依據外,政府機關通常也會採取一些如經費補助等的必要措施(王保進,

1997)。

綜合上述,評鑑乃為經由規劃、實施、結果運用等階段,從評鑑準備、實地 訪評、訪評結果、結果運用以及品質保證標準與申訴制度之實施,並依據不同目 的與評鑑本質而採取適切之評鑑方式;在現今社會大眾對教育品質之呼聲高漲之

際,教育評鑑乃為確保教育品質重要策略之ㄧ,同時也可藉由評鑑歷程中,提供 評鑑報告之結果與受評對象之參考,並給予回饋申訴之空間,進而使受評對象以 及評鑑對象在持續精進歷程中不斷提升品質與績效。

貳、機制之意涵

在教育部國語辭典中查詢可知機制(mechanisms)本指機器的構造與運作原 理,後泛指社會或自然現象的內在組織和運行的變化規律(教育部,2003)。機 制乃指系統運作的機能,系統就是指流程及表單,透過 P->D->C->A 的 系統運作,如下圖 2-12 所示(林兆明,2005):

圖 2-12 系統運作的機制

資料來源:林兆明(2005)。輔導的終極目的『機制的建立』。品質月刊,42,35-37。

曾家樓(2006)亦在其「國民小學教育品質管理系統之研究- ISO/IWA2 在 一所小學的應用」研究中,指出 ISO/IWA2 教育品質管理標準是利用 PDCA 模式 運作,從事先作計劃,考慮資源時間、設備、方法及環境,計畫完成後檢討,檢

曾家樓(2006)亦在其「國民小學教育品質管理系統之研究- ISO/IWA2 在 一所小學的應用」研究中,指出 ISO/IWA2 教育品質管理標準是利用 PDCA 模式 運作,從事先作計劃,考慮資源時間、設備、方法及環境,計畫完成後檢討,檢

在文檔中 壹、優質學校的意義 (頁 29-37)