大學後設評鑑之理論與相關研究探析 壹、後設評鑑的意義

後設評鑑的概念最早源於 1940 年 Orata 提出的「評鑑的評鑑」，而後 1969 年 Scriven 正式提出「後設評鑑」(meta-evaluation)一詞，將其定義為：「對任何一種評鑑、評鑑 系統或評鑑設計的評鑑」，他認為不正確或偏差的評鑑報告，可能會嚴重誤導學生家長 購買沒有價值或是劣質的教育產品，這種教育產出的評鑑本身是需要被評鑑的

（Scriven,1972：84-86），並且將後設評鑑具體定義為：後設評鑑就是第二級評鑑

（second-order evaluation），意指評鑑的評鑑，就理論而言，後設評鑑涉及評鑑角色 的方法論評估；而就實務言，後設評鑑強調評鑑表現的評鑑。

Cook（1974:159）以次級評鑑（secondary evaluation）代替後設評鑑，將原來的 評鑑稱為「原級評鑑」（primary evaluation），並加以進行檢視。隨後 Cook 和 Gruder

（1978）則將後設評鑑定義為「對總結性（summative）評鑑進行的評鑑」，用以評鑑教 育評鑑計畫。

Stufflebeam 認為後設評鑑基本上也是一種評鑑的形式，其概念必須符應相關的評

鑑概念（Stufflebeam,1974：69-70；游家政、曾祥榕，2004：57）： 一、後設評鑑意指評估原級評鑑的優缺點。

二、後設評鑑必須在原級評鑑實施之前提供資訊，以支持評鑑者做成實施評鑑的 決策；以及在原級評鑑實施後提供資訊，協助評鑑者瞭解其評鑑工作的品質。

三、後設評鑑應評估原級評鑑目標的重要性、設計的合適性、實施的妥當性、結 果的品質與重要性。

四、後設評鑑應當為評鑑者及對其評鑑工作感興趣的人服務。

五、後設評鑑者必須對進行中的評鑑實施形成性（formative）評鑑，以獲取決策 的資訊；對已完成的評鑑活動之整體優缺點進行總結性評鑑，以瞭解績效。

六、後設評鑑者必須進行三個步驟：首先，必須描述特定的後設評鑑；其次，必 須蒐集、組織、分析所需的資訊；最後，必須將所獲得資訊應用到合適的決策 和績效課責（accountibility）。

Stufflebeam（1978）隨即提出經典性的觀點，把後設評鑑定義為「針對一項評鑑 技術的效用性、可行性、適切性及精確性，進行描述、獲取及使用敘述性與判斷性資料 的過程，以指引評鑑的實施，並公開報告評鑑的優缺點」，同時強調後設評鑑的角色應 兼顧形成性與總結性評鑑，其中形成性的功能在於指引評鑑的改進；總結性的功能在報 告評鑑的優缺點。

胡悅倫、陳漢強（1998：5）認為後設評鑑之功能為重新評估評鑑計畫之設計、執 行與結果運用之績效，並據以提出評論作為改進評鑑實施的決策參考。

蘇錦麗、楊瑩、王偉中、呂鴻德、詹惠雪（2001：131-132）主張後設評鑑是一種 對於評鑑工作加以評鑑的藝術與科學，提供了評鑑工作的品質保證及評鑑的可靠性，並 且用來持續改進後續實施的評鑑。就發生的時機而言，後設評鑑可能是在一項評鑑某些 階段性活動之後進行，亦即對評鑑規劃、設計、實施及結果等各項活動實施形成性後設 評鑑；也可能是在評鑑完成之後進行，亦即對評鑑報告的品質，或評鑑結果的影響等實 施總結性的後設評鑑；就歷程而言，後設評鑑是一種系統地描述、獲取及使用敘述性與 判斷性資訊的過程，具體地說，後設評鑑是一種價值判斷的過程；就功能而言，後設評 鑑主要在重新評估評鑑計畫之設計、執行及結果運用之績效，並據以做出判斷、提出評 論，作為改進評鑑實施的決策參考。

游家政和曾祥榕（2004：58）歸納出對後設評鑑如下的看法：

一、就「原級評鑑」而言：後設評鑑的對象為一個或一組原級評鑑的活動表現。

－以政治學門評鑑報告之內容分析為例

二、就「評鑑層級」而言：後設評鑑是從較高層次的立場，對原級評鑑進行評論，

它可以是第二層、第三層…的評鑑。

三、就「發生時機」而言：一者，是在原級評鑑的某些階段性活動之後進行，謂 之形成性後設評鑑；二者，是在原級評鑑完成之後進行，謂之總結性後設評鑑。

四、就「歷程」而言：後設評鑑是一種系統性的、價值判斷的過程。

總之，後設評鑑的意義從以下七個層面進行論述，應可較為周延，對於後設評鑑概 念的建立也有所幫助 (徐敏榮，2008：14-15)：

一、就「本質」而言：後設評鑑仍是一種評鑑的形式，無法脫離評鑑的基本概念。

二、就「目的」而言：後設評鑑不能脫離評鑑的基本目的，一般而言，即是形成 性目的和總結性目的。

三、就「運用時機」而言：形成性後設評鑑是在原級評鑑的某些階段性活動之後 進行，而總結性後設評鑑則在原級評鑑完成之後進行。是故，在不同的時機有 不一樣之功用。

四、就「方法」而言：後設評鑑是運用系統化的方法，對原級評鑑的表現、優缺 點等進行價值判斷，以供決策參考。

五、就「規準」而言：後設評鑑的判斷規準主要有五項：效用性（utility）、可 行性（feasibility）、適切性（propriety）、準確性（accuracy）與課責性

（Accountability）。

六、就「過程」而言：後設評鑑是對「原級評鑑」進行評鑑的過程，係為一種不 斷循環、持續改進的歷程。

七、就「層次」而言：相對於「原級評鑑」，後設評鑑是屬於較高層次的評鑑，其 評鑑結果相形重要，對於決策的影響具有關鍵性。

貳、後設評鑑的內涵

從評鑑專業的角度而言，評鑑本身必須被評鑑，這種形式的評鑑活動就被稱為「後 設評鑑」（Stufflebeam,2000）。典型的後設評鑑，是由另外的評鑑者去評鑑一項已計劃 好的或已完成的評鑑。換言之，後設評鑑即是將原來的評鑑置於受評者的位置，對該評 鑑及其活動表現進行價值判斷（Scriven,1972：84）。以下分從本質目的、角色功能、

內容架構及評鑑標準，加以探討。

一、本質目的

從前述關於後設評鑑的基本概念來看，可以瞭解任何的評鑑本身亦須被評鑑，以評 斷是否有偏差、技術性的錯誤、行政的困難或成本過高或誤用等問題。換句話說，後設 評鑑是提升評鑑品質的必要措施（胡悅倫、陳漢強，1998：8）。

從評鑑與政策之關係而言，Cook（1974）認為後設評鑑之目的可有八項，前三項為 主要性目的，第四至第六項為學術性目的，第七項至第八項為附加性目的（引自陳信翰，

2007：45-46）：

（一） 降低評鑑結果的不明確性

（二） 整體評估各種原級評鑑的效果

（三） 獲得另一種觀點及具備評鑑獨立的精神

（四） 突破學術本位限制及形成整合性的研究

（五） 累積評鑑知識，應用多元資料

（六） 質疑傳統之知識

（七） 增進評鑑之專業能力

（八） 提供多層面的評鑑訓練功能

Stufflebeam（1974）則認為後設評鑑的任務有二：一在為「做決定」服務；二在 為「績效責任」服務。前者指的是形成性的後設評鑑，在評鑑活動之前或實施中，對評 鑑設計與實施做適當的建議，藉以改進評鑑的品質；後者係指總結性的後設評鑑，亦即 對已完成的評鑑工作，提出優缺點的判斷，課以評鑑者的績效與評鑑結果的可靠性。換 言之，後設評鑑的目的有二：一為形成性的目的，二為總結性的目的。除此之外，還可 以從「理論性目的」和「實務性目的」指導評鑑方案的進行，以增加評鑑方案的可行性 (徐敏榮，2008：16)。

二、角色功能

Scriven 分析評鑑的兩種主要角色，即是形成性（formative）和總結性（summative）

的評鑑角色，前者在協助評鑑方案的改進；後者在於評斷評鑑方案的價值 (徐敏榮，

2008：16)。從這樣的觀點來看，後設評鑑有兩項重要的功能，就針對形成性後設評鑑 而言，能協助改進決策；針對總結性後設評鑑而言，能課予績效責任

游家政、曾祥榕（2004：59）在綜合歸納後，提出三項後設評鑑之功能：

（一）為「做決定」服務的形成性後設評鑑，能幫助評鑑者改進評鑑以及確保其 正確性，提高評鑑之可行性。

－以政治學門評鑑報告之內容分析為例

（二）為「績效責任」服務的總結性後設評鑑，能幫助判斷已完成的評鑑活動之 優缺點，提高品質和審視其影響及利用。

（三）為「評鑑研究」服務的啟發性後設評鑑，能幫助突破學術本位之限制，進 行科技整合的研究並統整多元資料，進而累積評鑑知識及促發新的觀點。

總之，後設評鑑的角色功能，除了普遍認同的「形成性」和「總結性」兩種之外，

再加上「預測性」和「啟發性」的角色功能，則更加完整 (引自徐敏榮，2008：17)：

（一）就形成性的角色而言：後設評鑑是要協助後設評鑑者改良評鑑方案的實 施、設計和方法等過程，藉以確保評鑑的正確性，提高評鑑方案的可行性。

（二）就總結性的角色而言：後設評鑑在於判斷評鑑方案的優缺點或價值，課予 評鑑方案績效，以提供評鑑者或決策者參考。

（三）就預測性的角色而言：在評鑑方案進行再評鑑之前，事前所蒐集之相關資 料、判斷、決策等相關事務，都可作為後設評鑑者之參考，並且作為評鑑 方案事先預測和規劃的依據。

（四）就啟發性的角色而言：後設評鑑強調突破學術本位的限制，藉由科際整合 的研究途徑和多元資料分析的技術來增進評鑑研究的理論和知識，並建立 新的觀念。

三、內容架構

Stufflebeam 提出後設評鑑的邏輯架構（logical structure），此架構分從三個向 度：後設評鑑的目的、後設評鑑的步驟與後設評鑑的對象。其中後設評鑑的目的有二項：

一為事前的、為評鑑決策服務的「形成性後設評鑑」；二為回溯的、為評鑑績效服務的

「總結性後設評鑑」。其次，後設評鑑的過程步驟則主要有三項：「描述資訊的要件」、「獲 得所需的資訊」和「應用獲得的資訊」等。再者，後設評鑑的對象則分為「評鑑目的」、

「評鑑設計」、「評鑑過程」和「評鑑結果」等四項，其內容架構如表 2-26 所示

（Stufflebeam,1974：71；游家政，1994：49；林劭仁，2001：58）。

表 2-26 Stufflebeam 之後設評鑑架構

後設評鑑 資料來源：Stufflebeam（1974：71）；游家政（1994：49）；林劭仁，（2001：58）。

Stufflebeam（1974）接著依照後設評鑑架構中的不同對象，提出後設評鑑的五種