本研究在第二節針對企業大學定義的特性,例如培養個人與組織 的學習、知識與智慧,也包含訓練與管理發展等不同層次的活動,採 用 CIPP 模式,以「背景、投入、過程與產出」作為總體評鑑的基本類 型,評鑑範圍包含訓練方案和企業層級的評鑑,評鑑對象比較適合個 人與組織;同時參酌修正 CIPP 模式的 CSE 模式,由方案評鑑的概念,
以「系統評估、方案規劃、方案實施、方案改進與方案檢定」五項評 鑑,評鑑範圍拓展至系統架構,成為適用企業大學之評鑑模式。
以下將就企業大學評鑑模式之系統構面與評鑑指標形成的方式,
說明如下:
一、企業大學評鑑模式的系統構面
本研究建構企業大學評鑑模式,整合上述兩種評鑑模式後,共 發展出四種系統構面,包括:「評鑑需求與目標」、「評鑑設計與實 施」、「評鑑學習與應用」和「評鑑績效」。以下將分別說明系統構面,
由兩種模式的哪些類型或程序所組合:
(一)「評鑑需求與目標」系統構面:由 CIPP 模式「背景評鑑」與 CSE 模式「系統評估」所構成。
1.CIPP 模式「背景評鑑」的內涵為:
(1)受評鑑機構的需求為何?
(2)為達成這些需求應訂定哪些目標?
(3)這些目標是否能得到各種資源的支持與配合?
(4)這些目標之中哪些最有可能達成?
2.CSE 模式「系統評估」的內涵為:
目的在於協助決策者了解教育系統的現況,決定範圍和特殊 情境之教育目標的方法。系統評估可分析整個系統,也可僅評鑑
某一特定教學方案,稱為次級系統的評估。
(二)「評鑑設計與實施」系統構面包含:由 CIPP 模式「投入評鑑」
與 CSE 模式「方案規劃」、「方案實施」所構成。
1.CIPP 模式「投入評鑑」的內涵為:
主要確定如何運用資源以達成方案目標,這些行動資源包 括所需投入的人力、物力與財力等;其次則為方案指示行動方 針,尋求各種可能的途徑並加以考察。因此進行投入評鑑應考 慮以下五個問題:
(1)根據受試評鑑單位的環境需求所擬定的策略或方案,是否 能達成預期的目標?
(2)所擬定的策略或方案是否合理可行?
(3)受評鑑單位原有的其他策略,是否能滿足預期達成的目標?
(4)策略或方案執行所需的時間與流程為何?
(5)其他可用策略的實施條件與成效為何?
2.CSE 模式「方案規劃」的內涵為:
目的在於提供資料予決策者做判斷,以選擇達成需要的最 有效方案。資料的搜集與分析,將因不同領域的問題而有所不 同,可透過兩種內在評鑑與外在評鑑兩種程序。
3.CSE 模式「方案實施」的內涵為:
目的在確定方案的實施,是否符合先前所規劃的,此階段 需要注意評鑑內容是否就是研究者所知的方案評鑑。
(三)「評鑑學習與應用」系統構面:由 CIPP 模式「過程評鑑」與 CSE 模式「方案改進」所構成。
1.CIPP 模式「過程評鑑」的內涵為:
旨在針對實施中的計畫作連續不斷的檢核,在實施過程評鑑的時
候,應該考慮以下四個問題:
(1)方案是否按計畫如期舉行?
(2)在現行方案結束進入下個循環週期以前,人員是否需要再 接受訓練或輔導?
(3)現有的資源與設備是否適度而有效地加以利用?
(4)現行的方案在實施上最大的障礙為何?
2.CSE 模式「方案改進」的內涵為:
需盡可能提供方案各部分是否成功運作的資料,評鑑者擔 任的是裁定者的角色,因此評鑑者需認識問題、搜集和分析有 關資料,使決策者能立即修正方案的運作。對於評鑑資料可由 測驗得知方案是否達成其目標,以及方案的實施對其他方案的 影響而得知。
(四)「評鑑績效」系統構面:由 CIPP 模式「產出評鑑」與 CSE 模 式「方案檢定」所構成。
1.CIPP 模式「產出評鑑」的內涵為:
產出評鑑的目的是測量、解釋與判斷課程的成果,在結果 解釋、判斷與比較之後,應將評鑑結果告知受評鑑者,以作為 改進參考的依據。產出評鑑應包括:
(1)確認預期目標與實際達成程度之間符合與差異的情形。
(2)確認已達成的預期與非預期的結果。
(3)提供課程循環中未達成的目標。
(4)提供決策者資訊,用以決定課程是否繼續或是修正、停止。
2.CSE 模式「方案檢定」的內涵為:
最後評鑑者需提供資料協助決策者決定方案是否終止、修 正、繼續辦理或擴大推廣,同時應關注方案達成的目標,以及
對其他方案的影響。評鑑者應取得有效與可信的資料,使評鑑 結果更為嚴謹。
二、企業大學評鑑模式的評鑑指標
根據企業大學評鑑模式建構的系統構面,對於構面內的評鑑指標 仍需符合企業大學的需求,因此本研究結合本章第一節與第五節提出 的企業大學相關研究理論,做為企業大學評鑑指標的基本項目。
首先對於企業大學「評鑑需求與目標」的系統構面,主要根據 Peatross(2003)六項任務流程的企業大學績效衡量系統,提出相關要 素與指標項目,以及部分由 Barley(1998)提到資料分析與診斷的指 標。
第二系統構面:「評鑑設計與實施」,根據 Mailliard(1997), Meister
(1998), and EFMD(2000)提出設立企業大學十個步驟中,歸納出 五個必要的設計步驟;並根據 Barley(1998)提出企業大學辦理模式 與 Prince and Stewart(2002)提出企業大學分析性架構-企業大學輪,
提出設置運作的內涵。
第三系統構面則為「評鑑學習與應用」,根據 Tennant et al.(2002)
基於四層次評鑑模式與 CIRO 模式,結合兩模式優點,並修正未對事 前訓練評估的缺點,所提出「訓練方案評鑑模式」評鑑的觀點;並結 合 Kiely(2002),由 Kirkpatrick 的四層級訓練評鑑觀點所延伸,參考 了 Robinson and Robinson(1989), Giber et al.(2000), Shapiro(1995), Phillips(1997)等相關訓練評鑑理論後,提出「企業大學學習環境的 八個層次衡量方法」,作為企業大學學習與應用之工具。
最後的系統構面為「評鑑績效」,採用 Barney(2002)企業大學「績 效差距分析模式」之衡量,以績效驅動力所連結的解決方案作為評鑑 績效的指標,以及部分由 Barley(1998)提到衡量績效方式的指標。
綜合上述相關文獻,將影響企業大學評鑑指標的的關鍵內涵,依
「評鑑需求與目標」、「評鑑設計與實施」,以及「評鑑學習與應用」、
「評鑑績效」等四個系統構面,整理如下:
(一)評鑑需求與目標
在「評鑑需求與目標」構面上,評鑑企業大學的相關要素包括:
1.專案規劃
指標內容包括:企業大學的角色與職責;企業大學致力服務的 範疇;訓練發展的員工和顧客之間互動哲學、觀點、語氣與強調的重 點;可傳遞資訊管道、準則與方法論;專案管理與時程。
2.系統定義
指標內容包括:利害關係人的目標;企業大學策略與目標;資料 收集的過程與工具組;尋找流程與夥伴的標竿;廣泛收集建議;監督 和報告進度。
3.資料分析與診斷
指標內容包括:輸入、輸出/產出、公式與頻率的組織評估過程;
個別需求的差距,辨識員工的輸入與回饋來蒐集、分析意見;組織需 求的差距、企業願景辨識組織的現況;評估方法調查、焦點團體、會 議、訪談、工作任務分析。
4.明確的一套標準
指標內容包括:日常運作的效率;日常運作的效能;影響程度;
程序、工具與方法的品質。
茲將「評鑑需求與目標」系統構面,相關評鑑要素整理如表 2-17:
表 2-17 「評鑑需求與目標」系統構面的企業大學評鑑要素
相關要素 項目內涵 相關文獻
企業大學的角色與職責 Peatross(2003)
企業大學致力服務的範疇 Peatross(2003)
訓練發展的員工和顧客之 間互動的重點
Peatross(2003)
傳遞資訊管道、準則與方法論 Peatross(2003)
專案規劃
專案管理與時程 Peatross(2003)
利害關係人的目標 Peatross(2003)
企業大學策略與目標 Peatross(2003)
資料收集的過程與工具組 Peatross(2003)
尋找流程與夥伴的標竿 Peatross(2003)
廣泛收集建議 Peatross(2003)
系統定義
監督和報告進度 Peatross(2003)
輸入、輸出/產出、公式與 頻率的組織評估過程
Peatross(2003), Barley(1998)
個別需求的差距,辨識員工的 輸入與回饋,來蒐集分析意見
Barley(1998)
組織需求的差距、企業願 景辨識組織的現況
Barley(1998)
資 料 分 析 與診斷
評估方法調查、焦點團體、
會議、訪談、工作任務分析
Barley(1998)
日常運作的效率 Peatross(2003)
日常運作的效能 Peatross(2003)
影響程度 Peatross(2003)
明 確 的 一 套標準
程序、工具與方法的品質 Peatross(2003)
資料來源:本研究整理
(二)評鑑設計與實施
在「評鑑設計與實施」構面上,評鑑企業大學的相關要素包括:
1.設置程序
指標內容包括:爭取高階支持與管理階層認同的設立宗旨;創設 前針對利害關係人的需求差距評估;確認服務範圍,以對準組織與個 人需求差距;落實策略規劃,依策略原則達成企業大學任務;執行績 效評鑑。
2.知識系統流程
指標內容包括:實體校園外,提供虛擬校園的學習科技;內部網 路與搜尋系統;知識管理資料庫專家系統;決策制定工具;企業目標 參考知識的產出;課程發展目的在於結合人力差距與組織策略性計劃。
3.網路與夥伴流程
指標內容包括:內部社群高階管理者與內部同意形式,促進組織 學習的概念;外部社群企業與高等教育機構、顧客、顧問公司、訓練 組織做生意互利的合作途徑;向世界級學習夥伴看齊;結合差距的分 析和組織策略性計畫,產出新的資訊。
4.人員流程
指標內容包括:組織之間建立與強化分享意義;內外部資源合作,
促進與支援員工如何學習;工作者技能層級與利用科技的能力;組織 能夠建置和創造出,有關分享、了解文化的機制與程序;滿足組織、
個人、夥伴需求,人員產生結構力。
5.學習流程
指標內容包括:學習型組織如何做「引導學習」的文化;創造工 作場所的學習環境以啟發學習者;高階管理者承諾提供終身學習的穩
指標內容包括:學習型組織如何做「引導學習」的文化;創造工 作場所的學習環境以啟發學習者;高階管理者承諾提供終身學習的穩