表 表 表
表 5 55 5- -- -2 2 2 2 國科會計畫績效與預算配比表 國科會計畫績效與預算配比表 國科會計畫績效與預算配比表 國科會計畫績效與預算配比表
基礎研究類 應用研究類 技術發展類 宣導、推廣類 學術成就 >50﹪ NA NA NA
人才培訓 >20﹪ >10﹪ >10﹪ >20﹪
技術產出 NA >10﹪ >30﹪ NA 知識服務 NA >10﹪ NA >50﹪
技術擴散與服務 NA >20﹪ >20﹪ NA 衍生效益 NA >20﹪ >10﹪ NA
資料來源 資料來源 資料來源
資料來源: : : :政府科技計畫績效評估作業手冊 政府科技計畫績效評估作業手冊 政府科技計畫績效評估作業手冊 政府科技計畫績效評估作業手冊
三三三
三、、、量化評估之衡量指標、量化評估之衡量指標量化評估之衡量指標 量化評估之衡量指標
本研究之績效評估內容主要以建築業自動化專案之政策目標、創新策略、
核心作業以及績效服務等四個項目為主,其具體內涵如表 5-3 所示。然而,績
效評估應能以一簡單明瞭的量化方法執行,否則將流於主觀意識,無法具備客 觀的評量。因此,量化的核心概念將輔以產業調查所得之結果,此舉將能充分 反應產業界對自動化相關技術應用的衡量基點,同時也使專案執行者更融入產 業市場,其衡量指標轉化成可量化之數據(其相互間之關聯性如表 5-3,圖 5-8)。
進而演繹績效評估模式,使其可針對相關專案直接應用,了解各專案之績效,
為績效評估的基本要求。
評估的目的是為了確實掌握執行的方向,因而量化後的數據是否有偏頗之 嫌,亦是評估過程中不可忽視的一環。為了避免為達成目標或使評估分數提升 而產生浮濫,符合業界運作實況之考慮角度即成為重要的因子。在圖 5-8 中以 政策目標、創新策略、核心作業以及績效服務為評估概念核心,輔以產業界期 望增加之工法技術研究、人才培訓與訓練、鼓勵業界參與、法令規章配合,以 延伸出各評估細項之作業面,網羅評估過程中實質達成度,形成完整評估結果。
詳述如下:
1. 政策目標:政策目標的效益必須從鼓勵業界參與、工法技術研究這兩 個角度切入,此兩輔項若發揮得當,技術引入或創新概念之數值必定 上升,廠商參與數自然得以增加,此一核心評估概念即得以獲得最高 效益。
2. 創新策略:新的技術在推展的過程中,需要不間斷的新概念,這些新 概念不僅需要符合產業要求,更要符合核心評估概念的方向。以工法 技術研究及人才培訓與訓練工作同步進行新概念的推展,最需要的即 是掌握計畫成果與目標契合度,並注意人才培訓數與研討會或講習班 數是否同步成長,以期新技術與概念在業界中得以廣泛散播。
3. 服務績效:新技術開展後以法令規章予以輔助,同時繼續發展對人才 培訓與訓練之素質,精質該項新技術之核心能力。
4. 核心作業:為使新技術可持續成長發展,以鼓勵業界參與及持續完善 法令規章,達到技術移轉件數、廠商參與數上升之客觀評量現象。
服務績效 製造、產製知識整合、自動化與電子化整合以及 e-Automation 四大主軸來推動。…持續整合應用機械、電子、資訊、自動化系
四
依據產業界調查的結果,當業界決策參與自動化相關計畫時,期望政府提 供協助如圖 4-9,以「法令規章配合」23﹪為最高,其次為「人才培訓與訓練」
20﹪、「工法技術研究」20﹪、「技術講習與推廣」16﹪、「鼓勵業界參與」
14﹪顯見產業界在取得與應用新技術的同時,最希望政府給予的協助是最實質 的,因此,為達成自動化相關技術的蔓延目的,本計畫將產業界的需求反應在 專案執行績效評估權重中。
整合座談會及問卷調查的結果,本研究進行表 5-4「績效評估指標評估工作 表雛型」修正,如表 5-5
就本研究而言,基準分數以 60 分水準起算,若低於此一標準即視為此專案 績效不合格。此外並設定 80 分水準為目標值。例如:每件自動化專案應以技術 引入或創新為主,因此達成件數一件即可獲得該橫量項目 60 分,每增加一件可 累進 10 分,若專案中一件技術引入或創新皆無法達成,則視為項目 0 分。
由本研究所擬訂之績效評估模式,即可依據過去建築業自動化專案之績效 表現計算出實際之指標值,而指標值之計算方式,如下示範案例之說明。
表 表 表
表 5 55 5- -- -5 55 5 績效衡量指標評估工作表修 績效衡量指標評估工作表修 績效衡量指標評估工作表修 績效衡量指標評估工作表修正版 正版 正版 正版
衡量尺度/比例
衡量指標 0 10 20 30 40 50 60a 70 80b 90 100 權重 財務
構面 對政府補助經費分
配結構合理性 <55% 55% 60% 65% 70% 75% 80% 85% 90% 95% 100% 15%
技術引入或創新概 念數
- - - 0 1 2 3 4 >5 15%
技術移轉服務件數 - - - 0 1 2 3 4 >5 15%
顧客 構面
廠商參與家數 - - - 0 1 2 3 4 >5 15%
計畫成果與目標契
合度 <80% - - - 80% 85% 90% 95% 100% 10%
人力需求與配置合 理性
<80% - - - 80% 85% 90% 95% 100% 5%
內部 流程 構面
硬體設備使用與效 率
<80% - - - 80% 85% 90% 95% 100% 5%
發表文章或論文數 - - - 0 1 2 3 4 >5 5%
學習 成長
構面 研討會或講習班次 數
- - - - 0 1 2 3 4 5 >6 15%
註:a 此欄表示基準值,b 此欄表示目標值
資料來源 資料來源 資料來源
資料來源: : : :本研究成果 本研究成果 本研究成果 本研究成果
(一)先計算出上述所選定各個衡量項目之實際值
例如某建築業自動化專案之各項衡量項目實際值如下:
對政府補助經費分配結構合理性=95%
技術引入或創新概念數=1 件 技術移轉服務件數=1 件 廠商參與家數=2 家
計畫成果與目標契合度=100%
人力需求與配置合理性=90%
硬體設備使用與效率=100%
發表文章或論文數=0 件 研討會或講習班次數=1 場次 (二)照衡量矩陣轉換成比例數值
依照衡量矩陣轉換出比例數值,如下:
對政府補助經費分配結構合理性=90 技術引入或創新概念數=60
技術移轉服務件數=60 廠商參與家數=70
計畫成果與目標契合度=100 人力需求與配置合理性=80 硬體設備使用與效率=100 發表文章或論文數=50 研討會或講習班次數=50
(三)依照各個衡量項目之權數計算
依照各個衡量項目之權數計算如下:
對政府補助經費分配結構合理性=90×15%=13.5 技術引入或創新概念數=60×15%=9
技術移轉服務件數=60×15%=9 廠商參與家數=70×15%=10.5
計畫成果與目標契合度=100×10%=10 人力需求與配置合理性=80×5%=4 硬體設備使用與效率=100×5%=5 發表文章或論文數=50×5%=2.5 研討會或講習班次數=50×15%=7.5 (四)加總得出所求之指標值
加總步驟(三)之總和:
建築業自動化專案之績效
=13.5+9+9+10.5+10+4+5+2.5+7.5=71
計算結果顯示此自動化專案之執行績效僅略高於基準值,仍低於設定之目 標值,顯示此一自動化專案雖已執行,但卻未能有效發揮其應有之外部效益。
透過此一簡單之建築業自動化專案績效評估模式,應可作為內政部建築研究所 日後進行專案績效評估之準則。
第三節 第三節 第三節
第三節 後續自動化課題評估建議 後續自動化課題評估建議 後續自動化課題評估建議 後續自動化課題評估建議
為使後續自動化課題可以隨時改善執行偏差,控制計畫進行過程,明確客 觀予以量化評估勢必為一重要工作。既有之評估量化工作方法,在國科會對專 案計畫評量方式中即將評量構面分化為四,分別為基礎研究類、應用研究類、
技術發展類、宣導推廣類,如圖 5-9 所示: