大華技術學院
電視與網路行銷管理系
四技進修部
畢 業 專 題
以德菲法評估科技大學教師評鑑指標之適切性-
以大華科技大學為例
學 生： 彭俊翔 T496C009
詹孟芸 T498C001
溫筱珊 T498C005
指導老師：楊 熾 能 老 師
中 華 民 國 一百零一 年 十二 月
中文摘要
為 提 升 教 師 素 質、改 善 教 學、研 究 與 服 務 水 準，如 何 有 效 實 施 教 師 評 鑑 ， 成 為 當 前 科 技 大 學 教 育 重 要 的 議 題 ， 本 研 究 在 探 討 教 師 績 效 評 鑑 因 素 ， 參 考 「 大 華 科 技 大 學 教 師 績 效 評 鑑 基 準 表 」 及 相 關 文 獻 資 料 。 編 制 問 卷 ， 分 為 三 個 層 面 、 十 四 個 向 度 、 四 十 三 個 指 標 。 採 用 德菲法專家調查法， 作為本研究方法，邀請十二位學者專家組成德菲法小組，進行三回合的德菲法問卷的 調查，以取得專家一致性意見。經 過 三 次 德 菲 法 問 卷 分 析 修 正 為 三 個 層 面、十 四 個 向 度 、 四 十 二 個 指 標 。 作 為 與 本 研 究 相 互 印 證 與 參 照 之 依 據 ， 所 研 究 的 教 師 績 效 評 鑑 之 因 素 ，作 為 學 校 與 教 師 參 考 的 依 據。 並 提 供 大 華 科 技 大 學 實 施 教 師 專 業 評 鑑 之 參 考 ， 藉 以 提 昇 教 師 教 學 績 效 、 專 業 素 養 ， 以 及 校 務 革 新 的 目 的 ， 提 供 教 師 自 我 省 察 、 促 進 專 業 發 展 。 關 鍵 字 ： 教師評鑑、德菲法、大 華 科 技 大 學誌謝
在 專 題 完 成 的 同 時，我 深 深 的 吸 了 一 口 氣，彷 彿 所 有 跟 同 學 的 努 力 、 辛 苦、爭 執 都 得 到 了 解 脫，但 這 只 是 一 個 學 習 的 開 始，我 還 有 更 多 的 報 告、 企 劃 等 著 我 去 完 成 ， 我 會 更 努 力 的 「 老 師 」。 首 先，由 衷 感 謝 恩 師 楊 熾 能 老 師，就 算 是 放 暑 假 的 時 候，老 師 也 會 化 解 我 在 研 究 過 程 中 面 臨 的 瓶 頸 與 困 惑 ， 老 師 教 導 的 方 式 不 是 嚴 師 而 是 慈 父， 對 於 早 上 在 工 作 的 我 們 沒 給 太 多 的 壓 力， 對 於 老 師 的 感 念 之 情 我 將 永 遠 銘 記 在 心 。 其 次，感 謝 專 題 招 集 人 李 慧 潔 老 師，費 心 審 閱 專 題，提 供 精 闢 的 修 正 建 議 ，在 剛 入 學 時 就 受 到 老 師 的 照 顧 ，當 時 就 知 道 這 位 老 師 是 兼 具 外 表 與 腦 袋 的 女 神 老 師， 在 大 學 之 路 給 予 我 許 多 幫 助 增 進 我 更 多 想 法， 對 於 老 師 教 導 我 將 永 遠 銘 記 於 心 。 再 來 要 感 謝 評 審 委 員 何 東 洋 老 師，在 第 一 次 口 試 時 就 不 斷 用 聊 天 的 方 式 ， 教 導 我 們 報 告 的 技 巧 與 方 式 ， 精 進 我 們 報 告 能 力 ， 更 學 習 了 做 人 的 道 理 。 最 後 要 感 謝 在 大 學 四 年 給 予 我 們 教 導 與 幫 助 的 王 慧 君 老 師、梁 應 平 老 師、羅翊寧老師、張嘉惠老師、李南生老師、何惠珍老師、林玉玫老師、廖志宏老師、 張澤平老師，還有給予我們最多最多幫助的「大華科技大學」。謝謝你。在此獻上無限 感恩之情。 俊翔、孟芸、筱珊 謹誌目錄
中 文 摘 要 ... i 誌 謝 ... ii 目 錄 ... iii 表目 錄 ... v 圖目 錄 ... vii 第 一 章 緒 論 ... 1 第 一 節 研 究 背 景 與 動 機 ... 1 第 二 節 研 究 目 的 ... 2 第 三 節 研 究 範 圍 ... 2 第 四 節 研 究 流 程 ... 2 第二章 文獻探討 ... 4 第 一 節 教 師 評 鑑 ... 4 第 二 節 德 菲 法 ... 7 第三章 研究方法 ... 9 第 一 節 研 究 架 構 ... 9 第 二 節 德 菲 法 運 用 之 要 素 ... 10 第 三 節 研 究 工 具 ... 13 第 四 節 研 究 實 施 ... 16 第 五 節 資 料 處 理 與 分 析 ... 17 第 六 節 德 菲 法 專 家 意 見 收 斂 ... 17 第 四 章 研 究 分 析 與 結 果 ... 19 第 一 節 第 一 回 合 研 究 分 析 ... 19 第 二 節 第 二 回 合 研 究 分 析 ... 25第 三 節 第 三 回 合 研 究 分 析 ... 33 第 四 節 分 析 結 果 ... 42 參考文獻 ... 49 附 錄 一 ... 51 附 錄 二 ... 63 附 錄 三 ... 71 附 錄 四 ... 76
表目錄
表 3-1 德 菲 法 專 家 小 組 成 員 名 單 ... 11 表 3-2 科 技 大 學 教 師 評 鑑 指 標 及 其 所 屬 層 面 、 向 度 架 構 ... 14 表 4-1 德 菲 法 問 卷 調 查 實 施 日 程 表 ... 19 表 4-2 第 一 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 層 面 ) ... 20 表 4-3 第 一 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 向 度 ) ... 21 表 4-4 第 一 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -教 學 層 面 ) ... 22 表 4-5 第 一 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -研 究 層 面 ) ... 23 表 4-6 第一回合德菲法問卷調查結果統計分析摘要(評鑑指標-輔導與服務層面) ... 24 表 4-7 第 二 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 層 面 ) ... 25 表 4-8 第 二 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 向 度 ) ... 26 表 4-9 第 二 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -教 學 層 面 ) ... 27 表 4-10 第二回合德菲法問卷調查結果統計分析摘要(評鑑指標-研究層面) ... 28 表 4-11 第 二 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 ... 29 表 4-12 第 一 回 合 與 第 二 回 合 觀 察 表 ... 30 表 4-13 第 三 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 層 面 ) ... 33 表 4-14 第 三 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 向 度 ) ... 34 表 4-15 第 三 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -教 學 層 面 ) ... 35 表 4-16 第 三 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -研 究 層 面 ) ... 36表 4-17 第 三 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 ... 37 表 4-18 第 二 回 合 與 第 三 回 合 觀 察 表 ... 39 表 4-19 科 技 大 學 適 切 性 評 估 統 計 表 ... 42
圖目錄
圖 1-1 研 究 流 程 圖 ... 3 圖 3-1 科 技 大 學 評 鑑 指 標 適 切 性 評 估 研 究 架 構 ... 9 圖 3-2 德 菲 法 實 施 流 程 圖 ...16
第一章 緒論
第 一 節 研 究 背 景 與 動 機
高等教育肩負著培育人才的重責大任，因此高等教育的發展在政府重視且積極的 施政下，除教育部積極開放新設大學院外，更允許辦學績效良好之專科及技術學院升 格為科技大學，使得在短短十餘年內，自 84 學年度技術學院 36 所，專科學校 74 所， 至 100 學年度科技大學 51 所，技術學院 28 所，專科學校 15 所(教育部全球資訊網統 計資料)，且這個世代是一個全球化的市場，隨著台灣加入 WTO 開放國外大學來台設 立分校，以及面臨承認大陸學歷之壓力，國內教育面臨極大的威脅與挑戰，甚至將面 臨招生不足的窘境。 而在這樣快速變遷的社會裡，要使一間學校成功經營，不僅只在於學校的設備及 環境，「師資」更是吸引學生入校的一大誘因，所以各學校要解決這樣的問題，唯有協 助教師專業成長，增進教師專業素養，提升教學品質，以增進學生學習成果，使「教 師」成為一項專業，藉此優勢來吸引學生入學。徐敏榮(2002)表示以「教育專業」來 吸引家長放心，並以完善良好的教育品質來教導學生。為達到教師專業的理想，藉由 教師評鑑的手段是必要的。因為教師無論再怎樣改進教學，若無他人的提醒、分析、 指點、比較，總是一個人閉門造車，成效有限。反之，若能藉由教師評鑑，來診斷教 師教學的優點與缺失，並給予鼓勵與改進的建議，使教師能充分的得到教學支援，建 立理想的教育目標，提升教學的績效與品質，進而促進教師的專業成長與進步。 然而，針對學校所擬訂的「教師評鑑績效指標」，站在教師的角度來說，教師們會 覺得評鑑就是要考核他們， 但在教育的改革過程中，教師專業表現與學校學習文化的 發展有密切的關係。郭慧龍(1996)指出，教師專業承諾是預測教師工作投入、專業認 同、駐守教育崗位的重要變項，也是影響學校教育效能的重要因素。若教師有較高的 教育專業承諾，則教師自然對於學校教育與學生教學等事物才會盡心投入，願意花費 時間與心力在從事教育工作上，反之若教師教育專業承諾低落，其對於與學生學習相關的教育工作自然較不在意，其整體教育成效必定大打折扣。 希望藉由此研究，了解學校教師對於學校「教師評鑑績效指標」的看法及意見， 並針對學校的評鑑項目給予建議，進而找出教師評鑑的關鍵指標，是本研究的主要動 機。
第 二 節 研 究 目 的
本 研 究 在 探 討 教 師 績 效 評 鑑 因 素，作 為 大 華 科 技 大 學 實 施 教 師 專 業 評 鑑 之 參 考 ， 藉 以 提 昇 教 師 教 學 績 效 、 專 業 素 養 ， 以 及 校 務 革 新 的 目 的 ， 提 供 教 師 自 我 省 察 、 促 進 專 業 發 展 。 透 過 探 討「 大 華 技 術 學 院 教 師 績 效 評 鑑 基 準 表 」之 相 關 資 料 了 解 目 前 現 況 ，作 為 與 本 研 究 相 互 印 證 與 參 照 之 依 據， 所 研 究 的 教 師 績 效 評 鑑 之 因 素 ， 作 為 學 校 與 教 師 參 考 的 依 據 。 主要目的如下: 一、建立適合大華科技大學教師評鑑績效指標。 二、學校有更多方面的意見作為科技大學教師評鑑方面的參考。第 三 節 研 究 範 圍
本研究以大華技術學院教師為研究對象，研究期間為 100 至 101 學年度，研究問 卷以「大華技術學院教師績效評鑑基準表」為基準及 相 關 文 獻 資 料 編製問卷。第 四 節 研 究 流 程
本研究流程為了解研究動機與目的，並探討相關文獻以設計研究方法，依據 參考文獻制定問卷並發放，依其研究分析與結果給予結論與建議。如圖 1-1 所示。 本專題研究共分五章，第一章為緒論；第二章為文獻探討，包含教師評鑑名詞釋 義、評鑑目的與程序之相關文獻回顧、德菲法；第三章介紹研究方法，包含德菲 法的介紹、實施、優點、缺點；第四章研究分析與結果；第五章結論與建議。研究動機與目的
探討相關文獻
設定研究方法
依據參考文件
編制問卷並發放
研究分析與結果
結論與建議
圖 1-1 研 究 流 程 圖第二章 文獻探討
第 一 節 教 師 評 鑑
一 、 教師評鑑的定義
教師評鑑（Teacher Evaluation）是指有系統蒐集教師背景與表現之資料，並加以 客觀的分析與評估，以作為判斷及改進教師素質的依據，並進一步確保學校教育的品 質，完整的教師評鑑要綜合判斷教師的專業背景與系所發展是否契合、教師的工作負 荷是否適當、教學績效是否良好、研究表現是否良好、學生輔導是否投入、行政服務 是否稱職。林天佑(2007)認為制度化的教師評鑑系統可以用於新聘教師、續聘教師、 不續聘教師、停聘、解聘以及獎勵教師等方面。然而「教師評鑑」一詞，對許多人而 言或許還停留在會影響考績、升等的印象，但事實上「教師專業發展評鑑」，其目的 卻不只是著重在「考核教師」而已，更希望的是能夠透過教師評鑑，提升教師專業發 展、促進教師之間的教學經驗、方式的交流與討論，使教學環境、教學品質、學校專 業文化能夠有更好的提升。教師評鑑的目的在於幫助教師專業發展，以及讓教師對自 己的教學績效負責，其依運用類型的不同，可區分成專業發展導向和績效責任導向 評 鑑是對於事物的價值作判斷，而「教師評鑑」即為針對教師的表現作價值判斷，來檢 視老師在專業上的表現。教師評鑑為一種連續、系統化的歷程，係學校整體經營的一 部份，其實施是透過評鑑者、教師及學校行政之間共同參與合作，擬定教師工作表現 的規準，採取多元的評鑑方式與方法，針對教師在教學、研究、服務等方面進行系統 化資料蒐集分析，以做為專業價值判斷與績效評估的歷程。劉文輝(2001)認為教學評 鑑可作為師資培育的基本專業能力與競爭力的重點目標，以提昇師資專業水準。透過 在職進修、校內進修及校內外各種研討會，加強高職教師在「學生輔導」、「行政配合」、 「班級經營」、「品德行為」及「科技資訊(電腦)的應用」項目上之教育。高職宜定期 實施教師評鑑，以提昇教師教學品質，促進教師專業發展，並維護學生的學習權。教 師評鑑的結果可作為「提昇教師專業及教師品質」、「教師專業進修之優先」、「教師證照制度」的依據。慎選評鑑人員，詳訂評鑑準則，以求公平公正。蒐集資料的方式， 宜採多元化蒐集，以力求公平、公正與客觀，高職教師評鑑應有進修與輔導的配套措 施。 潘慧玲(2009)另外教師評鑑的類型與運用不只一種，以美國來說，他們有些的作 法事實上就是著重在教師的「績效責任」，所以會依照老師的教學表現評鑑的結果， 做為是否繼續聘任、加薪或晉級的重要依據之一，這種就是所謂的「績效責任導向的 評鑑」；而臺灣目前在推動的高級中等以下學校教師專業發展評鑑，是「專業發展導 向」的教師評鑑，所以我們用的名詞叫「教師專業發展評鑑」，因而，教師評鑑會視 我們運用評鑑所在意的重點不同，所做的評鑑類型就會不一樣，基本上可分為專業發 展導向及績效責任導向的教師評鑑兩種。蘇秀香(2011) 則認為透過形成性的評鑑，評 定教師能力、態度及發展，提供教學省思與改進的機會藉以提升專業知識、提升學生 學習成效並增進教學品質，訂定高職教師專業發展評鑑指標及規則，期望如各科課綱 訂定方式，共同討論研擬及彈性修改空間，落實學校本位發展，認同自我評鑑、校內 評鑑、多元方式、多元途徑辦理，依適當比例做綜合性評鑑教學觀摩、多次教室觀察、 教學檔案(含教學過程錄影)擇優做教學示範，評鑑結果應作為協助教師專業成長、校 內外在職進修參考、提供學校研習規劃之依據，應與考績脫鉤，勿為考績或聘任之參 考，實施前評鑑內容宜先加強宣導與溝通，應讓老師充分知道其目的、功用和好處， 激發教師認同感與榮譽感，凝聚共識後採漸進式不宜躁進。張德銳、周麗華、李俊達 (2011)對於教學領導對教師評鑑的影響分析，有利因素包括：一．領導者致力於提升 教師專業發展；領導者注重學校本位評鑑方案的制訂；領導者積極理解與推展方案； 領導者努力降低教師對評鑑的抗拒。然而，領導者對於方案的宣導略顯不足，部份教 師因為不了解或誤解，未能積極參與方案，不利於方案的推動。二．有利因素包括教 師樂於追求專業精進；教師具有合作、分享的習慣；教師忠於同事，具有同進退的情 誼。然而，教師對於與教學無直接或立即相關的事務，採取保留或觀望態度，不利於 方案的推動。
潘慧玲(2009)對於教師評鑑有幾個非常重要的功能：首先是促進教師專業素養、 建立教師專業的形象，進而建立教師專業對話的機制或平台，最後就是要引領教師專 業發展的方向。當教師評鑑有既定的評鑑標準，教師們會清楚知道他們需要的專業發 展方向為何、如何著手進行。教師專業發展評鑑的推動需要許多的配套措施。政策的 推動並不是一下子大家就都能瞭解，因此以逐年擴大、漸進式的推動是比較可行的方 式。目前的規劃是從 95 到 97 學年度進行為期三年的試辦，98 學年度取消「試辦」二 字，但還是採自願方式參加。我們現在還無法明確地說哪一年能全面實施，但教育部 已初擬十年目標。我們希望政策可以有延續性，而不會因人設事，故期盼教育部能有 更清楚的「政策宣示」，清楚標舉未來之走向，推動評鑑是需要許多配套系統整合運 作，包含：宣導溝通、人才培訓，輔導支持及專業成長系統的規劃，且要進行後設評 鑑了解其成效。
二、教師評鑑的目的
實施評鑑的目的，一方面希望能夠幫助教師專業發展，另一方面教師本身也應對 自己的教學績效負責；易言之，教師評鑑是提供教師自我檢視教學的一個機會，讓教 師們了解自己在學校場域裡的各項表現後，可以分享優點，並針對需要加強的部份來 改進，最終能促進學校的整體發展。孫志麟(2008)認為教師評鑑是增進教師專業發展 的可行途徑，也是確保學生學習成就的重要機制。教師可從參與教師評鑑的過程，增 加了評鑑知識理解與專業成長，以及持續進行反思並建立自信。此外，學校也經由教 師評鑑的推展，開啟了專業對話的學習文化。亦即學校本位教師評鑑機制對教師發展 和學校改進均有正面的影響。 楊智穎、蘇竟同、陳怡芬(2007)則指出不適當的教師評鑑方法，輕則造成學校教 學資源不當使用、偏導教師的教學方向、導致教師研究失去重心，以及服務項目漫無 重點，重則造成教師對學校失望及事業上產生無力感 ，進而造成教學品質低落，教師 榮譽感降低；易言之，制度本身的不健全自然引來教師對於教師評鑑的反彈與批評。三、評鑑的程序
教師評鑑的程序，通常包含自評與他評；建立教師專業對話的平台，了解教師須 具備的專業能力、發展評鑑標準，能夠引領教師與學校發展更具方向性。教師評鑑有 幾個非常重要的功能：首先是促進教師專業素養、建立教師專業的形象，進而建立教 師專業對話的機制或平台，最後就是要引領教師專業發展的方向。當教師評鑑有既定 的評鑑標準，教師們會清楚知道他們需要的專業發展方向為何、如何著手進行。施樹 宏(2003)評鑑實施程序方面須注意評鑑目的、評鑑設計、評鑑步驟、評鑑資料整理分 析、評鑑人員組織、評鑑方式及結果處理等七個向度。吳俊憲、吳錦惠(2011)學校參 與教師專業發展評鑑，協助推動課程改革的脈絡規劃、具體作法、實施成效及問題省 思。採取個案研究，透過文件分析、省思記錄、訪談法蒐集研究資料。 綜整上述文獻回顧發現，教師評鑑已是目前學校需要重視的重點，完善的教師評 鑑系統，不僅只能夠幫助教師專業發展、提升教師教學知能，也能提升學校教育品質 及專業文化，期望藉由此專題研究能夠使學校與教師經營理念一致，使學校能夠永續 經營。第 二 節 德 菲 法
德菲法起源於古希臘阿波羅神殿中的「德爾菲神諭」( Delphi Oracle )，因此德菲 法的命名具有預測未來之意涵。德菲法主要是應用在資料不足或情況未知下，請專家 提供其專業知能、經驗及意見，以凝聚其對特定議題的共識。本方法對於分析複雜問 題、評估現狀、提昇政策品質和業務轉型的診斷等，都是一種有效工具。德菲法是一 種集思廣益來推測未來現象的方法，是利用一連串有系統的問卷，徵詢與研究問題有 關的專家學者意見。在匿名及彼此不面對面的情況下，進行數回合的問卷調查，且每 次調查後分析結果連同新問卷再分送各專家，作為修正先前意見的參考，如此反覆進 行直到各專家間的意見差異降至最低為止，匯集形成一致性具體的共識。其兼具會議 和傳統問卷調查法優點，是建立在「結構化的資訊流通」、「匿名的群體決定」和「專 家判斷」的原理上。傳統的問卷調查只要製發一次問卷就完成調查工作，而德菲法則需要製發一連串密集的問卷才能完成調查研究，同時並提供多次的回饋意見，具溝通 作用。其理論基礎是由一群專家學者組成的研究小組，在數次問卷填答後，意見較不 一致的專家可改變原先的意見，而趨向多數專家填答的意見，因而使大多數的專家於 多次問卷作答後，意見逐漸趨向於一致，即可進行後續的分析。
德爾菲法(Delphi Method)是在 20 世紀 40 年代由赫爾默(Helmer)和戈登(Gordon)首 創，1946 年，美國蘭德公司為避免集體討論存在的屈從於權威或盲目服從多數的缺 陷，首次使用這種方法用來進行定性預測，後來該方法被迅速廣泛採用。20 世紀中期， 當美國政府執意發動北韓戰爭的時候，蘭德公司又提交了一份預測報告，預告這場戰 爭必敗。政府完全沒有採納，結果一敗塗地。從此以後，德爾菲法得到廣泛認可。(MBA 智庫百科)。
Myrry & Hammons (1995)指出，德菲法為一採取過程匿名式的專家集體決策技 術，除了保有專家團體決策的優點，也能避免成員面對面時的溝通干擾，是以專家作 為施測對象，針對某一問題或未來事件，以個別調查、小組成員間彼此匿名的方式， 經過特定程序及反覆步驟，試圖在無干擾的溝通環境下，結合該領域的專家知識、意 見與推測能力，最後得到專家成員間一致且穩定的共識，藉以有效預測未來，或獲得 對某一問題的一致結論。
第三章 研究方法
本研究在進行科技大學評鑑指標適切性評估時，以「大華技術學院教師績效評鑑 基準表」為研究基礎及 相 關 文 獻 資 料，根據研究目的與研究範圍，說明科技大學評 鑑指標適切性評估之研究方法。本章共分為五個研究階段，第一階段提出研究架構， 清楚說明整體研究方向與概念；第二階段說明德菲法專家小組組成；第三階段概述本 研究用以資料的研究工具；第四階段呈現研究要點與實施；第五階段為資料處理與分 析，藉以瞭解本研究所探討的問題。第 一 節 研 究 架 構
本研究依據「大華技術學院教師績效評鑑基準表」，編制科技大學評鑑指標適切性 評估，包括教學、研究、輔導與服務三 大 層 面 、 十 四 個 向 度 、 四 十 三 個 指 標 ， 將 透 過 三 次 以 上 德 菲 法 問 卷 調 查，收 集 專 家 小 組 看 法 與 意 見 提 出 結 論 與 建 議 。 本研究之科技大學評鑑指標適切性評估研究架構，如圖 3-1 所示。德菲法小組
評鑑基準
大華科技大學
教授 副教授 助理教授 講師 適切性評鑑層面
教學 研究 輔導與服務 圖 3-1 科 技 大 學 評 鑑 指 標 適 切 性 評 估 研 究 架 構第 二 節 德 菲 法 運 用 之 要 素
張添美(2011)依據 Murry & Hammons (1995)之相關研究整理出德菲法以下六個因 素構成德菲法的要素：
一、專家小組（Expert Panel）
專家的組成決定德菲法研究的最終結果。因此小組成員的遴選占相當重要的成 因，Murry & Hammons (1995)研究過去的德菲法文獻發現，人數在 25 至 30 之間的專 家小組，就已達到決策品質與意見多元化的最大極限，大於 30 人的專家小組對於研究 的貢獻並無太大的助益。但在人數的下限方面，該研究認為整個研究的過程中，專家 人數應保持在 6 人以上。此外，德菲法的問卷執行過程至少要兩次以上，施測的問卷 次數越多，專家的意見也會愈集中、穩定，故本研究邀請之專家為學校所認可之教師 資格，並願意接受問卷調查，能對此議題提供豐富資訊者為主要考慮對象，因德菲法 匿名之原則，除姓名外在德菲法專家小組成員名單表內，公開學校服務年限、教學單 位、學校擔任職級以及專業領域等資料。 本研究德菲法專家小組成員名單，如表 3-1 所示。
表 3-1 德 菲 法 專 家 小 組 成 員 名 單 服務年限 教學單位 學校擔任職級 專業領域 20 年以上 工程學院 助理教授 管理學、工業自動化、改善實務。 10-15 年 工程學院 講師 物料管理、生產管理 10-15 年 工程學院 講師 會計學、財務管理 15-20 年 工程學院 副教授兼系主任 作業研究、系統模擬、隨機模式 20 年以上 商管學院 副教授兼教務長 與系主任 品質管制、應用統計、實驗設計 5-10 年 商管學院 助理教授 全面品質管理、清潔生產、行銷管 理、消費者行為、電子商務 15-20 年 商管學院 講師 比較政治、國際關係 5-10 年 商管學院 講師 中文 10-15 年 商管學院 講師 國際貿易 20 年以上 商管學院 講師 經濟學、財務管理、經營分析、管 理、流通連鎖經營管理、服務業作 業管理 10~15 年 商管學院 講師 電子商務、網路行銷、行銷管理、 電腦軟體應用 20 年以上 商管學院 教授 圖形理論、演算法、網路結構分析、 離散數學
二、信度（Reliability）及效度（Validity）
所謂信度，是指衡量工具的正確性（Accuracy）或精確（Precision）。信度代表的 意義有二：穩定性（Stability）和一致性（Consistency）。所謂效度，指測量工具能真 正測出研究主題的程度。一個良好的工具應有足夠的信度與效度。在德菲法研究過程 中，因採重覆施測並予以回饋控制（Feedback Control），可以避免部份誤差變異的發 生，所以信度及效度可達相當水準。三、匿名原則（Anonymity）
為 避 免 團 體 中 領 導 人 物 引 起 從 眾 效 應 （ Bandwagon Effect ） 及 威 權 式 服 從 （Authoritarian Submission）等心理因素，則採用匿名方式使專家小組成員能自由表達 意見，並誘導出不同層次的考量，使表示出的看法兼具公平性。四、回饋控制（Feedback Control）
德菲法對研究工具之使用不同於一般問卷的單向溝通。於第一回合專家問卷回收 後，研究人員即開始進行統計工作，並於第二回合問卷呈現出第一回合中專家個人之 看法及小組之意見趨勢，目的在於使專家們瞭解自己上次的填答內容和群體中之填答 傾向。若是專家的原始意見與群體意見不一致，但是後來對群體意見表示贊同，可於 下次填答問卷時修正意見。倘若專家對自己原先意見表達堅持立場，亦可以在下次問 卷中陳述原因，這是這項研究之精神所在，可以集思廣益又可以維持專家獨立判斷的 能力。五、一致性（Consensus）
德菲法是以科學的方式彙整專家的意見，以取得共同的看法，使受爭議性的主題 獲得共識。六、研究者角色的扮演（The role of the researcher）
研究者有責任對專家解說德菲法的目的與程序，使專家能對研究主題提供個人見 解，雙方採互動合作方式。
第 三 節 研 究 工 具
研究工具之編製是依據「大華技術學院教師績效評鑑基準表」為藍本，研擬「科 技大學評鑑指標適切性評估」，並據以發展為德菲法調查問卷，作為資料蒐集的工具。 茲就問卷內容、架構與填答方式，分述如下：一、問卷內容
本問卷內容包括三大部份，第一部份為整個研究及問卷填答說明，用以向填答者 說明本研究之目的與問卷結構，並陳述填答方式；第二部份為調查對象的個人資料， 包含學校年資、教學單位、學校職級、是否擔任校內教師評鑑組織委員等；第三部份 則是大學教師評鑑各層面、向度與指標之適切性評估。二、問卷架構
本研究依據「大華技術學院教師績效評鑑基準表」及 相 關 文 獻 資 料，編製科技 大學評鑑指標適切性評估，共分三個層面，第一層面為教學、研究、輔導與服務； 第 二 層 面 共 有 十 四 個 向 度，教 學 層 面 包 括 教師素質、教學暨教學事務、教學訓練、 特色教學等四個向度；研究層面包括公家機構計畫、專案委託研究計畫(其他計畫)、 專利(技轉)、著作、學術榮譽等五個向度，輔導與服務層面包括輔導服務、就業服務、 招生、推廣教育、特色輔導與服務等五個向度。第三層面為各向度下所統攝的若干評 鑑指標，四 十 三 個 指 標 。 科 技 大 學 教 師 評 鑑 指 標 及 其 所 屬 層 面 、 向 度 架 構 如 表 3-2 所 示 ：表 3-2 科 技 大 學 教 師 評 鑑 指 標 及 其 所 屬 層 面 、 向 度 架 構 層面 向度 題 數 評鑑指標 教 學 教師素質 5 1-1.助理教授以上 1-2.具乙級證照以上或 2 年實務工作年資 1-3.教學年資 1-4.升等 1-5.參加提昇教師素質之研習、訓練等 教學暨教學事務 6 2-1.正常教學(無學生成績公佈批改、上課不到遲 輸入教學進度大綱要等異常行為 2-2.輸入教學進度大綱 2-3.準時繳交學生成績 2-4.研製教材、教具 2-5.開發影音教材，用於學校 moodle 教學平台 2-6.優良教學成果(校外專題比賽獲獎、輔導證照、資 訊能力、外語能力認證、學程及其他補救教學) 教學訓練 2 3-1.擔任教學訓練講師含大陸或海外上課 3-2.辦理教學研習(討)等教學訓練、活動 特色教學 1 4-1.特色(重點)教學(輔導班、菁英班之補救、增廣教 學等) 研 究 公家機構計畫 2 5-1.國科會、教育部或其他公家機構審核通過之專題 研究計畫 5-2.教學計畫或人才培育計畫 專案委託研究計 畫(其他計畫) 3 6-1.產業界(民營機構)委託研究計畫 6-2.國科會審核通過之大專生參與專題研究計畫 6-3.大華生師產學合作 專利(技轉) 3 7-1.國內外發明、新型、新樣式專利 7-2.具校名之國內外發明、新型、新樣式專利 7-3.研發成果及技轉績效
著作 4 8-1.發表優良學術期刊(SCI、SSCI、EI、FLI、Econlit、 本國 TSSCI 等級) 8-2.發表優良學術期刊(未列入 SCI、SSCI、EI、A&HCI) 8-3.發表優良國內學術期刊、學報論文、國內外研討 會論文 8-4.出版書籍編著(編譯) 學術榮譽 4 9-1.擔任期刊論文編審委員或國內外學術機構研究或 教學訪問者 9-2.擔任公民機構(含學術團體)聘任委員 9-3.獲邀專題演講 9-4.出席學術會議擔任主持人 輔 導 與 服 務 輔導服務 6 10-1.擔任班級導師、社團、系學會、代表隊指導老師 10-2.協助班級施測、身心障礙學生工作、特殊個案輔 導 10-3.協助學生、學校辦理活動、參與比賽 10-4.管理教學實驗室、電腦教室、專題教室、體育場 館設施 10-5.準時(執行)繳交教室日誌、教學評量 10-6.擔任校外公益團體等服務工作 就業服務 3 11-1.協助調查在校應屆畢業生就業率 11-2.協助就業博覽會或校外參訪活動 11-3.協助國際及兩岸交流活動 招生 2 12-1.協助招生事務、招生專案計畫活動 12-2.參與招生宣導 推廣教育 1 13-1.規劃並執行完成推廣教育課程 特色輔導與服務 1 14-1.特殊(重點)輔導與服務、優良成果
三、問卷及填答說明
本問卷分為兩部份，第一部份為基本資料，第二部份為科技大學教師評鑑指標建 構問卷內容，本問卷內容參考陳彥伶(2008)大學教師評鑑指標體系建構之研究，並配 合學校教師評鑑指標編撰科技大學評鑑指標適切性評估。採用李克特氏(Likert type)五 點量表，專家針對各題項之適切性，從1至5加以評分1代表「非常不適切」，5代表「非 常適切」，數值越大，代表該題項適切性越高，就專家的看法在適當的字加以圈選。第 四 節 研 究 實 施
第一回合以結構性的問卷，請專家評估每個議題、事件、技術發生或達成的日期， 或是以李克特量表(Likert Scale)評量議題的優先次序、重要性或可能性，在此過程中， 專家還是可以針對問卷內容提出個人的看法。 研究者收集專家小組成員對每個議題預測或評估資料之後，就開始進行統計分 析，並編製第二回合的問卷，問卷內容包括與第一回合相同的題目、每一位專家在上 一次調查的回應，以及第一回合問卷結果的統計摘要，眾數、平均數、標準差。 問卷調查的步驟可以反覆進行，直到專家小組的意見已經達到某種程度的一致性 (Consensus)，或是專家意見已經趨於穩定(Stability)為止。如圖3-2所示，為德菲法實施 流程。 編製德菲法調查問卷 大華科技大學教師績效評鑑基準表 組成德菲法專家小組 選任專家小組成員 實施德菲法問卷調查 第一回合問卷調查 第n回合問卷調查 問卷收斂 分析德菲法調查結果 使用統計軟體分析資料 圖 3-2 德 菲 法 實 施 流 程 圖第 五 節 資 料 處 理 與 分 析
每回合德菲法調查問卷分析，將所有評鑑指標的適切性得分以眾數(Mo)、平均數 (M)與標準差(SD)等描述統計呈現答題分布情形，並對專家所提出之意見進行彙整，作 為修正、增添題項之依據。最後，將統計結果與修正情形呈現在次回合問卷中，讓專 家小組成員作為填答參考。 各項指標的評定為了區別其相對適切性，顧及兩極化的填答結果，使平均數落於3 左右，本研究以平均值3為決斷值，作為指標選擇的依據，評鑑指標適切性的判斷標準 如下：一、 適切性很高的指標：M≧4
二、 適切性次高的指標：4＞M≧3
三、 適切性中等的指標：3＞M≧2
四、 適切性很低的指標：M＜2
計算眾數、平均數和標準差等統計基本量數後，再轉化成質的訊息，以很高、次 高、中等、很低等四個等級，說明該項指標在整個體系中的適切地位，透過專家小組 成員的意見判定後，形成一致性共識，整理成一套適切的科技大學教師評鑑基準。第 六 節 德 菲 法 專 家 意 見 收 斂
德菲法之意見是否收斂可以各回合問卷間意見分配之穩定性為依據，但穩定性指 標以何者最佳，迄無定論。一般可用客觀的統計方法來評估其意見收斂之情形，如： 眾數、中位數、四分位數、平均數、標準差等，而各項指標取捨的標準則由研究人員 自行決定。故本研究將一回合與次回合問卷做比較，若某一項目之平均數與標準差分 別較前次提高與縮小，本研究即認定該項目已達成共識。此外，若問卷中有三分之二 的項目已達成共識，研究亦即認定專家們的意見已達成一致性的共識。 本研究在一回合與次回合兩回合之問卷中，採用李克特氏(Likert type)五點量表， 專家針對各題項之適切性，從 1 至 5 加以評分 1 代表「非常不適切」，5 代表「非常適切」，數值越大，代表該題項適切性越高，就專家的看法在適當的字加以圈選每項指標 依其同意程度。換言之，當統計數據的平均數愈高，代表專家主觀上對該指標之認同 程度較高，反之亦然。本研究採取之資料分析方法分述如下：
一、 眾數 (Mode)：資料中出現最多的數值。
二、 平均數（Mean）：資料加總的平均值。
三、 標準差（Standard deviation）：資料的離散程度，越小表示越集中。
研究的流程中，本研究分別統計出一回合與次回合所有項目中的眾數減平均數取 絕對值得出的值為觀察值(Observation : O )，因眾數減平均數為小於1，本研究取中間 值0.5左右來區分顯著性差異，若上下回合問卷觀察值相差0.4以內就判定為無顯著性差 異，當觀察值變動不具顯著性的差異；標準差較前次縮小，本研究即認定專家意見已 收斂並達成共識。其計算公式如下：｜眾數 ( Mode：Mo )－平均數（ Mean ：M ）｜= 觀察值(Observation :：O ) ｜Mo－M｜= Ο
第四章 研究分析與結果
本 章 主 要 說 明 第 一 、 二 、 三 回 合 問 卷 調 查 所 獲 得 之 結 果 ， 並 呈 現 問 卷 調 查 實 施 日 程 如 表 4-1所 示 。 表 4-1 德 菲 法 問 卷 調 查 實 施 日 程 表 第 一 回 合 第 二 回 合 第 三 回 合 發 問 卷 2012年 9 月 11 日 2012 年 1 0月 2日 2012 年 1 0月 24 日 回 收 問 卷 2012年 9 月 1 8日 2012 年 1 0月 9日 2012 年 1 0月 31 日 催 收 問 卷 2012年 9 月 2 5日 2012 年 1 0月 12 日第 一 節 第 一 回 合 研 究 分 析
第 一 回 科技大學評鑑指標適切性評估之德菲法調查問卷共發出十二份，於2012 年 9月 11日 開 始 請 專 家 協 助 填 寫 ， 2012年 9月 25日 回 收 完 畢 ， 有 效 問 卷 十 二 份，本 問卷分為兩部份，第一部份為基本資料，第二部份為科技大學教師評鑑指標建 構問卷內容，問卷內容參考學者陳彥伶(2008)大學教師評鑑指標體系建構之研究，並 配合學校教師評鑑指標編撰科技大學評鑑指標適切性評估。 本問卷採用李克特氏(Likert Type)五點量表，從 1 至 5 加以評分 1 代表「非常不適 切」，5 代表「非常適切」，數值越大，代表該題項適切性越高，並使用開放式問卷方 式，於各層面及向度下方綜合意見說明欄及問卷最末處，亦有空白處提供專家表達意 見。根據第一回合德菲法問卷結果，將專家小組成員之意見加以整理歸納及修正後， 在第二回合問卷中會呈現專家的勾選反映意見，以及全體專家成員之眾數、平均數、 標準差、統計結果。 第一回合德菲法問卷調查結果，M 100%大於 3，SD 60%大於 1，刪除+1 增加題 項內容+1，M>3 (59) M<3 (0) ，SD<1 (35) SD>1 (24)。 專 家 建 議 ， 刪 除 題 項 6-3.大 華 生 師 產 學 合 作 ， 因 6-2.國 科 會 審 核 通 過 之 大 專 生 參 與 專 題 研 究 計 畫 已 包 含 6-3.大 華 生 師 產 學 合 作 。 專 家 建 議 ， 增 加 題 項 內 容 (十 四 )重 點 是 指 為 何 ， 應 列 舉 項 目 （ 智 能 輔導 等 ）， 修 改 為 14-1.特 殊 (重 點 )輔 導 與 服 務 、 優 良 成 果 (如 智 能 輔 導 等 )。
一 、 評 鑑 層 面
根據第一回合問卷統計結果，專家對於輔導與服務層面意見較為一致，其平均數 4.00，標準差小於 1，顯示專家對於輔導與服務層面已達初步共識，而教學層面、研究 層面適切性次高(4＞M≧3)，宜再作進一步討論及意見彙整。評鑑層面第一回合德菲法 問卷調查結果統計分析摘要，如表 4-2 所示。 表 4-2 第 一 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 層 面 ) 評鑑層面 Mo 眾數 M 平均數 SD 標準差 一、 教學層面 4 3.83 1.193 二、 研究層面 3 3.75 1.215 三、 輔導與服務層面 4 4.00 0.953二、評鑑向度
根據第一回合德菲法問卷調查回收統計結果，專家學者 14 個向度裡面，向度(六) 專案委託研究計畫(其他計畫)的適切性很高(M≧4)，13 個向度適切性次高(4＞M≧3)， 於下回合問卷調查中進一步討論，如表 4-3 所示。 表 4-3 第 一 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 向 度 ) 評鑑層面/向度 Mo 眾數 M 平均數 SD 標準差 一、教學層面 (一)教師素質 4 3.92 0.9 (二) 教學暨教學事務 4 3.83 0.937 (三) 教學訓練 4 3.83 0.937 (四) 特色教學 4 3.83 1.193 二、研究層面 (五)公家機關研究計畫 4 3.92 0.793 (六)專案委託研究計畫(其他計畫) 4 4.08 0.669 (七) 專利(技轉) 4 3.83 0.937 (八)著作 4 3.92 0.793 (九)學術榮譽 4 3.75 0.965 三、輔導與服務層面 (十)輔導服務 4 3.92 0.669 (十一)就業服務 4 3.83 1.030 (十二)招生 4 3.75 0.866 (十三)推廣教育 3 3.75 0.965 (十四) 特色輔導與服務 4 3.75 0.866三、
評鑑指標
評鑑指標由三大層面方式說明如下： (一)教學層面 教學層面共有 14 個指標，1-5.參加提昇教師素質之研習、訓練等、2-6.優良教學 成果(校外專題比賽獲獎、輔導證照、資訊能力、外語能力認證、學程及其他補救教學) 適切性很高(M≧4)，12 個指標適切性次高(4＞M≧3)，如表 4-4 所示。 表 4-4 第 一 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -教 學 層 面 ) 評鑑指標 Mo 眾數 M 平均數 SD 標準差 (一)教師素質 1-1.助理教授以上 3 3.08 1.084 1-2.具乙級證照以上或 2 年實務工作年資 4 3.75 1.138 1-3.教學年資 3 3.75 1.055 1-4.升等 4 3.5 1 1-5.參加提昇教師素質之研習、訓練等 4 4.25 0.622. (二) 教學暨教學事務 2-1.正常教學(無學生成績公佈批改、上課不 到遲到早退、遲交課程綱要等異常行為) 4 3.92 1.084 2-2.輸入教學進度大綱 4 3.67 1.073 2-3.準時繳交學生成績 3 3.58 1.084 2-4.研製教材、教具 3 3.67 0.778 2-5.開發影音教材，用於學校 moodle 教學 平台 4 3.67 1.073 2-6.優良教學成果(校外專題比賽獲獎、輔導 證照、資訊能力、外語能力認證、學程及 其他補救教學) 4 4.17 0.718 (三) 教學訓練 3-1.擔任教學訓練講師含大陸或海外上課 3 3.42 1.084 3-2.辦理教學研習(討)等教學訓練、活動 4 3.83 0.718 (四) 特色教學 4-1.特色(重點)教學(輔導班、菁英班之補 救、增廣教學等) 4 3.83 0.718(二)研究層面 研究層面共有 15 個指標，15 個指標適切性次高(4＞M≧3) ，如表 4-5 所示。 表 4-5 第 一 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -研 究 層 面 ) 評鑑指標 Mo 眾數 M 平均數 SD 標準差 (五)公家機關研究計畫 5-1.國科會、教育部或其他公家機構審核通過之 專題研究計畫 4 3.75 0.866 5-2.教學計畫或人才培育計畫 4 3.92 0.669 (六)專案委託研究計畫(其他計畫) 6-1.產業界(民營機構)委託研究計畫 4 3.67 1.073 6-2.國科會審核通過之大專生參與專題研究計 畫 3 3.67 0.985 (七) 專利(技轉) 7-1.國內外發明、新型、新樣式專利 3 3.25 1.055 7-2.具校名之國內外發明、新型、新樣式專利 3 3.50 1.087 7-3.研發成果及技轉績效 3 3.50 1.000 (八)著作 8-1.發表優良學術期刊(SCI、SSCI、EI、FLI、 Econlit、本國 TSSCI 等級) 3 3.67 0.778 8-2.發表優良學術期刊(未列入 SCI、SSCI、EI、 A&HCI) 3 3.67 0.778 8-3.發表優良國內學術期刊、學報論文、國內外 研討會論文 3 3.42 1.165 8-4.出版書籍編著(編譯) 3 3.42 0.900 (九)學術榮譽 9-1.擔任期刊論文編審委員或國內外學術機構 研究或教學訪問者 3 3.58 0.900 9-2.擔任公民機構(含學術團體)聘任委員 3 3.42 1.165 9-3.獲邀專題演講 3 3.50 1.087 9-4.出席學術會議擔任主持人 3 3.42 1.165
(三)輔導與服務層面 輔導與服務層面共有 13 個指標，6 個指標適切性很高(M≧4)，7 個指標適切性次 高(4＞M≧3) ，如表 4-6 所示。 表 4-6 第一回合德菲法問卷調查結果統計分析摘要(評鑑指標-輔導與服務層面) 評鑑指標 Mo 眾數 M 平均數 SD 標準差 (十)輔導服務 10-1.擔任班級導師、社團、系學會、代表隊指導 老師 4 4.25 0.452 10-2.協助班級施測、身心障礙學生工作、特殊個 案輔導 4 4.33 0.492 10-3.協助學生、學校辦理活動、參與比賽 4 4.33 0.492 10-4.管理教學實驗室、電腦教室、專題教室、體 育場館設施 4 4.08 0.515 10-5.準時(執行)繳交教室日誌、教學評量 4 3.75 1.055 10-6.擔任校外公益團體等服務工作 4 4.25 0.622 (十一)就業服務 11-1.協助調查在校應屆畢業生就業率 4 3.58 1.311 11-2.協助就業博覽會或校外參訪活動 4 3.83 0.937 11-3.協助國際及兩岸交流活動 4 3.67 0.888 (十二)招生 12-1.協助招生事務、招生專案計畫活動 5 4.00 1.044 12-2.參與招生宣導 4 3.92 0.996 (十三)推廣教育 13-1.規劃並執行完成推廣教育課程 3 3.50 0.905 (十四) 特色輔導與服務 14-1.特殊(重點)輔導與服務、優良成果(如智能輔 導等) 3 3.83 0.835
第 二 節 第 二 回 合 研 究 分 析
第 二 回 科技大學評鑑指標適切性評估之德菲法調查問卷共發出十二份，於2012 年 10月 2日 開 始 請 專 家 協 助 填 寫 ， 2012年 10月 23日 回 收 完 畢 ， 有 效 問 卷 十 二 份 。第二回合德菲法問卷調查結果，M 98%大於3，SD 93%大於1。一、評鑑層面
根據第二回合問卷統計結果，專家對於輔導與服務層面、研究層面適切性很高(M ≧4)，教學層面意見較不一致標準差大於 1，宜再作進一步討論及意見彙整，如表 4-7 所示。 表 4-7 第 二 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 層 面 ) 評鑑層面 Mo 眾數 M 平均數 SD 標準差 一、 教學層面 4 3.67 1.073 二、 研究層面 4 4.08 0.669 三、 輔導與服務層面 5 4.33 0.888二、評鑑向度
根據第二回合德菲法問卷調查回收統計結果，專家學者 14 個向度裡面，4 個向度 的適切性很高(M≧4)，10 個向度適切性次高(4＞M≧3)且所有向度標準差都小於 1 表 示專家對向度已達共識，如表 4-8 所示。 表 4-8 第 二 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 向 度 ) 評鑑層面/向度 Mo 眾數 M 平均數 SD 標準差 一、教學層面 (一)教師素質 4 3.75 0.866 (二) 教學暨教學事務 4 4.00 0.853 (三) 教學訓練 4 3.58 0.515 (四) 特色教學 4 4.08 0.669 二、研究層面 (五)公家機關研究計畫 4 3.67 0.492 (六)專案委託研究計畫(其他計畫) 4 3.92 0.793 (七) 專利(技轉) 3 3.08 0.669 (八)著作 3 3.67 0.778 (九)學術榮譽 4 3.92 0.793 三、輔導與服務層面 (十)輔導服務 4 4.42 0.669 (十一)就業服務 4 3.75 0.754 (十二)招生 4 4.08 0.793 (十三)推廣教育 4 3.67 0.492 (十四) 特色輔導與服務 3 3.58 0.669三、評鑑指標
評鑑指標由三大層面方式說明如下： (一)教學層面 教學層面共有 14 個指標，5 個指標適切性很高(M≧4)，9 個指標適切性次高(4＞ M≧3)，所有指標標準差都小於 1 表示專家對向度已達共識，如表 4-9 所示。 表 4-9 第 二 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -教 學 層 面 ) 評鑑指標 Mo 眾數 M 平均數 SD 標準差 (一)教師素質 1-1.助理教授以上 3 3.33 0.651 1-2.具乙級證照以上或 2 年實務工作年資 4 3.75 0.622 1-3.教學年資 3 3.50 0.798 1-4.升等 4 3.75 0.622 1-5.參加提昇教師素質之研習、訓練等 4 4.08 0.669 (二) 教學暨教學事務 2-1.正常教學(無學生成績公佈批改、上課不到 遲到早退、遲交課程綱要等異常行為) 5 4.42 0.669 2-2.輸入教學進度大綱 4 3.92 0.900 2-3.準時繳交學生成績 4 4.08 0.793 2-4.研製教材、教具 4 4.00 0.603 2-5.開發影音教材，用於學校 moodle 教學平台 3 3.50 0.798 2-6.優良教學成果(校外專題比賽獲獎、輔導證 照、資訊能力、外語能力認證、學程及其他補 救教學) 4 3.83 0.577 (三) 教學訓練 3-1.擔任教學訓練講師含大陸或海外上課 3 3.33 0.492 3-2.辦理教學研習(討)等教學訓練、活動 3 3.50 0.522 (四) 特色教學 4-1.特色(重點)教學(輔導班、菁英班之補救、 增廣教學等) 4 4.08 0.793(二)研究層面 研究層面共有 15 個指標，14 個指標適切性次高(4＞M≧3)，指標 7-1.國內外發明、 新型、新樣式專利適切性中等(3＞M≧2)，有兩個指標標準差＞1，宜再作進一步討論 及意見彙整，如表 4-10 所示。 表 4-10 第二回合德菲法問卷調查結果統計分析摘要(評鑑指標-研究層面) 評鑑指標 Mo 眾數 M 平均數 SD 標準差 (五)公家機關研究計畫 5-1.國科會、教育部或其他公家機構審核通過之 專題研究計畫 3 3.75 0.754 5-2.教學計畫或人才培育計畫 4 3.83 0.718 (六)專案委託研究計畫(其他計畫) 6-1.產業界(民營機構)委託研究計畫 4 3.67 0.985 6-2.國科會審核通過之大專生參與專題研究計 畫 4 3.92 0.793 (七) 專利(技轉) 7-1.國內外發明、新型、新樣式專利 3 2.92 0.793 7-2.具校名之國內外發明、新型、新樣式專利 3 3.17 0.718 7-3.研發成果及技轉績效 3 3.25 0.754 (八)著作 8-1.發表優良學術期刊(SCI、SSCI、EI、FLI、 Econlit、本國 TSSCI 等級) 3 3.58 0.669 8-2.發表優良學術期刊(未列入 SCI、SSCI、EI、 A&HCI) 3 3.25 0.754 8-3.發表優良國內學術期刊、學報論文、國內外 研討會論文 3 3.58 0.793 8-4.出版書籍編著(編譯) 3 3.67 0.985 (九)學術榮譽 9-1.擔任期刊論文編審委員或國內外學術機構 研究或教學訪問者 3 3.50 0.905 9-2.擔任公民機構(含學術團體)聘任委員 3 3.58 0.900 9-3.獲邀專題演講 3 3.50 1.087 9-4.出席學術會議擔任主持人 3 3.58 1.084
(三)輔導與服務層面 輔導與服務層面共有 13 個指標，7 個指標適切性很高(M≧4)，6 個指標適切性次 高(4＞M≧3)，指標 11-1.協助調查在校應屆畢業生就業率標準差＞1，宜再作進一步討 論及意見彙整，如表 4-11 所示。 表 4-11 第 二 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -輔 導 與 服 務 層 面 ) 評鑑指標 Mo 眾數 M 平均數 SD 標準差 (十)輔導服務 10-1.擔任班級導師、社團、系學會、代表隊指 導老師 5 4.42 0.669 10-2.協助班級施測、身心障礙學生工作、特殊 個案輔導 5 4.33 0.778 10-3.協助學生、學校辦理活動、參與比賽 4 4.33 0.778 10-4.管理教學實驗室、電腦教室、專題教室、 體育場館設施 4 4.00 0.603 10-5.準時(執行)繳交教室日誌、教學評量 4 3.83 0.937 10-6.擔任校外公益團體等服務工作 4 4.33 0.651 (十一)就業服務 11-1.協助調查在校應屆畢業生就業率 4 3.50 1.168 11-2.協助就業博覽會或校外參訪活動 4 3.58 0.900 11-3.協助國際及兩岸交流活動 4 3.50 0.905 (十二)招生 12-1.協助招生事務、招生專案計畫活動 4 4.25 0.452 12-2.參與招生宣導 4 4.25 0.622 (十三)推廣教育 13-1.規劃並執行完成推廣教育課程 4 3.58 0.515 (十四) 特色輔導與服務 14-1.特殊(重點)輔導與服務、優良成果(如智能 輔導等) 3 3.67 0.778
五、分析收斂
本研究從第二回合問卷開始，統計本回合與前一回合研究的流程中所有項目中的 眾數減平均數取絕對值得出的值為觀察值(Observation：O)，若觀察值變動不具顯著性 的差異；標準差較前次縮小，本研究即認定專家意見已收斂並達成共識。 在第一回合與第二回合觀察中所有各項標準差已明顯縮小，但觀察值有 12 個題項 略有差異，如表 4-12 所示。為求研究更為準確，本研究小組討論決定進行第三次問卷 調查。 表 4-12 第 一 回 合 與 第 二 回 合 觀 察 表評鑑層面/評鑑向度/指標項目
第一回合 觀察值 第二回合 觀察值 一、教學層面
0.17 0.33 (一)教師素質 0.08 0.25 1-1.助理教授以上 0.08 0.33 1-2.具乙級證照以上或 2 年實務工作年資 0.25 0.25 1-3.教學年資 0.75 0.5 1-4.升等 0.5 0.25 1-5.參加提昇教師素質之研習、訓練等 0.25 0.08 (二) 教學暨教學事務 0.17 0 2-1.正常教學(無學生成績公佈批改、上課不到遲到早退、 遲交課程綱要等異常行為) 0.08 0.58 2-2.輸入教學進度大綱 0.33 0.08 2-3.準時繳交學生成績 0.58 0.08 2-4.研製教材、教具 0.67 0 2-5.開發影音教材，用於學校 moodle 教學平台 0.33 0.5 2-6.優良教學成果(校外專題比賽獲獎、輔導證照、資訊能 力、外語能力認證、學程及其他補救教學) 0.17 0.17 (三) 教學訓練 0.17 0.42 3-1.擔任教學訓練講師含大陸或海外上課 0.42 0.33 3-2.辦理教學研習(討)等教學訓練、活動 0.17 0.5 (四) 特色教學 0.17 0.08 4-1.特色(重點)教學(輔導班、菁英班之補救、增廣教學等) 0.17 0.08(續 )表 4 -1 2 第 一 回 合 與 第 二 回 合 觀 察 表
評鑑層面/評鑑向度/指標項目
第一回合 觀察值 第二回合 觀察值 二、研究層面
0.75 0.08 (五)公家機關研究計畫 0.08 0.33 5-1.國科會、教育部或其他公家機構審核通過之專題研究 計畫 0.25 0.75 5-2.教學計畫或人才培育計畫 0.08 0.17 (六)專案委託研究計畫(其他計畫) 0.08 0.08 6-1.產業界(民營機構)委託研究計畫 0.33 0.33 6-2.國科會審核通過之大專生參與專題研究計畫 0.67 0.08 (七) 專利(技轉) 0.17 0.08 7-1.國內外發明、新型、新樣式專利 0.25 0.08 7-2.具校名之國內外發明、新型、新樣式專利 0.5 0.17 7-3.研發成果及技轉績效 0.5 0.25 (八)著作 0.08 0.67 8-1.發表優良學術期刊(SCI、SSCI、EI、FLI、Econlit、本 國 TSSCI 等級) 0.67 0.58 8-2.發表優良學術期刊(未列入 SCI、SSCI、EI、A&HCI) 0.67 0.25 8-3.發表優良國內學術期刊、學報論文、國內外研討會論 文 0.42 0.58 8-4.出版書籍編著(編譯) 0.42 0.67 (九)學術榮譽 0.25 0.08 9-1.擔任期刊論文編審委員或國內外學術機構研究或教學 訪問者 0.58 0.5 9-2.擔任公民機構(含學術團體)聘任委員 0.42 0.58 9-3.獲邀專題演講 0.5 0.5 9-4.出席學術會議擔任主持人 0.42 0.58(續 )表 4 -1 2 第 一 回 合 與 第 二 回 合 觀 察 表
評鑑層面/評鑑向度/指標項目
第一回合 觀察值 第二回合 觀察值三、輔導與服務層面
0 0.67 (十)輔導服務 0.08 0.42 10-1.擔任班級導師、社團、系學會、代表隊指導老師 0.25 0.58 10-2.協助班級施測、身心障礙學生工作、特殊個案輔導 0.33 0.67 10-3.協助學生、學校辦理活動、參與比賽 0.33 0.33 10-4.管理教學實驗室、電腦教室、專題教室、體育場館 設施 0.08 0 10-5.準時(執行)繳交教室日誌、教學評量 0.25 0.17 10-6.擔任校外公益團體等服務工作 0.25 0.33 (十一)就業服務 0.17 0.25 11-1.協助調查在校應屆畢業生就業率 0.42 0.5 11-2.協助就業博覽會或校外參訪活動 0.17 0.42 11-3.協助國際及兩岸交流活動 0.33 0.5 (十二)招生 0.25 0.08 12-1.協助招生事務、招生專案計畫活動 1 0.25 12-2.參與招生宣導 0.08 0.25 (十三)推廣教育 0.75 0.33 13-1.規劃並執行完成推廣教育課程 0.5 0.42 (十四) 特色輔導與服務 0.25 0.58 14-1.特殊(重點)輔導與服務、優良成果(如智能輔導等) 0.83 0.67第 三 節 第 三 回 合 研 究 分 析
第 三 回 科技大學評鑑指標適切性評估之德菲法調查問卷共發出十二份，於2012 年 10月 24日 開 始 請 專 家 協 助 填 寫， 2012年 10月 31日 回 收 完 畢， 有 效 問 卷 十 二 份 。 第三回合德菲法問卷調查結果，M 100%大於3，SD 94%大於1。一、評鑑層面
根據第三回合問卷統計結果，所有研究層面與輔導與服務層面皆為適切性很高(M ≧4)，表示其他專家意見一致，如表 4-13 所示。 表 4-13 第 三 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 層 面 ) 評鑑層面 Mo 眾數 M 平均數 SD 標準差 一、 教學層面 4 3.75 1.138 二、 研究層面 4 4 0.603 三、 輔導與服務層面 5 4.25 0.866二、評鑑向度
根據第三回合德菲法問卷調查回收統計結果，專家學者 14 個向度裡面，5 個向度 的適切性很高(M≧4)，9 個向度適切性次高(4＞M≧3)且所有向度標準差都小於 1 表示 專家對向度已達共識。，如表 4-14 所示。 表 4-14 第 三 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 向 度 ) 評鑑層面/向度 Mo 眾數 M 平均數 SD 標準差 一、教學層面 (一)教師素質 4 3.83 0.835 (二) 教學暨教學事務 4 4.00 0.853 (三) 教學訓練 4 3.75 0.622 (四) 特色教學 4 4.17 0.718 二、研究層面 (五)公家機關研究計畫 4 3.67 0.492 (六)專案委託研究計畫(其他計畫) 4 3.83 0.718 (七) 專利(技轉) 3 3.33 0.651 (八)著作 3 3.5 0.522 (九)學術榮譽 4 4 0.603 三、輔導與服務層面 (十)輔導服務 4 4.17 0.577 (十一)就業服務 4 3.83 0.718 (十二)招生 5 4.17 0.835 (十三)推廣教育 4 3.75 0.452 (十四) 特色輔導與服務 3 3.75 0.754三、評鑑指標
評鑑指標由三大層面方式說明如下。 (一)教學層面 教學層面共有 14 個指標，3 個指標適切性很高(M≧4)，11 個指標適切性次高(4 ＞M≧3)，所有指標標準差都小於 1 表示專家對向度已達共識，如表 4-15 所示。 表 4-15 第 三 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -教 學 層 面 ) 評鑑指標 Mo 眾數 M 平均數 SD 標準差 (一)教師素質 1-1.助理教授以上 3 3.5 0.798 1-2.具乙級證照以上或 2 年實務工作年資 4 3.92 0.669 1-3.教學年資 3 3.42 0.793 1-4.升等 4 3.67 0.492 1-5.參加提昇教師素質之研習、訓練等 4 4.08 0.515 (二) 教學暨教學事務 2-1.正常教學(無學生成績公佈批改、上課不到 遲到早退、遲交課程綱要等異常行為) 5 4.5 0.674 2-2.輸入教學進度大綱 4 3.75 0.866 2-3.準時繳交學生成績 4 3.92 0.669 2-4.研製教材、教具 4 3.92 0.669 2-5.開發影音教材，用於學校 moodle 教學平台 3 3.50 0.522 2-6.優良教學成果(校外專題比賽獲獎、輔導證 照、資訊能力、外語能力認證、學程及其他補 救教學) 4 3.83 0.577 (三) 教學訓練 3-1.擔任教學訓練講師含大陸或海外上課 3 3.5 0.675 3-2.辦理教學研習(討)等教學訓練、活動 3 3.5 0.674 (四) 特色教學 4-1.特色(重點)教學(輔導班、菁英班之補救、 增廣教學等) 4 4.08 0.669(二)研究層面 研究層面共有 15 個指標，皆為適切性次高(4＞M≧3)，14 個指標標準差小於 1 表 示專家已達共識，指標 9-4.出席學術會議擔任主持人標準差等於 1，但與第二回的平均 數並無顯著性差異，如表 4-16 所示。 表 4-16 第 三 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -研 究 層 面 ) 評鑑指標 Mo 眾數 M 平均數 SD 標準差 (五)公家機關研究計畫 5-1.國科會、教育部或其他公家機構審核通 過之專題研究計畫 4 3.83 0.718 5-2.教學計畫或人才培育計畫 4 3.83 0.389 (六)專案委託研究計畫(其他計畫) 6-1.產業界(民營機構)委託研究計畫 4 3.67 0.888 6-2.國科會審核通過之大專生參與專題研究 計畫 3 3.75 0.754 (七) 專利(技轉) 7-1.國內外發明、新型、新樣式專利 3 3.08 0.793 7-2.具校名之國內外發明、新型、新樣式專 利 3 3.17 0.577 7-3.研發成果及技轉績效 3 3.33 0.651 (八)著作 8-1.發表優良學術期刊(SCI、SSCI、EI、FLI、 Econlit、本國 TSSCI 等級) 3 3.58 0.669 8-2.發表優良學術期刊(未列入 SCI、SSCI、 EI、A&HCI) 3 3.17 0.718 8-3.發表優良國內學術期刊、學報論文、國 內外研討會論文 3 3.42 0.669 8-4.出版書籍編著(編譯) 3 3.33 0.651 (九)學術榮譽 9-1.擔任期刊論文編審委員或國內外學術機 構研究或教學訪問者 3 3.5 0.798 9-2.擔任公民機構(含學術團體)聘任委員 4 3.58 0.793 9-3.獲邀專題演講 3 3.42 0.996 9-4.出席學術會議擔任主持人 3 3.42 1
(三)輔導與服務層面 輔導與服務層面共有 13 個指標，7 個指標適切性很高(M≧4)，6 個指標適切性次 高(4＞M≧3)，指標 11-1.協助調查在校應屆畢業生就業率標準差＞1，與第二回合一樣 表示專家已確定意見並無再修改，如表 4-17 所示。 表 4-17 第 三 回 合 德 菲 法 問 卷 調 查 結 果 統 計 分 析 摘 要 (評 鑑 指 標 -輔 導 與 服 務 層 面 ) 評鑑指標 Mo 眾數 M 平均數 SD 標準差 (十)輔導服務 10-1.擔任班級導師、社團、系學會、代表隊指 導老師 5 4.42 0.669 10-2.協助班級施測、身心障礙學生工作、特殊 個案輔導 4 4.25 0.754 10-3.協助學生、學校辦理活動、參與比賽 4 4.25 0.754 10-4.管理教學實驗室、電腦教室、專題教室、 體育場館設施 4 4.08 0.669 10-5.準時(執行)繳交教室日誌、教學評量 4 3.83 0.937 10-6.擔任校外公益團體等服務工作 4 4.17 0.718 (十一)就業服務 11-1.協助調查在校應屆畢業生就業率 4 3.50 1.168 11-2.協助就業博覽會或校外參訪活動 4 3.67 0.888 11-3.協助國際及兩岸交流活動 4 3.58 0.996 (十二)招生 12-1.協助招生事務、招生專案計畫活動 4 4.25 0.452 12-2.參與招生宣導 4 4.25 0.622 (十三)推廣教育 13-1.規劃並執行完成推廣教育課程 4 3.67 0.492 (十四) 特色輔導與服務 14-1.特殊(重點)輔導與服務、優良成果(如智能 輔導等) 3 3.75 0.754
五、分析收斂
第二回合與第三回合觀察值(Observation：O)一個向度與二個指標有顯著性差異， 檢查問卷結果顯示如下。 向度：(十二)招生(第二回合 Mo：4 M：4.08 / 第三回合 Mo：5 M：4.17)，指標： 5-1.國科會、教育部或其他公家機構審核通過之專題研究計畫(第二回合 Mo：3 M：3.75 / 第三回合 Mo：4 M：3.83)，兩項都是因為第三回合眾數提高一個等級的原因。 指標：6-2.國科會審核通過之大專生參與專題研究計畫(第一回合觀察植：0.67 /第 二回合觀察植：0.08 第一回合觀察植：0.75 )專家意見呈現不穩定情況但標準差小於 1， 所以本研究不再探討，其餘題項並無顯著性差異，本研究於第三回合結束問卷，如表 4-18 所示。表 4-18 第 二 回 合 與 第 三 回 合 觀 察 表
評鑑層面/評鑑向度/指標項目
第二回合 觀察值 第三回合 觀察值 一、教學層面
0.33 0.25 (一)教師素質 0.25 0.17 1-1.助理教授以上 0.33 0.5 1-2.具乙級證照以上或 2 年實務工作年資 0.25 0.08 1-3.教學年資 0.5 0.42 1-4.升等 0.25 0.33 1-5.參加提昇教師素質之研習、訓練等 0.08 0.08 (二) 教學暨教學事務 0 0 2-1.正常教學(無學生成績公佈批改、上課不到遲到早 退、遲交課程綱要等異常行為) 0.58 0.5 2-2.輸入教學進度大綱 0.08 0.25 2-3.準時繳交學生成績 0.08 0.08 2-4.研製教材、教具 0 0.08 2-5.開發影音教材，用於學校 moodle 教學平台 0.5 0.5 2-6.優良教學成果(校外專題比賽獲獎、輔導證照、資 訊能力、外語能力認證、學程及其他補救教學) 0.17 0.17 (三) 教學訓練 0.42 0.25 3-1.擔任教學訓練講師含大陸或海外上課 0.33 0.5 3-2.辦理教學研習(討)等教學訓練、活動 0.5 0.5 (四) 特色教學 0.08 0.17 4-1.特色(重點)教學(輔導班、菁英班之補救、增廣教學 等) 0.08 0.08(續 ) 表 4-18 第 二 回 合 與 第 三 回 合 觀 察 表
評鑑層面/評鑑向度/指標項目
第二回合 觀察值 第三回合 觀察值 二、研究層面
0.08 0 (五)公家機關研究計畫 0.33 0.33 5-1.國科會、教育部或其他公家機構審核通過之專題研究 計畫 0.75 0.17 5-2.教學計畫或人才培育計畫 0.17 0.17 (六)專案委託研究計畫(其他計畫) 0.08 0.17 6-1.產業界(民營機構)委託研究計畫 0.33 0.33 6-2.國科會審核通過之大專生參與專題研究計畫 0.08 0.75 (七) 專利(技轉) 0.08 0.33 7-1.國內外發明、新型、新樣式專利 0.08 0.08 7-2.具校名之國內外發明、新型、新樣式專利 0.17 0.17 7-3.研發成果及技轉績效 0.25 0.33 (八)著作 0.67 0.5 8-1.發表優良學術期刊(SCI、SSCI、EI、FLI、Econlit、 本國 TSSCI 等級) 0.58 0.58 8-2.發表優良學術期刊(未列入 SCI、SSCI、EI、A&HCI) 0.25 0.17 8-3.發表優良國內學術期刊、學報論文、國內外研討會論 文 0.58 0.42 8-4.出版書籍編著(編譯) 0.67 0.33 (九)學術榮譽 0.08 0 9-1.擔任期刊論文編審委員或國內外學術機構研究或教 學訪問者 0.5 0.5 9-2.擔任公民機構(含學術團體)聘任委員 0.58 0.42 9-3.獲邀專題演講 0.5 0.42 9-4.出席學術會議擔任主持人 0.58 0.5(續 ) 表 4-18 第 二 回 合 與 第 三 回 合 觀 察 表
