第一章 緒論
第四節 研究方法與流程
國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
第三節 名詞釋義
為使本研究探討聚焦和明確 ,茲將所涉及的重要名詞, 界定其概念意涵如下:
壹、教育學門系所
學門具有特定的學科邏輯、專業用語和理論等特點,而 系所的設立宗旨和課程 規劃以特定學門為主,則可 將之視為該學門的系所。本 研究將「教育學門系所」視 為歸屬為教育學門的系所, 其名稱可能包括「教育」兩 字,而設立目標以培育教育 領域專業人員為主,但不侷 限於培育中小學教師。
貳、系所評鑑
系所評鑑以公私立大學校院 學系和研究所為對象,根據系所在某段期間的整體 經營成果和相關人員表現, 以評定其績效表現和品質。 在本研究中,系所評鑑指教 育部委託外部機構(如財團法人高等教育評鑑中心基金會),針對大學校院屬於教育 學門的系所,辦理外部評鑑,以評估 系所的經營成果和人員表現情形。
參、系所評鑑指標
系所評鑑指標可以看成是一 套指標系統,根據某些教育 評鑑理論基礎而建構,
可分成向度、次向度、評鑑 指標等層次,用於評估和判 斷系所整體經營成果和相關 人員表現的狀況。在本研究 中是指適用於評鑑教育學門 系所經營成果和人員表現的 指標,可據以判斷系所 的運作品質和績效。
第四節 研究方法與流程
壹、研究方法
為期達成研究目的,主要應用以下幾 種研究方法,簡要說明如下:
一、模糊德懷術
德懷術係以專家意見共 識為主的決策方式(Hasson, Keeney & McKenna, 2000;
Okoli & Pawlowski, 2004; Rowe & Wrightb, 1999),導入模糊理論(Fuzzy theory),
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
以解決傳統德懷術無法呈現 的模糊語意變數,給予專家 更彈性的評估尺度,藉以得 出較能反映群體意志的意見結果。
本研究根據相關文獻的探討 ,初擬教育學門系所評鑑的 指標架構。經立意取樣 出對高等教育評鑑和系所經 營課題學有專精的專家,藉 以邀請專家學者針對本研究 所編制的指標內容提供審查和修正意見,做為專家審題結果。彙 整專家審題意見後,
再進行模糊德懷術 ( Fuzzy Delphi)問卷調查,經由模糊數的 運算作為指標選取的 結果,完成教育學門系所評鑑指 標體系的建構,以作為後續 網絡分析法的調查依據。
二、網絡分析法
網絡分析法( Analytic Network Process, 以下簡稱 ANP)是 Saaty 為改善階層 分析法( Analytic Hierarchy Process, 以下簡稱 AHP)所發展,AHP 假設決策模式 中的各層級架構彼此相互獨立,而 ANP 是考量各要素和指標之間的內部依存
(interdependence)和回饋機制(feedback),可以用網絡關係去設定各要素和指標 項目之間的影響(Satty, 2001a, 2001b, 2004)。由於系所評鑑指標體系可視為層級性 架構,且層級指標之間可能 存在關聯性,因此使用 ANP 分析專家對於建構教育學門 系所評鑑指標的看法。
本方法係透過先前模糊德懷 術所建構的指標體系,於此 階段進行各指標間相對 權重的評估。張魁峯(2009)提及,以 ANP 方法進行評鑑指標權重值的分析,除分 析各向度和指標的權重值, 也注意一致性比率的考驗, 確認填答結果具一致性。
貳、研究流程
根據研究目的和待答問題, 擬定本研究的實施流程如圖 1-1 所示。主要把研究 流程分成五個階段。在準備 階段:重點在確定研究主題 、收集和分析文獻、初步建 構教育學門系所評鑑指標體 系架構,其中文獻分析部分 是針對系所評鑑理論課題、
系所評鑑執行課題、系所評 鑑指標建構課題、系所評鑑 指標體系建構等四方面,進 行探討。在專家審題階段的 工作,計有抽樣專家學者、 編製專家審題問卷、分析問 卷資料和修改指標體系等。 指標建構階段即是針對前述 修編的指標體系進行模糊德 懷術調查,確認教育學門系 所評鑑指標體系的建置。權 重分析階段則是透過 ANP 分析各指標的重要性和關聯 情形,並進行指標權重值的 填答者背景變項影響性考
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
驗。最後在總結階段,進行 工作是總結系所評鑑指標體 系權重值的分析結果和背景 變項影響情形的分析結果, 提出具體的教育學門系所評 鑑指標體系及有關應用建 議,並匯總說明研究結論, 和提出可供主管教育行政機 關、教育學門系所、後續研 究者等參考的具體建議。
圖 1-1 研究流程
確定研究主題
分析背景與問題 確定研究目的
↓ 文獻探討
系所評鑑理論課題 系所評鑑執行課題 系所評鑑指標建構 課題
系所評鑑指標體系 建構
↓
文獻分析階段
初步建構教育學門系所評鑑指標體系↓
抽樣學者專家
↓ 專家審題
↓
分析審題結果
↓
專家審題階段
擬定教育學門系所評鑑指標體系模糊德懷術問卷
↓
模糊德懷術問卷調查
↓
分析模糊德懷術結果
↓
指標建構階段
擬定教育學門系所評鑑指標體系相對權重問卷
↓
進行相對權重問卷調查
↓
問卷內容轉換為 ANP 資料
↓
分析 ANP 調查結果
↓
權重分析階段
提出教育學門系所評鑑指標體系↓
總結階段
提出研究結論和建議資料來源:研究者繪製