問卷設計

本研究在建立國軍士官績效評量指標時，採取三階段進行，分述如下：

第一階段 (研擬指標之建構)：為了探討國軍士官績效評量指標，透過 相關文獻資料的蒐集與分析，並以現行國軍士官考評制度為主幹，參考美國 士官考評方式與我國公部門考評方式，歸納比較，整理出五個主要指標，分 別為品德與責任、工作與才能、專業與素養、領導與能力、體能與精神，建 構出本研究研擬之層級架構與指標。

第二階段（修正與確定指標）：據本研究研擬之指標設計德爾菲問卷，以 獲得專家群對於評量指標之意見，彌補層級架構與指標不足之處，問卷內容 採封閉結合開放式之填答方式，以面對面訪談（face to face interview）或郵 寄之方式進行。

第三階段（指標權重）：根據德爾菲問卷結果，透過層級分析法問卷，將 所有的評估指標計算出幾何平均數，建立成對比較矩陣後，透過Expert Choice 2000軟體進行AHP法分析指標權重分配，最後將以現行的制度作比較，找出 異同作出結論或建議。上述之問卷流程如圖3.2所示。

圖3.2 問卷設計流程圖 資料來源：本研究整理

3.3.1德爾菲法問卷

本研究利用德爾菲法，針對現任國防管理學院專業教官、國防部參謀本 部政策單位及各軍種最高執行單位，合計 12 位專家，採匿名方式來發表意 見，分別對指標項目的增減、確立實施二次問卷調查；而專家分別來自軍事 院校、政策部門及執行部門，使問卷調查結果更具說服力，其人數比例如表 3.3 所示。

研擬指標

增減指標項目問卷調查

意見彙整分析

確立指標項目問卷調查

確認指標間之獨立性

指標成對比較問卷調查3

AHP法計算指標權重 是

否

專家有意見

專家意見 是否一致

3.3 專家學者問卷分配表

回收人數

區分 人數

第一次問卷 第二次問卷 國 防 部

軍 事 院 校 4 4 4

國 防 部

政 策 部 門 4 4 4

國 防 部

執 行 部 門 4 4 4

合計 12 12 12

資料來源：本研究整理 一、第一次德爾菲問卷

本研究以前述指標項目，設計第一次問卷，內容包括各構面、評估 準則名稱及重要程度評分等模式，計發放12 份問卷，回收 12 份；評分 標準為 1~100 分，分數愈高表該項目愈重要，高於 60 分表示接受此準 則，低於60 分表示不接受。問卷回收後，剔除平均分數低於 60 分之評 估準則，並確認每項準則之變異係數是否小於 0.3 達到專家共識水準，

其餘之項目則為影響士官績效評估之關鍵準則。爲顧及填答者認為問卷 中仍有其他評估準則尚未考慮，因此於問卷後預留空白欄提供專家填寫 不足之評估準則項目，並給予新增之評估準則重要程度評分。第一次德 爾菲問卷之詳盡內容，如附錄一所示。

二、第二次德爾菲問卷

經由第一次德爾菲問卷之調查結果，剔除平均分數低於60 分之評估 準則，並加入新增之項目後，設計第二次德爾菲問卷，其過程與第一次 問卷設計方式相同，另增加每項準則第一次之平均得分供學者專家作為 填答時之參考依據。經由兩次德爾菲之問卷結果，刪除平均得分低於60 分之評估準則，並確認變異係數均小於0.3，剩餘項目經學者專家最終認 定後，確立出真正影響國軍士官績效評量之關鍵準則，因此建構出評估 士官績效之層級架構。依據上述問卷調查與學者專家共識性所建立之層 級架構，作為後續詳細評估模式之基礎。第二次德爾菲問卷之詳盡內容，

如附錄二所示。

3.3.2層級分析法問卷

經由兩次德爾菲問卷過程歸納出重要影響之評估準則後，確立出影響士 官績效評估之層級架構，進一步設計層級分析問卷，供國軍實際負責考評士 官之上尉編階以上主官填答，透過層級分析法衡量各構面間之相對權重，以 瞭解國軍各單位主官真正需求以及各項準則之相對權重。問卷以親自送達方 式交予單位主官填答。回收之問卷採用Expert Choice 2000 軟體分析每位專家 之評比結果是否符合一致性，將剩餘之有效問卷透過幾何平均法整合每位專 家之判斷值，以求取各準則之相對權重，瞭解各準則與士官考評之關聯性與 影響程度。

問卷內容分別將兩評估準則置於表格左右兩端，填答者比較兩項目後主 觀填答所評價之相對重要程度，評量尺度分為 9「絕強」、7「極強」、5「頗 強」、3「稍強」、1「相等」及介於上述五項尺度間之四項衡量值 2、4、6、8 等九級，填答者依據主觀意識判斷兩評估準則之相對重要性。譬如，在品德 與責任構面中，其中兩項準則為「公正與誠實」及「言行與榮譽」，若填答者 認為「公正與誠實」之重要性極強於「言行與榮譽」，則勾選靠近公正與誠實 之「極強」一欄。若認為「負責與主動」之重要性相等於「愛護和保養裝備 與設施」，則請勾選「相等」一欄。但填答者需注意若有A、B、C 三項準則，

其評估結果為（1）A：B 為 9「絕強」，表 B 絕弱於 A；（2）A：C 為 3「稍 強」，表C 稍弱於 A，由此可推估 B 較 C 弱，此時若填任何 B 強於 C 之選項，

則表填答者之判斷不一致，填答者須避免此狀況發生。層級分析法之問卷內 容如附錄三所示。