德懷術背景評鑑指標之分析與討論

本節將分三部分，首先分別針對第一回合及第二回合德懷術問卷中，背 景評鑑指標之調查結果與討論進行說明，最後為本節小結。

壹、第一回合德懷術問卷調查結果與討論

經過第一回合德懷術問卷回收統計，分析專家小組成員對大學學生社團 評鑑指標在「背景評鑑」類型指標項目之意見，其平均數、標準差、眾數、

四分差統計如表4-1-1：

148

149

畫（包含短中長程計畫、年度計畫、行事曆）能確實與社團宗旨產生連結，

並持續修正。」低於0.6，表示專家小組成員對於該題評量指標之評估已達 高度一致性共識。而1-1 及 1-4 兩題之四分差為 1，介於 0.60 和 1 之間，表 示專家小組成員對於該評量指標達到中度一致性共識。1-2「社團宗旨與學 校辦學理念一致，並定期檢視。」之四分差則是大於1，顯示專家小組成員 對於本題之一致性共識較低。

三、評量指標判定結果

經由上述分析大學學生社團評鑑指標，在「背景評鑑」類型之評量指 標，其中1-3「社團發展計畫（包含短中長程計畫、年度計畫、行事曆）能 確實與社團宗旨產生連結，並持續修正。」之平均數大於5，標準差小於 1 且四分差小於0.6，故依本研究之判定準則，本題評量指標予以保留，並進 行第二回合德懷術專家問卷。

1-1「社團宗旨能符合專業標準，納入學習發展成果目標，以增強社團 參與者之整體教育經驗。」平均數小於5，標準差小於 1 且四分差介於 0.6 和1 之間，故依本研究之判定準則，本題評量指標應進行修正。部分專家小 組成員認為原指標內文提及之「專業標準」所指涉之內容並不精確，建議修 正為「納入學習發展成果目標」應較為適切。

1-2「社團宗旨與學校辦學理念一致，並定期檢視。」平均數小於 5，標 準差大於1 且四分差大於 1，故依本研究之判定準則，本題評量指標應予以 刪除。部分專家小組成員之意見包括：「社團宗旨不一定要與學校辦學理念 一致」、「社團宗旨與學校辦學理念不一定有必然關係」、「社團宗旨以該社團

150

151

152

153

1-3 社團發展計畫（包含短中長程 計畫、年度計畫、行事曆）能 確實與社團宗旨產生連結，並 持續修正。

5.33 5.75 0.467 6 0.125

1-4 社團活動的目的是使社員具備 公民素養，以期能促進社會變 革。

3.25 2.42 1.128 2 0.625

一、適切程度分析

由表4-1-5 顯示，背景評鑑 4 題評量指標中，1-1 及 1-3 此 2 題之平均數 分別為5.17 及 5.75 大於 5，表示專家小組成員均認為此 2 題之適切程度 高，且標準差0.982 及 0.467 均小於 1，表示專家小組成員對此 2 題評量指 標意見之分歧已逐漸縮小。同時此2 題之第二回合平均數均大於第一回合平 均數，表示專家小組成員的意見朝向評量適切度高的方向達成共識。

另1-2 及 1-4 此 2 題之平均數分別為 1.83 及 2.42 均小於 5，表示專家小 組成員認為此2 項評量指標之適切程度偏低。1-2 之標準差 0.944 小於 1，

同時此題之第二回合標準差低於第一回合標準差，表示專家小組成員對此題 評量指標意見之分歧亦逐漸縮小。1-4 之標準差 1.128 大於 1，表示專家小 組成員對此題評量指標意見之分歧仍大。

二、一致性分析

由表4-1-5 顯示，背景評鑑 4 題評量指標之四分差，1-1 為 0.5、1-2 為 0.5、1-3 為 0.125 均低於 0.6，表示專家小組成員對此 3 項評量指標之評估 已達高度一致性共識。1-4 之四分差 0.625 介於 0.60 和 1 之間，表示專家小 組成員對於該評量指標亦達到中度一致性共識，且對照第一回合之四分差數

154

字亦有下降。

三、評量指標判定結果

專家小組成員對大學學生社團評鑑指標在「背景評鑑」項目評量指標之 意見，其中1-1 及 1-3 由平均數、標準差及四分差之統計資料評估，參考眾 數之結果，已達適切程度高、一致性高之狀態。1-2 及 1-4 於第一回合德懷 術統計結果判定為需刪除，經過第二回合德懷術問卷調查結果，平均數顯示 專家小組成員維持第一回合之評估，認為此2 題適切度較低，由標準差及四 分差之統計資料評估，參考眾數之結果，已達中度及高度一致性，專家小組 成員朝向評量指標適切程度低的方向逐漸達成共識。

參、小結

綜合以上分析，經過第二回合德懷術問卷回收統計後，分析12 位專家 小組成員對大學社團評鑑4 種類型評鑑指標之意見，依照本研究擬定之評量 指標之保留、修改及刪除之判定準則，分別為：（一）保留條件：M≧5、

SD＜1 且 QD≦0.6，（二）修改條件：M＜5 或 SD＞1 或 0.6＜QD＜1，

（三）刪除條件：M＜5、SD＞1 且 QD≧1。第二回合德懷術後之背景評鑑 指標判定結果及指標穩定程度如表4-1-6：

155

表4-1-6

第二回合德懷術背景評鑑指標判定結果暨指標穩定程度

編號 評量指標 判定結果 指標穩定程度

1-1

社團宗旨符合專業標準（例如能納 入學習發展成果目標），以增強社團 參與者之整體教育經驗。

保留 適切程度高、一致性高

1-2 社團宗旨與學校辦學理念一致，並

定期檢視。 修改 適切程度低、一致性高

1-3

社團發展計畫（包含短中長程計畫、

年度計畫、行事曆）能確實與社團 宗旨產生連結，並持續修正。

保留 適切程度高、一致性高

1-4 社團活動的目的是使社員具備公民

素養，以期能促進社會變革。 修改 適切程度低、一致性中

由表4-1-6 顯示，經過第二回合德懷術專家小組成員評量，在背景評鑑 部分，指標1-1 及 1-3 判定為保留，指標內容適切程度高且一致性高。

指標1-2 及 1-4 依判定準則均為須修改，1-2 之指標內容適切程度較低且 專家小組成員之一致性高，1-4 之指標內容一樣適切程度較低但專家小組成 員之一致性較低。在指標1-2 的部分，因本項指標之編製，係參考修改自美 國高等教育標準促進評議會（CAS）於 2016 修正之「自我評量指引」

（SAG）其中針對校園活動方案所制定之 14 個自我評量項目中，「使命」

（Mission）之自評項目 1.2：「社團發展、傳遞並定期檢視其宗旨。」及自 評項目1.3，以及俄亥俄州立大學「組織自我評鑑」方案中之社群成功架 構：「社團成立宗旨與學校之辦學理念一致。」等評量指標。

而在指標1-4 的部分，係參考修改自美國高等教育標準促進評議會

（CAS）於 2016 修正之「自我評量指引」（SAG）其中針對校園活動方案所 制定之14 個自我評量項目中，「使命」（Mission）之自評項目 1.1：「社團成

156

立宗旨在於透過開發、接觸和參與提高社員合作和領導能力的課程和活動，

來增強社員的整體教育體驗，同時使社員成為負責任的倡導者和公民，並補 充學院的學術課程。」及俄亥俄州立大學「組織自我評鑑」方案中之社群成 功架構：「社團方案的目的是積極的促進社會變革。」等評量指標。經過文 獻探討及協助完成編制本評鑑指標內容效度之專家學者意見，研究者認為本 項指標在背景評鑑層面上有其重要性，能夠發揮其引導社團經營之積極功 能，故經與指導教授討論後，決定保留此項指標。

157