第五章 德懷術建構教學卓越評估指標問卷調查分析與討論
第一節 第一回合德懷術調查問卷結果分析
經過文獻歸納整理,初步建構完成「高等技職校院教學卓越評估指標 初稿」,經專家諮詢後再做修訂。為使所建構之指標更臻周延,讓本研究 之研究問題能獲得解答,須再針對初步建構之指標進行二回合德懷術問卷 調查工作。
第一回合德懷術問卷於 2010 年 5 月 22 日以電子郵件寄出 16 份,於 2010 年 5 月 29 日全部回收,回收率百分之百。此調查問卷係以文獻探討 建構之「高等技職校院教學卓越評估指標」為基礎發展出來。填答說明中 請德懷專家針對調查問卷內容項目,用五點量表作答方式,針對各項指標 評定其適切程度,評分方式分為五分制,以「1」代表非常不適切,「5」
代表非常適切,中間分數則按適切程度,分別以「2、3、4」加以評分,
數字愈大代表愈適切;並提供開放意見欄由專家表示增修意見。
在問卷統計分析中,以眾數(Mo)瞭解德懷術專家的集中情形;以平 均數(M)瞭解各指標適切性程度;以標準差(SD)瞭解德懷術專家意見 的離散情形。二回合德懷術的評定準則為,專家對教學卓越指標的集中 性、適切性及一致性意見需達到下列標準1.眾數(Mo)≧4、2.平均數(M)
≧4、3.標準差(SD)<1.2,未達上述三項標準者,表示專家對此指標共
表5-1 「A-師資」構面指標第一回合德懷術問卷意見統計表(續) 回應於表內綜合評析欄中。其中「從 quality assurance 角度而言,優良 之教師指標是否可考慮加入教師對學校校務及特色發展所投入之輔助指
表5-2 「A-師資」構面指標第一回合德懷術問卷意見與綜合評析表(續)
表5-2 「A-師資」構面指標第一回合德懷術問卷意見與綜合評析表(續)
一、指標:A7-師生互動時間(office hour)之落實 二、專家意見:
(一)office hour 不能代表互動之質,可指出參與學生學習、成長各項輔導工作 之機制(2)。
(二)此項指標已經包含在 A3 指標內,單獨提出來有點奇怪,且目前各校教學 評量制度的實施皆有尚待改善的空間(13)。
(三)不易管控是否落實(4)。
(四)建議修訂為「落實師生互動時間(office hour)」(15)。
三、綜合評析:
表5-2 「A-師資」構面指標第一回合德懷術問卷意見與綜合評析表(續)
一、指標:A9-聘任具業界實務經驗及產學合作、應用型研究能力之教師 二、專家意見:
具業界實務經驗教師之定義應清楚定義(3)。
三、綜合評析:
(一)本研究「業界經驗教師」係指具 3 年以上業界服務年資者。
(二)指標依專家建議修訂為:聘任具 3 年以上具業界實務經驗及產學合作、應 用型研究能力之教師。
一、指標:A10-訂定選送教師赴公民營機構研習或出國進修之計畫 二、專家意見:
建議兩項事件分開列(2)。
三、綜合評析:
指標依專家意見修訂為:選送教師赴公民營機構研習服務或出國進修及其分 別占專任教師數百分比。
一、指標:A11-鼓勵教師進行教與學研究 二、專家意見:
(一)教與學研究之字眼較籠統(2)。
(二)本項係屬大範圍,建議轉化成實質內容(7)。
(三)建議改為「鼓勵教師進行教與學相關研究之機制規劃」使更明確(16)。
三、綜合評析:
本項指標經第一回合專家回收問卷之統計資料,平均數<4,顯示專家意見 分岐,經電話與德懷專家討論,此項指標已含在A-1 中,刪除。
一、指標:A12-建立教師教學專業培訓制度 二、專家意見:
(一)此項指標與 A1、A4 有關,需要聯結才能落實(13)。
(二)與 A-11 相近,培訓內容為何?(16)。
(三)指標順序排序一下,建議將增進教師教學能力之相關指標放在第一項(7)。
三、綜合評析:
本項指標已融入「A1-強化教師專業成長專責單位之功能」中。刪除。
其他建議:從quality assurance 角度而言,優良之教師指標是否可考慮加入教師 對學校校務及特色發展所投入之輔助指標。
綜合評析:與問卷內容增修無關,將列入本研究結論與建議之參考。
資料來源:研究者自行整理
三、指標內涵修訂意見對照
總計「A-師資」構面,經第一回合德懷問卷後,計刪除 4 項(A4、
A5、A11、A12)指標,修訂 7 項指標內涵,2 項指標無修訂意見,無新
A7-師生互動時間(office hour)之落實 A5-落實師生互動時間:如每師每週參與 學生學習、成長等各項輔導工作時數
貳、「B-學生」構面
二、專家意見彙整
對於「B-學生」構面,部分專家呈現不同意見和看法,意見彙整如 表5-5,包括專家意見及綜合評析二部份。專家意見中,計有 10 位專家 提出25 餘項意見。建議新增「提升學生學習動機及主動學習之有效方法」
及「強化學生就業力措施及成效」等2 項指標。針對專家所提意見一一 回應於表內綜合評析欄中。其中「建議加速訂定學生基本能力共用指標 與機制,供各校參考運用」、「建議教育部邀集各校討論改善師大問卷 內容」、及「國、高中亦要推動提升外語能力」等3 項建議事項與本研 究無關,將列入本研究結論與建議之參考。
表5-5 「B-學生」構面指標第一回合德懷術問卷意見與綜合評析表 一、指標:B1-訂定學生基本能力指標及檢定機制
二、專家意見:
(一) 需要有課程地圖,及系所培養學生核心能力(5)。
(二) 立意良好,但外部檢定之費用已造成學生沉重負擔,內部檢定可信度又受 到質疑,建議加速訂定共用指標與機制,供各校參考運用(16)。
三、綜合評析:
(一)依專家意見將「課程地圖」納入課程指標中。
(二)「建議加速訂定共用指標與機制,供各校參考運用」乙節將列入本研究結論 與建議之參考。
一、指標:B2-落實學生學習成效之考核 二、專家意見:
(一) 在畢業前應進行專業級性向學習成果評估(5)。
(二) 考核量化指標不易訂定(16)。
三、綜合評析:
為使指標更具體明確及具可評估性修訂為:
落實學生學習成效之考核:除畢業學分數外,依學校發展特色訂定之基本能力畢 業門檻數,如語文、資訊、游泳等。
一、指標:B3-建置學習輔導機制(含成效不佳學生預警機制、輔導措施)
二、專家意見:
建議指標修正為「強化或建置學習輔導機制」(15)。
三、綜合評析:
(接下頁)
表5-5 「B-學生」構面指標第一回合德懷術問卷意見與綜合評析表(續)
表5-5 「B-學生」構面指標第一回合德懷術問卷意見與綜合評析表(續)
(一)學生之學習課內、課外並重,因此目前教育趨勢強調 co-curriculum,故指標 除『B10-強化學生社團與課外活動機制』外,可加入『參與社團』、『依各 校發展特色社會服務工作』等指標(2)。
(二)私立技專校院學生家庭環境較差,通常須打工,影響參與意願(13)。
(接下頁)
表5-5 「B-學生」構面指標第一回合德懷術問卷意見與綜合評析表(續)
三、綜合評析:
(一)為形塑技專校院學生良好的工作態度與服務社會之精神,教育部積極推動
「勞作教育與服務學習課程」,本項擬依專家建議並結合教育部政策,將指 標修訂為「強化勞作教育與服務學習課程化機制及其學分數」。
(二)移到 C 課程構面。
一、指標:B11-有系統的測量和紀錄學生成就 二、專家意見:
(一)學生成就?建議具體指出何種成就(7)。
(二)「測量學生成就」很困難,本指標的用語似乎可討論(13)。
(三)與「B2 -落實學生學習成效之考核」相似。不易辦理(16)。
三、綜合評析:
依建議指標修訂為「建置學生歷程檔案及其百分比」
建議一:建議新增指標:提升學生學習動機及主動學習機制(1)。
綜合評析:
依專家建議新增「提升學生學習動機及主動學習之有效作法」指標:
(1)建置學生線上學習機制;(2).學生線上使用平均時間 (3)學生使用數位化教材比率;(4).學生線上教材取閱率
建議二:建議新增指標:強化學生就業力措施及成效(依各校發展特色規劃)(1)。
綜合評析:依專家建議新增上述指標。
資料來源:研究者自行整理
三、指標內涵修訂意見對照
總計「B-學生」構面,經第一回合德懷問卷後,計刪除 3 項(B4、
B6、B7)指標,修訂 6 項指標內涵,2 項指標無修訂意見,移出 1 項指 標,新增2 項指標,由原 12 個指標,修訂為 10 個指標,詳如表 5-6。
表5-6 「B-學生」構面指標第一回合德懷術問卷修正意見對照表
修正前(12項) 修訂後(10項)
B1-訂定學生基本能力指標及檢定機制 B1-訂定學生基本能力指標及檢定機制 B2-落實學生學習成效之考核 B2-落實學生學習成效之考核:
除畢業學分數外,依學校發展特色訂 定之基本能力畢業門檻數,如語文、
資訊、游泳等
(接下頁)
表5-6 「B-學生」構面指標第一回合德懷術問卷修正意見對照表(續) B10-強化學生社團與課外活動機制 B10-強化勞作教育與服務學習課程化機
制及其學分數(移至C課程構面)
表5-7 「C-課程」構面指標第一回合德懷術問卷意見統計表
表5-8 「C-課程」構面指標第一回合德懷術問卷意見與綜合評析表(續)
表5-8 「C-課程」構面指標第一回合德懷術問卷意見與綜合評析表(續)
表5-9 「C-課程」構面指標第一回合德懷術問卷修正意見對照表(續)
二、專家意見彙整
對於「D-教學品質管控機制」構面,計有 1 位專家提出 1 項意見,
意見彙整如表5-11,包括專家意見及綜合評析二部份,針對專家所提意 見回應於表內綜合評析欄中。
表5-11 「D-教學品質管控機制」構面指標第一回合德懷術問卷意見與綜 合評析表
一、指標:D1-追蹤教學評鑑改善建議之後續辦理情形 二、專家意見:
「教學評鑑」、「教學評量」與「教師評鑑」應該是不同的,但出現在不同 的地方(13)。
三、綜合評析:
(一)教學用評量係指每門課程在期末,學生對教師的評量。
(二)教師評鑑,是學校對教師適任與否的評鑑,研究、教學、及服務三面向的總 體評鑑。
(三)教學評鑑是對學校教學成效評鑑。
(四)本項指標是指後者。
資料來源:研究者自行整理
三、指標內涵修訂意見對照
總計「D-教學品質管控機制」構面,經第一回合德懷術問卷後,2 項指標無修訂意見,指標數維持修訂前的2 項,詳如表 5-12。
表5-12 「D-教學品質管控機制」構面指標第一回合德懷術問卷修正意見 對照表
修正前(2項) 修訂後(2項)
D1-追蹤教學評鑑改善建議之後續辦理情
D1-追蹤教學評鑑改善建議之後續辦理情