• 沒有找到結果。

大學學生評鑑教師教學指標初探

第二章 文獻探討

第三節 大學學生評鑑教師教學指標初探

1 Experiences of Teaching and Learning Questionnaire, ETLQ 2 Students’ Evaluations of Educational Quality Instrument, SEEQ 3 Evaluation of teaching competencies scale

4 Measures of Teaching Effectiveness-Individual Development & Educational Assessment (IDEA) Student Ratings of Instruction

5 The National Student Survey

6 Teaching Behaviours Inventory, TBI

7 Sample Institutional Evaluation Instruments-Dalhousie University 8 Sample Institutional Evaluation Instruments-Harvard University 9 Sample Institutional Evaluation Instruments-Humber College 10 Sample Institutional Evaluation Instruments-McGill University 11 Sample Institutional Evaluation Instruments-Ryerson University 12 Sample Institutional Evaluation Instruments-University of Minnesota 13 MIT Online Subject Evaluation AY2010-11 HASS Standard Questions 14 Princeton Mid-term-Evaluation-Questions

15 Berkeley Midterm evaluation

16 London Imperial College UG SOLE lecturer / module questions for 2013-2014 17 University of Pennsylvania Likert Scale Questions

18 Sample Institutional Evaluation Instruments-Queen’s University 資料來源:作者自行整理

‧ 國

立 政 治 大 學

N a tio na

l C h engchi U ni ve rs it y

38

壹、 國外常用大學學生評鑑教學量表

研究所蒐集的量表包括國外大學或機構中經常使用的六個量表,包含:「教 學經驗調查表(Experiences of Teaching and Learning Questionnaire, ETLQ) (Parpala, Lindblom-Ylänne, & Rytkönen, 2011) 」、「 學 生 評 鑑 教 育 教 學 品 質 (Students’

Evaluations of Educational Quality Instrument, SEEQ) (Marsh, 1987)」、「師教學能力 評鑑量表(Evaluation of teaching competencies scale) (Catano & Harvey, 2011)」、

「IDEA 的學生評鑑教學(IDEA, Student Ratings of Instruction) (IDEA, 2009)」、「全 國學生調查(The National Student Survey) (Richardson, Slater, & Wilson, 2007)」與

「教學效能測量─教學行為調查(Measures of Teaching Effectiveness-Teaching Behaviours Inventory)(Murray, 1997)」。

(一) 教學經驗調查表(Experiences of Teaching and Learning Questionnaire, ETLQ) Parpala、Ylänne 與 Rytkönen(2011)的研究中,透過行為科學、法律、獸醫等 系所的學生作重要性評估,研究結果發現在重要性上,來自各系所學生於教學經 驗中有以下幾項具有顯著差異:1.互動、2.結合理論與實踐、3.符合學生先備知 識、4.講述、5.分組作業、6.指導組別作業、7.刺激批判思考、8.鼓勵學生學習、

9.有發問機會、10.良好的教材、11.做中學、12.設施。在 Parpala 等人(2011)的研 究中,將這些概念作了描述型定義,如表 2-4

表 2- 4

ETLQ 教學經驗調查表

概念 描述 題目編號編號

1.教學實踐 清楚地定義預期學習

成果

評述預期的學習成效應該要清晰

的陳述。 1-1-1

對於作業的回饋 回饋的描述是鼓勵學生學習,而非

只給分不解釋。 1-1-2

互動 涉及一般性的互動,和一些在教學

情況中特殊定義的互動。 1-1-3

Instrument, SEEQ)

Marsh(1987) 發 展 出 學 生 對 教 學 品 質 評 量 表 (Students’ Evaluations of Educational Quality Instrument, SEEQ) (Marsh, 1987),一共有十個層面,包含:1.

學習/價值(Learning/Value);2.教師的熱忱(Instructor Enthusiasm);3.組織/清晰 (Organization/Clarity) ; 4. 團 體 互 動 (Group Interaction) ; 5. 個 別 友 善 (Individual Rapport);6.涵蓋廣度(Breadth of Coverage);7.測驗與評分(Examinations/Grading);

8.作業與閱讀(Assignments/Readings);9.負擔/難度(Workload/Difficulty);10.整 體性評分(Overall Rating Items),而各層面之題項如表 2-5。

表 2- 5

2.教師的熱忱(Instructor Enthusiasm)

熱心教學 2-2-1

‧ 國

立 政 治 大 學

N a tio na

l C h engchi U ni ve rs it y

41

活力與動力 2-2-2

用幽默感增強 2-2-3

引起你的興趣 2-2-4

3.組織/清晰(Organization/Clarity)

是否解釋清晰 2-3-1

充分準備並解釋教材 2-3-2

設立目標並追求之 2-3-3

上課是否易於作筆記 2-3-4

4.團體互動(Group Interaction)

鼓勵學生班級討論 2-4-1

學生相互分享想法 2-4-2

鼓勵同學發問並給予答覆 2-4-3

鼓勵表達 2-4-4

5.個別友善(Individual Rapport)

對個別學生是友善的 2-5-1

歡迎學生尋求協助 2-5-2

對學生們有興趣 2-5-3

學生容易會見 2-5-4

6.涵蓋廣度(Breadth of Coverage)

對照理論 2-6-1

給予背景知識 2-6-2

提出不同的觀點 2-6-3

提到當前的發展 2-6-4

7.測驗與評分(Examinations/Grading)

有價值的回饋 2-7-1

評分公平 2-7-2

測驗到課程重點 2-7-3

8.作業與閱讀(Assignments/Readings)

閱讀有價值者 2-8-1

‧ 國

立 政 治 大 學

N a tio na

l C h engchi U ni ve rs it y

42

增進理解 2-8-2

9.負擔/難度(Workload/Difficulty)

難度(易-難) 2-9-1

負擔(輕-重) 2-9-2

進度(慢-快) 2-9-3

課外時間 2-9-4

10.整體性評分(Overall Rating Items)

對課程的整體性評分 2-10-1

對教師的整體性評分 2-10-2

資料來源:作者自行整理

(三) 師教學能力評鑑量表(Evaluation of teaching competencies scale)

Catano 與 Harvey (2011)發現學生評鑑教學的評鑑內容中,並無法確認是否 與教師專業工作相關,也無法確定其評鑑結果是否即為教師工作表現的一部分。

因此在進行學生評鑑教師教學之前,必須先將教師教學工作的向度界定清楚。

Catano 與 Harvey (2011)使用關鍵事件分析法(Critical Incident Technique, CIT)方法 嘗試找出與教師有效教學相關的向度及定錨行為,方能用於教師評鑑。Harvey 與 Catano (2011)分析結果,將教師教學相關能力分為以下九種,並定義之:

1. 可得性(Availability):讓學生能學習的。

2. 問題解決(Problem-solving):有效解決阻礙課堂學習的問題。

3. 回饋(Feedback):給予學生作品口頭或紙本的評論。

4. 人際知覺(Social awareness):在上課中能察覺學生的感受。

5. 創造力(Creativity):透過不同的教學方式激發創新的想法。

6. 溝通(Communication):口語表達、書寫及聆聽的技巧。

7. 專業(Professionalism):面對學生及分數時能表現公正與誠實。

8. 認真盡責(Conscientiousness):注意細節;有組織性的。

9. 個別關懷(Individual consideration):對有需要的人展現覺察與同理。

Catano 與 Harvey (2011)針對上列九種有效教學能力,分別作了低、中、高能力 表現的描述,如表 2-6

(四) IDEA 的學生評鑑教學(IDEA, Student Ratings of Instruction)

IDEA 公司於 1970 年代就開始致力於研究教師教學評鑑的相關議題,發展 許多標準化的評鑑量表,其最主要的目的在於要增進教師教學,而其中受到美國 高等教育機構廣泛使用的量表即為學生評鑑教教學量表。IDEA(2009)將教學分為 六個層面及十二個概念,層面包含:1.基本認知背景(Basic Cognitive Background);

2.學習的應用(Application of Learning);3.表達(Expressiveness);4.智能發展 (Intellectual Development);5.終身學習(Lifelong Learning);6.團隊技能(Team Skills),如表 2-7

‧ 國

立 政 治 大 學

N a tio na

l C h engchi U ni ve rs it y

46

課程中時有強烈的參與欲望。 4-3-4

我對此課程較其他我參與的課程用功。 4-3-5

很想參與這名教師的課程。 4-3-6

我對參與這名教師所教授的課程沒有後悔。 4-3-7

在參與這堂課程之後,我對於朝這個領域研究有正面的感受。 4-3-8

整體而言,我會將這名教師評為優越的老師。 4-3-9

整體而言,我會將這個課程評為優異。 4-3-10

一般來說,我較其他學生付出更多的努力在學術上。 4-3-11 教師使用多元的方法─不只是考試,並客觀評量學生在課程中的發

展。 4-3-12

教師會期待學生在學習上擁有更多的責任感 4-3-13

教師在課堂中有高標準。 4-3-14

教師利用教學科技(如網路、e-mail、電腦操作、多元媒體展現等)

去促進學習。 4-3-15

資料來源:作者自行整理

(五) 全國學生調查(The National Student Survey)

全國學生調查(NSS, 2013)是為監督受到國家資助的高等教育機構,英格蘭、

威爾斯、北愛爾蘭以及蘇格蘭所實施的調查。全國學生調查由 Ipsos Mori 進行調 查,針對就讀最後年的大學生進行教學意見調查,要求受試者對他們參與高等教 育機構所提供之課程給予回饋。量表可分為七個層面的問題:包含 1.課程教學 (teaching on my course);2.作業評量與回饋(Assessment and Feedback);3.學術支 援(Academic Support);4.組織與管理( Organisation and Management);5.學習資源 (Learning Resources);6.個人發展(Personal Development);7.整體滿意度(Overall Satisfaction),如表 2-8

(六) 教學行為調查(Teaching Behaviours Inventory, TBI)

教學行為調查(TBI)是由 Harry Murray(1997)編制,被廣泛運用在許多高等教 育機構,教學行為調查量表可分為九個層面,而 Murray 針對九個層面進行說明:

‧ 國

立 政 治 大 學

N a tio na

l C h engchi U ni ve rs it y

50

提供學生有關課程問題的協助。 6-8-3

顯現對於異議的容忍。 6-8-4

有機會在課前與課後與學生交談。 6-8-5

9.輔助教學

使用視聽設備輔助。 6-9-1

確保視聽設備輔助是可使用的。 6-9-2

使用影音與電腦設備。 6-9-3

使用演示軟體。 6-9-4

使用視頻節目。 6-9-5

資料來源:作者自行整理

貳、 國外高等教育機構評鑑教師教學量表

在國外大學方面,除了一般大學之學生評鑑教師教學量表,如「皇后大學 (Queen’s University, 2008)」、「戴爾豪西大學(Dalhousie University, 2011)」、「漢博 工學院(Humber College, 2013)」、「懷雅遜大學(Ryerson University, 2008)」等。本 研究更透過「泰晤士世界大學排名 2012-2013(THE World University Ranking 2012-2013)」中排名前茅,且「教學(teaching)」、「國際視野(international outlook)」、

「研究(research)」、「產業收入(industry income)」、「學術引用量(Citation)」五個排 名指標分數中,「教學(teaching)」指標的分數較高者,分別是:「哈佛大學(Harvard University, 2011)」、「麻省理工學院(Massachusetts Institute of Technology, 2009)」、

「普林斯頓大學(Princeton University)(Princeton University, 2011)」、「倫敦帝國學 院 (Imperial College London, 2013) 」、「 加 州 大 學 柏 克 萊 分 校 (University of California Berkeley, 2009)」、「賓州大學(University of Pennsylvania, 2013)」、「明尼 蘇達大學(University of Minnesota, 2009)」、「麥基爾大學(McGill University, 2008)」

等大學之學生評鑑教師教學量表。而其排名與教學得分如表 2-10 所示。

(一) 戴爾豪西大學(Dalhousie University)

戴爾豪西大學(Dalhousie University)為加拿大歷史悠久的綜合型大學,全校 共有十二個學院,包括:人文科學和社會科學學院(Faculty of Arts and Social Sciences)、法學學院(Schulich School of Law)、管理學學院(Faculty of Management)、

電腦科學學院(Faculty of Computer Science)、研究生學院(Faculty of Graduate Studies)、科學學院(Faculty of Science)、醫學學院(Faculty of Medicine)、牙醫學 學院(Faculty of Dentistry)、醫療衛生學學院(Faculty of Health Professions)、工程 學學院(Faculty of Engineering)、建築與都市計畫學學院(Faculty of Architecture and Planning)、農學學院(Faculty of Agriculture)。其針對九個向度進行評鑑如表 2-11 所示:

5 92.9 Massachusetts Institute of Technology 6 89.5 Princeton University

8 88.0 Imperial College London

9 85.1 University of California, Berkeley 15 90.0 University of Pennsylvania

34 74.4 McGill University 47 66.1 University of Minnesota

(二) 哈佛大學(Harvard University)

哈佛大學(Harvard University)在泰晤士世界大學排名 2012-2013(THE World University Ranking 2012-2013)中排名第四。而其所使用的學生評鑑教師教學量表 可分為兩大部分,一對於課程進行評鑑,一針對教師進行評鑑。量表以滿意度(不

域也十分多元,包括應用科技(School of Applied Technology)、商業(The Business School)、媒體研究與資訊科技(School of Media Studies and Information

Technology)、社會及社區服務(School of Social and Community Services)、創意及 表演藝術(School of Creative and Performing Arts)、健康科學(School of Health Sciences)、醫療娛樂及旅遊 School of Hospitality, Recreation and Tourism)與人文科 學(School of Liberal Arts and Science)。其所使用的學生評鑑教學量表,分為兩大 部分,一為對於課程進行評鑑,一為針對教師進行評鑑。題目大多依據同意強度

(四) 麥基爾大學(McGill University)

麥基爾大學(McGill University)在 QS 世界大學排名(QS World University Rankings, 2013)為 21 名;在泰晤士世界大學排名 2012-2013(THE World University Ranking 2012-2013)排名 34,皆屬前茅。而在麥基爾大學(McGill University)所使 用的量表中,將題目分為三層級共 25 題,其中包含:一、大學層級(university-wide);

二、院系所層級(department or faculty-wide);三、教師層級(instructor requested)。

如表 2-14 所示

現、PowerPoint 呈現、e-mail 等)。 10-2-9

(五) 懷雅遜大學(Ryerson University)

懷雅遜大學(Ryerson University)共有八個學院,其中擁有全加拿大最大的商 學院(Ted Rogers School of Management),以及第三大的工程、建築科學院(Faculty of Engineering, Architecture and Science),其他包括文學院 (Faculty of Arts);傳播 及設計學院 (Faculty of Communication & Design);社會服務學院 (Faculty of Community Services);科學學院(Faculty of Science);研究生院 (School of Graduate Studies);進修學院 (Continuing Education)。懷雅遜大學(Ryerson University)所使 用的學生評鑑教師教學量表共有十四題,如表 2-15 所示

(六) 明尼蘇達大學(University of Minnesota)

明尼蘇達大學(University of Minnesota)為美國公立大學中頗負盛名的綜合型 大學,在泰晤士世界大學排名 2012-2013(THE World University Ranking

2012-2013)聲望排名終為前 51-60 名次。而其所使用的學生評鑑教師教學量表中 包含六題,如表 2-16 所示

(七) 麻省理工學院(Massachusetts Institute of Technology)

麻省理工學院(Massachusetts Institute of Technology)於泰晤士世界大學排名 2012-2013(THE World University Ranking 2012-2013)中排名第五,其所使用的學 生評鑑教師教學量表分為五個部分:一、教學品質;二、電子資源;三、作業評

(八) 普林斯頓大學(Princeton University)

普林斯頓大學(Princeton University) 於泰晤士世界大學排名 2012-2013(THE World University Ranking 2012-2013)中排名第六,其所使用的學生評鑑教師教學 量表依據課堂進行的形式分為四類型:1.一般;2.問題解決或實驗課;3.討論傾

(九) 加州大學柏克萊分校(University of California Berkeley)

加州大學柏克萊分校(University of California Berkeley) 泰晤士世界大學排 名 2012-2013(THE World University Ranking 2012-2013)中排名第九,在美國國內 中也屬於少數公立學校能名列前茅者。其所使用的學生評鑑教師教學量表包含

‧ 國

立 政 治 大 學

N a tio na

l C h engchi U ni ve rs it y

60

(十) 倫敦帝國學院(Imperial College London)

倫敦帝國學院(Imperial College London)於泰晤士世界大學排名

2012-2013(THE World University Ranking 2012-2013)中排名第八,其中包含了工 學院(Faculty of Engineering)、醫學院(Faculty of Medicine)、自然科學院(Faculty of Natural Sciences)、商學院(Imperial College Business School)。其所使用的學生評 鑑教師教學量表,分為兩大部分:一為對教師之評鑑,一為對課程之評鑑;題目 如表 2-20 所示

表 2- 20

倫敦帝國學院學生評鑑教師教學題目表

題目 題目編號編號

1.教師

教師妥善解釋教材。 16-1-1

教師激發興趣與熱忱。 16-1-2

教師可以被找到。 16-1-3

整體而言,我對於教師感到滿意。 16-1-4 2.課程

課程的內容經妥善組織。 16-2-1 課程內容是具有知能啟發性。 16-2-2 在我的表現上能獲得有幫助的回饋。 16-2-3 整體而言,我對於此課程感到滿意。 16-2-4 資料來源:作者自行整理

(十一) 賓州大學(University of Pennsylvania)

賓州大學(University of Pennsylvania)屬於八所常春藤聯盟學校之一,於泰晤 士世界大學排名 2012-2013(THE World University Ranking 2012-2013)中排名十五,

不過其在教學一項得分上,獲得 90.0 的高分。賓州大學(University of Pennsylvania) 所使用的學生評鑑教師教學量表中分為八個部份的問題,包括:1.一般問題;2.

作業與評量問題;3.授課問題;4.實驗課問題;5.教室問題;6.討論傾向問題;7.

科技使用問題;8.團隊合作問題,共 29 題,如表 2-21 所示

相關文件