科大教授如何評量技高學生課程學習成果?
廖年淼 國立雲林科技大學技職教育研究所特聘教授 洪佐仁 東吳高職專任教師 國立雲林科技大學技職教育研究所碩士生一、前言
108 學度入學之高中生未來的甄選入學都需要從學習歷程檔案資料庫中選 擇若干項目作為備審資料。所謂學習歷程檔案資料庫包含四大項目:修課紀錄、 課程學習成果、多元表現、以及基本資料(自傳、學習反思、就讀動機、未來學 習計畫等)(教育部國民及學前教育署,2019)。其中,修課紀錄毋須技高教師關 注,多元表現則端視學生能力與表現學校才會選拔推薦參與校內外相關競賽或活 動,基本資料則一般都是等到確定報考校系後才能依照目標校系加以準備,唯獨 課程學習成果這一大項影響最為深遠,原因是除了專題實作課程外,其他課程也 可能選入當成備審資料,因此準備時間縱深長達數個學期、涉及的教師人數也 多,過去技高端老師要如何評量學生專題或實習成果都可以自行作主,現在則需 考量成為備審資料後科大教授會如何看待或評分,這涉及評分者心中的那把尺, 這把尺如果科大端是透過系統方式研擬發展讓所有評分教授有共同基準的話,就 是大家所關注的評量尺規。 各科大校系評量尺規尚未公告(技專校院招生策略委員會,2021),加上目 前部份校系仍持續修改中,因此本文所呈現之評量尺規內涵雖非最終版,不過應 該不至於影響全文討論方向與結論。基於上述理由,加上篇幅之限制,本文擬聚 焦在「課程學習成果」的評量尺規內涵探討,研究者根據網路蒐集到的資料以及 過去參與過的技專校院評量尺規工作坊之見聞,蒐集異質性高的四群八校系評量 尺規內涵加以比較與歸納,期能確認評量尺規是否具有跨領域共通性內涵、如果 有的話是那些共通指標、以及未來修改尺規之注意事項,研究結論可提供技高教 師、乃至科大招生校系未來修改評量尺規之參考。二、資料來源與整理原則說明
課程學習成果係指學生修習課程之作業、作品及其他學習成果,經任課教師 認證後,每學年由學生勾選6 件由學校人員提交至學習歷程檔案資料庫。甄選入 學之備審資料則由學生自資料庫中勾選提交至招生單位,一般大學至多3 件、技 專院校至多9 件(教育部國民及學前教育署,2019)。 研究者根據網路蒐集到的資料以及過去參與過的技專校院有關技高學生課 程學習成果評量尺規工作坊之見聞筆記(技專校院招生策略委員會,2020),蒐集商管群、應用外語群、設計群與機械群四個群,每群找出兩個異質性比較高的 兩個校系之評量尺規內涵整理之。八個校系使用的評量尺規有四等第、也有五個 等第的設計,五等第呈現方式也略有差異,有的以「優、良、中、可、差」呈現, 也有校系呈現「傑出、優良、中、可、不佳」之等第用語,基本上都符合招策總 會期待—校系評量尺規等第介於3~5 個之間,本文選取中間數—4 個等第作為整 理架構,遇有五個等第者則將前兩個等第合併但保留其用語,予以匯集標示於表 1 第 2 欄,因此表 1 歸納之四個等第為:優/良(傑出/優良)、中、可、差。 表1 呈現七個校系初擬之評量尺規,另一個是招策總會在 2020 年期間分享 之「發展評量尺規參考說明」(技專校院招生策略委員會,2020)PPT 中所例舉之 機械領域評量尺規內涵,因此資料涵蓋商管群、外語群、設計群與機械群中八個 異質性高的校系(組)評量尺規,由於各校系資料還在研發修改階段且尚未正式 公告、為避免這些校系(組)困擾文中姑隱其名,並將八個校系各等第原定義之 文字微幅簡化修改,其中有三個校系在內涵用語中使用到各自的領域名稱(如外 語領域、輪機領域、機械領域),配合本文宗旨一律改以「專業」兩字取代其領域 名稱,並於表1 中以綠色文字標示之。綜而言之,上述修改原則上仍忠實地保留 各校系當下分享之定義內涵。為了方便檢視比較,表1 亦將不同等第之間的關鍵 字以藍色文字標示以便檢閱識別。 表1 不同領域校系評量尺規定義比較表 優/良(傑出/優良) 中 可 差 商 管 1 具 有 極 高/ 高 度完 整 性、豐富性、創新性及 貢獻程度 具有中度完整性、豐 富性、創新性及貢獻 程度 大 致 上 具 有完 整 性、豐富性、創新性 及貢獻程度 完整性、豐富性、 創 新 性 及 貢 獻 程 度,待加強 商 管 2 符合4 或 3項標準: 1.內容豐富完整度 2.邏輯架構清楚 3.內容符合專業程度 4.語意流暢度 符合2項標準: 1.內容豐富完整度 2.邏輯架構清楚 3.內容符合專業程度 4.語意流暢度 符合1項標準: 1.內容豐富完整度 2.邏輯架構清楚 3.內容符合專業程度 4.語意流暢度 沒 有 符 合 任 何 一 項 應 外 1 1. 能展現出傑出成品 或積極實作學習態度 且具有具體事證。 2.作品與專 業領 域具 有極度相關性 及重要 性 3.參 加 全 國 性專 題 實 作競賽,並有獲獎紀錄 1.能展現出優異成品 或 積 極 實 作 學 習 態 度且具有具體事證。 2.作品與專業領域具 有 高 度相 關 性 及 重 要性 3.參加區域性專題實 作競賽,並有獲獎紀 錄 1.能展現出成品或實 作學習態度。 2.專題作品與專業領 域具 有 普 通相 關 性 及重要性。 3.參加校內專題實作 競賽,並有具體成果 1.未能展現出作品 或實作學習態度。 2.作品與專業領域 不 具 相 關 性 及 重 要性。 3.無參加任何專題 實作競賽。 應 外 2 1.可條理分明、完整清 楚描述(1)課程內容、 (2)擔任哪些工作內容 2. 詳細說明自己從課 程中習得之課題與省 思 1.可充分描述(1)課 程內容、(2)擔任哪些 工作內容 2.說明自己從課程中 習得之課題與省思 1.可大略描述課程內 容 2.說明自己從課程中 習 得 之 課 題 與 省 思 明顯不足 1.無法看出課程內 容 2.看不出學生負責 哪 個 項 目 或 從 中 學到什麼
設 計 1 1.報告完整,文句通順 度流暢 2.議題具有高度 創新 度 3.作品參加本 系 專 業 相關競賽得獎 1.報告完整,文句通 順度良好 2.議題具有中度創新 度 3.作品參加本系專業 相關競賽曾入圍 1.報告完整,文句通 順度適中 2.議題具有少量創新 度 3.作品曾參加本系專 業相 關 競 賽 但 未 入 圍 1.報告完整度不足 且文句不通順 2.議題未有創新之 想法 3.作品從未參加過 本 系 專 業相 關 競 賽 設 計 2 完整度: 1.善用圖表設計 2.邏輯佳且流暢 3.架構完整 4.資訊豐富 5.引用 資料切題且註 明來源 創新度: 1.創意突出或有獲獎 2. 豐富 的 新思維 與 創 意 3.有跨域或特殊亮點 完整度: 1.內容完整、引用圖 表 2.文句通順 3.架構清楚 4.有引用資料且註明 來源 創新度: 1.有明顯創意或獨特 之處 2.部分新思維或有具 體做法 3.有初步跨域概念 完整度: 1.內容部分引用圖表 2.文句順暢度普通 3.架構合理 4.引用資料少量或註 明來源不完整 創新度: 1.創意普通 2.有提出少量新思考 或實際做法簡略 完整度: 1.內容雜亂或僅以 文字呈現 2.文句難以理解 3.架構貧乏 4.引用資料過少或 不完整 創新度: 1.創意不足 2.未提出新作法 3.抄襲或原創性不 足 機 械 1 1.能 展 現 出 傑 出 或 優 異成品或積極實作學 習態度且具有具體事 證。 2.與專 業領 域具 有 極 高度或高度 相關性 及 重要性。 3.參加全 國 性 或 區 域 性競賽,表現傑出,並有 獲獎紀錄。 1.能展現出成品或實 作學習態度。 2.專題作品與 專 業領 域具 有 普 通 相關性及重要性。 3.參加校際性專題實 作競賽,並有具體成 果。 1.能展現出成品或實 作學習態度。 2.與專業領域具有部 分相關性及重要性。 3.參加校內專題實作 競賽,並有具體成果。 1.未能展現作品或 實作學習態度。 2.與專業領域不具 相關及重要性。 3.無參加任何專題 實作競賽。 機 械 2 傑出/優良(能具體實踐 能力/並獲高度肯定) 展現(優良) 專業相關 知能與語言能力,並能 具體實踐獲高度肯定 之專題、競賽與創作/ 運用於實務作品、競賽 表現。 能呈現具有能力 具 有 足 夠專 業相 關 專 業 知 能 與 語 言 能 力,並能清楚陳述、 說 明 或 透 過 各 式 方 式清楚表現。 顯 示 可 接 受 相 關 能 力培育之潛力 顯 示 具 有 足 夠 相 關 專 業 知 能 與 語 言 能 力,展現可接受與發 展專業訓練。 未 具 備 能 力 且 未 充 分 準 備 接 受 培 育 不 具 備 足 夠專 業 相關基礎知能,無 法 認 知專 業相 關 概念。
三、討論與觀點歸納
根據上表內容研究者歸納出若干觀點供讀者參考: (一) 首先是評量尺規與內涵確實可以找到跨域共通性 從上面異質性頗高的四群八校系所草擬的評量尺規可以看出四個等第之定 義有相當高的共通性,雖然有三個校系在等第內涵中使用了各該領域之名稱(詳 綠色字體處、共計15 處),以「專業」或「本系專業」兩字取代特定名稱之後,並無妨害整體的定義解讀;從另一個角度也可以驗證是否具有此一共通性—如果不 看表1 的第 1 個欄位,讀者能夠從分辨八個校系的等第內涵是屬於那個學群校系 嗎?如果不能就足以證明課程學習成果評量尺規的主要內涵可以相當程度的適 用於不同領域。 (二) 跨領域、最具共通性的評量準則或指標是「內容完整」與「創新創意」 上表八個校系橫向欄位都僅只是質性描述作品達標程度,因此如果從第二個 欄位(傑出/優良)中檢視方框內文字用語出現次數越多的涵用語就是共通性越 高的指標或準則。各方框文字用語(次數)統計如下:豐富(4)完整(6)、架 構(2)、創新(3)創意(2)新思維(1)、專業相關(4)、競賽(4)、獲獎(包 含得獎、表現)(4)、流暢(3)等,其中「豐富」與「完整」、「創新」「創意」「 新思維」具為相同概念,因此重組並依照出現頻率排序後為:豐富完整(10)、 創新創意(6)、競賽獲獎(4)、專業相關(4)、流暢(3)、架構(2),如果選擇 次數超過 5(超過半數校系)的則為「內容豐富完整」、「創新創意」兩個主軸概 念,這兩個主軸剛好完全吻合「設計群校系2」所揭示的兩個主要準則—完整度、 創意度。 (三) 評量尺規是否應該強調「競賽成果」或「專業相關」值得商榷 從上面次數統計看來競賽獲獎(優良)、專業相關固然各出現 4 次之多,惟 若是學生參與對應層級競賽獲獎或是成績優良、但其他向度(完整、創意)不符 合的話那評分者還要給高分否?不管是或否都很有可能衍生爭議,因此競賽成果 似乎應放在多元表現向度去評分較為合宜;至於專業相關問題是否合宜也值得討 論,理由是只要學生具有學習潛力,真正的專業也可以在大學四年中學習,否則 何以科大何以接受不具技高專業基礎的高中生申請進入科大就讀?或許各科大 可以透過校務研究了解普通高中畢業生的各方面表現是否有差異?何況,普通大 學系所招收的也是毫無專業可言的高中生,他們的畢業生進入職場仍然為業界所 用。因此,如果四年大學的養成訓練還擔心不足而要求技高學生需要高度專業相 關的學習成果的話,不是正好凸顯對科大四年訓練成效信心不足嗎? (四) 「架構完整」、「文筆流暢」、「跨域」、「正確引註資料來源」是否需要納入尺 規內涵則端視校系性質而定 雖然 8 個校系之間採用這 4 項準則比較少,但仍不失為學習成果重要評估 項目,因此如果系所特別重視文筆組織能力、表達能力、跨領域能力或資料引用 嚴謹性的話,則可斟酌納入課程學習成果評量尺規定義中。
(五) 選定評量準則後,不同等第之定義宜精準選擇程度別的用語 以內容豐富完整性而言,如果是高度符合的則可評為第一等第,有充分或明 顯符合者可評為第二等第,普通程度或部分符合者則評為第三等第,完全不足或 是缺乏者則評為第四等第,類似這樣的區隔完成後可能還需要進行試評,以確認 評分者之間的一致性程度。