實施與評鑑

本數位多媒體教材軟體評鑑的實施方式，分為「形成性評鑑」(Formativeevaluation) 及「總結性評鑑」(Summativeevaluation)兩種。形成性評鑑是在教材初完成時，透過自 我檢核、學科專家及學生評鑑本教材軟體，據以修正減低本教材軟體在內容、程式或設 計之失誤。總結性評鑑則在教材軟體發展完成後實施，著重驗證本教材軟體的品質，採 用教師評鑑及現場評鑑兩種方式，現場評鑑由 2 班學生實際使用已完成之軟體，配合教 師在現場觀察、紀錄，於事後並進行教材軟體評鑑量表以了解使用後之滿意度，同時進 行成就測驗，及一週後學後保留測驗，了解學生學習後是否能達到預期的學習成效。

壹、評鑑設計

一、形成性評鑑：

採用自我檢核及使用者評鑑兩種方式。自我檢核的功能在於教材軟體發展過程 中及初步完成後進行自我測試，檢核的向度包括教材內容正確性、多媒體元素以及介 面設計三個向度。教材內容正確性檢核包括組織和架構是否符主題，多媒體元素檢核 包括聲音的配合、動畫播放流暢度、圖像、文字等適當性；介面設計檢核包括各超連 結是否順利、各按鈕是否發揮功能等，並參考文獻探討介面設計、多媒體元素設計及 教學設計原則，檢核是否適當並據以修正錯誤。因研究者本身即為教材軟體開發者，

相當熟悉此教材軟體的操作，思考模式已限制於框架中，故教材軟體完成自我檢核 時，仍然必須進行使用者評鑑，邀請一位學科教師及 2 位學生隨意操作測試，研究者 不做任何指導，只在旁觀察記錄，以更客觀的修正錯誤。

二、總結性評鑑：

總結性評鑑在教材軟體發展完成後實施，著重驗證本教材軟體的品質，採用教師 評鑑及現場評鑑兩種方式，評鑑設計分敘如下：

（一）教師評鑑採用線上評鑑表，以教學年資、學科背景、使用資訊融入教學頻率三 個向度擇定評鑑對象後（如表 3-5-1），以網路寄送本數位教材軟體及線上評鑑 量表。

（二）現場評鑑以「單組前後測設計」（One-group pretest-posttest design）之實驗研究 方法，實施學生前、後測、保留測驗，測驗結果以兩種方式統計：其一以各項 測驗之得分，統計後測成績是否高於前測？進步量與保留量（遺忘量〉有多少？

其二以題目為統計單位，計算各題目在前測、後測、保留測驗的答對率，並將 後測答對率減去前測答對率為進步量，依進步量遞減排序，以了解學生各題概 念學習成效之高低。受測學生另填寫教材軟體評鑑量表，以了解對教材軟體的 喜好滿意程度及學習態度。本研究之自變項、依變項、實施流程說明如下：

1.本評鑑設計自變項為施測學生，其教材學習內容包括健康與體育「認識生殖器 官」單元，自然與生活科技「生殖」與「遺傳」單元，以上兩個學習領域課 程由該班該科任老師教授，「認識生殖器官」單元實施時間於上學期教授完 成，生殖」與「遺傳」則於下學期實施完成，俟完成後進行數位多媒體教材

「人類的生殖」輔助學習 2 小時，以 ICT 融入教學、採電腦教室一人一機學 習方式，講師由由研究者擔任，並請該班自然科技老師協同教學。

2.依變項：學生前測、後測成就測驗的分數差異、後測與保留測驗分數差異。學 生前測、後測、保留測驗各題答對率的差異，後測和保留測驗各題答對率差 異。

3.評鑑實施流程如下：

(1) 課前準備：

z 成就測驗一班 3 份，一份前測，一份後測，一份學後保留測驗。

z 新增資料夾命名「人類的生殖」（可壓縮），放於網路，內含教材軟體執 行檔及線上評鑑量表網址。

z 檢查電腦教室設備：網路、耳機、及廣播系統。

z 調整課程為 2 節課連堂。

z 在實施本教學活動前先做前測，施測時間約 15 分鐘。

(2) 上課鐘響時學生於電腦教室就定位，檢查耳機是否有聲音，電腦廣播系 統切換為「教師廣播」。

(3) 教師先告知學生本節教學目標為認識人類的生殖，這課程跨自然科技與 健康教育兩個學習領域，以數位多媒體教材幫助同學們加深加廣學習，

生殖器官為人體器官一種，請同學以平常心學習，並正向面對。

(4) 示範下載「人類的生殖」資料夾到自己電腦桌面時，開啟資料夾，告訴 學生有 reproduce 執行檔及評鑑量表網頁檔。

(5) 示範並要求學生由「生殖細胞」開始依序學習，到「生殖科技」等共 7 大單元，學完後開啟「學習資源」之「課程架構」檢查是否有這 7 個單 元及其附屬單元是否都亮了綠燈？都亮了才可以做評量測驗。

(6) 教學過程由同學們依主選單順序自行操作，操作時間共為 20 分鐘。如有 困難可舉手，教師為輔導者角色，巡視學生並針對現場遭遇困難、舉手 發問學生進行指導，並記錄下學生的問題，不主動進行教學。

(7) 教師與學生互動討論教材軟體各教學單元之「高層次思考問題」，時間約 20 分鐘。

(8) 學生自由操作 10 分鐘。

(9) 第二節課開始請學生點選評鑑表網址，線上填寫，約 20 分鐘完成。

(10) 發下成就測驗，約 15 分鐘完成。

貮、研究對象

一、形成性評鑑：由研究者、一位本領域學科教師及 2 位學生擔任。

二、總結性評鑑：

（一）教師評鑑：由現場評鑑之班級自然與生活科技教師（生物背景）共 2 位擔任。

其次，另外邀請 8 位教師為評鑑對象，其授課內容以生物為主或兼教生物、會 使用 ICT 融入教學，年資分布為資深（20 年以上）、中生（10 年~19 年）以及 資淺（10 年以下）。以上十位教師的基本資料摘要如表 3-5-1 所示。

表 3-5- 1 受邀評鑑教師之基本資料摘要

編號 性別 教學年資 學科背景 資訊融入教學次數／每學期

A 男 21 生物 常用

B 男 5 生物 3 次

C 男 20 生物 超過 100 次

D 女 8 生物 經常

E 男 20 生物 ５次／班

F 女 17 生物 幾乎每一堂課

G 男 13 生物 經常

H 女 5 生命科學 5 次 / 班 I 男 10 理化兼教生物 經常

J 女 5 衛生教育兼教生物 15 次~20 次

（二）現場評鑑：

以 2 所國民中學各一班一年級學生作為實施教學、成就測驗、以及填寫評鑑量 表對象。兩校情形分析如表 3-5-2。乙校評鑑量表施測學生共計 43 人，因保留測驗 當日請假一人，故成就測驗有效卷數為 42 份。

表 3-5- 2 評鑑對象分析 受評鑑人數 學校

代號 男 女 合計

前測答對題目 平均

教科書版本 (自然／健康)

教師教 學年資

甲校 15 16 31 11.7 題／23 題

康軒(自然) 翰林(健康)

17 年

乙校 21 22 43 13.5 題／23 題

南一(自然)

康軒(健康) 5 年

參、研究工具

(Accuracy)

1. 教材內容具正確性。

2. 教材內容符合學習者程度。

3. 教材內容能避免偏見與負面的刻版印象。

一、

教材內容 (Content)

1.2 內容組織與 完整(Organizati on & complete -ness)

1. 教材的組織架構由合理且明確的單元所組成。

2. 對應於教材名稱與時數，教材所涵蓋之內容具適當深度與廣度。

3. 單元的內容適切且份量合宜。

2.1 導引 (Navigation)

1. 數位教材提供的導引功能使學習者有效控制學習的進行。

2. 導引功能容易操作與使用。

3. 導引的圖像、名稱及功能符合普遍之使用習慣與認知，且彼此不衝突。

2.2 操作指引與 求 助 功 能 (Orientation &

help) (Learning tracking) (Instructional goal and objectives)

1. 數位教材具體且完整地呈現整體教學目標。

2. 數位教材具體而完整地呈現單元教學目標，且反映整體教學目標。

規範 檢核重點 檢核要求

3.2 教學方法 (Instructional methods) 性評量(Practice

& formative evaluation)

1. 數位教材提供適當的練習活動，幫助學習者熟悉學習的內容。

2. 數位教材具形成性評量機制有助於學習者暸解學習進展與效果。

3. 練習活動或形成性評量能涵蓋教學目標。

3.4 總結性評量 (Summative evaluation)

1. 總結性評量的內容與教學目標相符且適切涵蓋各教學單元。

(Facilitation strategies)

1. 數位教材提供學習者與學習內容之互動機會。

2. 數位教材的設計能促進學習動機。

al design)

3.6 一致性 (Congruence)

1. 數位教材的每個教學目標都有適量的教材內容供學習者學習。 (Interface design)

「人類的生殖」教材軟體評鑑量表初稿完成後，以專家效度分析法考驗量表的建構 效度，邀請 4 位在此領域有實務經驗之學者專家（2 位教授及 2 位國中資深教師）以「適 合」、「修正後適合」、「不適合」做為選項檢核並修正詞句，再根據學者專家意見修 正成為正式教材軟體評鑑量表。專家效度分析結果 42 題檢核指標中，有 26 題修正後適 合，餘均為適合，因評鑑表內容相當多，為節省紙張，本文摘錄此 26 條修正後適合之 條文，綜合專家學者修正意見臚列如附錄六。

綜合上述，加入李克特五等尺度量表(Likert Scale)，評分尺度由高至低排列（5＝

非常符合，4＝符合，3＝符合，2＝不符合，1＝非常不符合），完成學生版「人類的生 殖」教材軟體評鑑量表，如附錄七所示。

教師評鑑量表除上述外，另有 3 題及質性問題如下所示：

3-15

教材的教學內容能達成預定的教學目標

3-16

總結性評量的內容與教學目標相符且適切涵蓋各教學單元。

3-17

教材的教學目標、學習活動、及練習與評量的內容具一致性。

質性問題一：令我覺得印象深刻的教學單元有那些？

質性問題二：我覺得需要改進的教學單元有那些？

Google 線上文件軟體，提供表單功能，以此功能將「人類的生殖」教材軟體評鑑 量表 E 化成網路版，即線上教材軟體評鑑量表，以利學生及老師在電腦教室操作完後直 接線上填答（填答期限 99 年 5 月 31 日）。其建置內容舉例如下：

請鉤選你的身份。

○老師

○學生

1-1 我覺得教材軟體的內容是正確的。

○非常符合

○符合

○普通

○不符合

○非常不符合

以下略---

當所有題目做答完後，出現繼續按鈕，如在之前選擇學生身份，按下後進入學生 基本資料頁，填寫學校名、班級、座號、性別等資料；如果在之前選擇教師身份，則進

「人類的生殖」多媒體教材評鑑量表

各位同學：

在使用過「人類的生殖」多媒體數位教材之後，請依照自己真實的感受，勾選你覺得同意或不同意

在使用過「人類的生殖」多媒體數位教材之後，請依照自己真實的感受，勾選你覺得同意或不同意

在文檔中 性別平等教育融入「人類的生殖」數位多媒體教材設計 (頁 49-61)