評鑑研究法

質 的 研 究 目 的 在 於 發 現 ， 資 料 搜 集 的 過 程 本 身 並 非 終 極 目 標 ， 質 的 研 究 是 分 析、詮 釋 以 及 呈 現 發 現 結 果（ Patton,1990）。在 評 鑑 研 究 中，有 二 種 目 的 不 同 之 評 鑑 方 法，即 形 成 性 評 鑑 和 總 結 性 評 鑑（ Herman, Lynn & Carol,1987） 。 形 成 性 評 鑑 （ formative evaluation） 的 研 究 目 的 旨 在 搜 集 計 劃 或 問 題 解 決 策 略 的 可 行 性 資 料 ， 改 進 某 一 個 特 定 的 方 案 、 政 策 、 人 員 （ 人 事 評 鑑 ） 或 成 果 ， 總 結 性 評 鑑 （ summative evaluate） 之 目 的 ， 在 於 就 一 方 案 或 政 策 之 有 效 性 或 成 果 作 一 全 面 性 的 評 斷，以 證 明 其 理 念 本 身 是 否 切 實 有 效（ 吳 芝 儀、李 奉 儒 譯，1995）。

本 研 究 在 形 成 性 評 鑑 階 段 ,主 要 是 確 保 系 統 在 開 發 的 過 程 中，不 偏 離 原 始 設 計 構 想 、 內 容 及 功 能 ， 並 將 評 鑑 結 果 作 為 修 正 系 統 的 參 考 依 據 。 總 結 性 評 鑑 階 段 則 透 過 深 入 訪 談 ， 針 對 系 統 的 應 用 做 全 面 性 的 評 估 。

本 研 究 在 系 統 雛 型 完 成 時 ， 在 校 內 辦 理 系 統 功 能 說 明 研 習 ， 期 在 最 短 時 間 內 將 網 站 內 容 及 應 用 方 式 ， 讓 校 內 老 師 了 解 試 用 。 並 以 研 究 者 自 編 之 「 大 新 國 小 戶 外 環 境 教 育 網 站 評 鑑 調 查 」 線 上 問 卷 對 參 加 研 習 的 教 師 實 施 問 卷 調 查 。 在 雛 形 試 用 階 段 ， 觀 察 網 站 使 用 情 形 ， 並 持 續 收 集 使 用 者 的 回 饋 ， 做 為 形 成 性 評 鑑 調 查 。

觀 察 結 果 在 雛 形 試 用 階 段 ， 雖 然 大 部 份 使 用 者 均 表 示 肯 定 網 站 功 能 ， 但 以 戶 外 教 學 為 範 疇 ， 卻 侷 限 了 使 用 者 的 使 用 意 願 ， 主 要 原 因 是 每 班 每 學 期 戶 外 教 學 次 數 大 約 只 有 一 次 ， 若 是 加 上 教 師 可 能 以 曾 經 實 施 過 或 參 考 其 它 班 級 實 施 的 教 學 場 地 進 行 戶 外 教 學 ， 網 站 內 容 再 豐 富 ， 對 教 師 仍 不 具 有 上 網 搜 尋 參 考 的 吸 引 力 。 為 能 提 供 更 符 合 教 師 教 學 需 求 ， 在 網 站 主 要 功 能 不 變 的 情 況 下 ， 將 網 站 資 源 範 疇 擴 大 為 所 有 環 境 教 育 的 內 涵 ， 期 能 提 供 教 師 平 日 教 學 即 可 使 用 的 環 境 教 育 資 源 ， 並 加 強 個 人 資 源 的 管 理 ， 及 教 學 單 元 與 資 源 間 之 關 連 的 功 能 ， 使 系 統 更 完 善 並 具 實 際 效 用 。

系 統 改 良 完 成 後 ， 在 校 內 辦 理 說 明 會 說 明 系 統 改 進 內 容 暨 完 成 結 果 ， 並 於 系 統 實 施 一 段 時 間 後 ， 對 一 至 六 年 級 及 自 然 科 任 教 師 各 一 名

進 行 深 入 訪 談 。 根 據 他 們 的 使 用 經 驗 、 心 得 與 收 穫 程 度 做 為 總 結 性 評 鑑 ， 提 供 以 後 研 究 者 進 行 相 關 研 究 之 參 考 依 據 。 系 統 的 改 良 需 要 使 用 者 不 斷 的 測 試 與 回 饋 ， 除 了 持 續 性 收 集 個 別 使 用 者 的 回 饋 外 ， 仍 必 需 對 使 用 者 作 普 遍 性 的 調 查 ， 及 深 入 了 解 使 用 者 的 應 用 情 形 。 以 下 分 別 為 二 個 主 要 評 鑑 階 段 時 使 用 之 調 查 法 ：

一 、 形 成 性 評 鑑 (一 ) 研 究 工 具

研 究 者 自 編 線 上 問 卷 ， 以 教 師 對 網 站 的 整 體 評 價 、 網 站 功 能 是 否 符 合 教 師 需 要 、 界 面 使 用 是 否 便 利 、 教 師 的 使 用 意 願 、 對 網 站 應 用 模 式 與 提 供 改 進 意 見 等 構 面 ， 設 計 半 開 放 式 問 卷 。 本 問 卷 在 系 統 分 析 之 後 ， 確 定 網 站 系 統 規 劃 與 功 能 架 構 ， 於 開 發 與 測 試 階 段 同 時 進 行 問 卷 初 稿 設 計 ， 並 依 網 站 建 置 時 之 系 統 修 正 ， 同 時 修 正 問 卷 內 容 ， 在 網 站 功 能 確 認 不 再 異 動 時 ， 完 成 問 卷 草 案 ， 先 與 指 導 教 授 討 論 修 改 ， 再 邀 請 四 位 相 關 專 家 學 者（ 見 附 錄 四 ）進 行 審 閱 ， 增 加 問 卷 內 容 效 度 ； 彙 集 專 家 學 者 的 指 導 及 建 議 ， 修 訂 為「 大 新 國 小 戶 外 環 境 教 育 資 源 網 站 評 鑑 調 查 」正 式 問 卷（ 見 附 錄 五 ） 。

(二 ) 研 究 對 象

本 問 卷 實 施 對 象 為 參 加 網 站 推 廣 研 習 老 師，共 計 107 名 教 師。

(三 ) 填 答 及 計 分 方 式 ( 資 料 整 理 與 分 析 )

問 卷 回 收 後 ， 刪 除 資 料 不 全 、 作 答 不 完 整 之 資 料 。 將 選 擇 項 目 與 開 放 意 見 二 種 類 型 分 別 處 理 。 選 擇 項 目 部 份 ， 以 描 述 性 統 計 做 為 網 站 功 能 、 接 受 度 之 評 鑑 分 析 ； 並 匯 整 開 放 式 意 見 做 為 網 站 改 進 與 研 究 結 果 之 參 考 。

二 、 總 結 性 評 鑑 (一 ) 研 究 工 具

研 究 者 自 編 訪 談 大 綱 ， 以 教 師 對 網 站 的 使 用 情 形 與 經 驗 、 使 用 滿 意 度 、 使 用 心 得 等 方 面 ， 設 計「 環 境 教 育 資 源 網 站 教 師 使 用 心 得 」 訪 談 大 綱 （ 見 附 錄 七 ）。 本 訪 談 大 綱 根 據 研 究 所 欲 探 究 教 師 對 網 站 滿 意 度 及 網 站 效 益 等 設 計 訪 談 大 綱 草 案，並 與 指 導 教 授

討 論 修 改 ， 再 邀 請 五 位 相 關 專 家 學 者 （ 見 附 錄 六 ） 進 行 審 閱 ， 增 加 訪 談 大 綱 內 容 效 度 ； 彙 集 專 家 學 者 的 指 導 及 建 議 ， 修 訂 為 正 式 調 查 之 訪 談 大 綱 。

(二 ) 研 究 對 象

本 問 卷 實 施 對 象 為 各 年 級 教 師 一 名 、 自 然 科 任 教 師 一 名 ， 共 七 名 教 師 。 抽 樣 方 式 是 為 立 意 抽 樣 ， 依 據 原 則 以 有 實 際 使 用 本 系 統 及 較 有 時 間 再 深 入 試 用 者 ， 經 研 究 者 挑 選 後 一 一 邀 請 ， 均 表 示 願 意 對 系 統 進 行 更 廣 泛 的 試 用 及 協 助 進 行 訪 談 。

(三 ) 訪 談 分 析

訪 談 時 將 訪 談 內 容 全 程 錄 音 ， 依 錄 音 內 容 整 理 為 逐 字 稿 ， 再 給 受 訪 者 查 看 是 否 與 原 意 相 符，若 有 必 要 由 受 訪 者 自 行 修 正 語 意 並 簽 名 同 意 ， 研 究 者 將 依 據 訪 談 結 果 做 為 網 站 效 益 評 估 。