專家測試與評估結果

在系統完成後，本研究邀請三位師資培育以及教育科技領域的專家進行系統 測試與評估，三位專家都有在師資培育中心授課及指導實習教師的實務經驗，也 都熟悉數位歷程檔案之應用。專家測試進行時間為8 月中旬至 9 月初期，測試地 點皆在專家的辦公室，由專家進行系統操作後，再完成系統的捷思評估。

評估時除根據5.1.1 小節敘述的 10 項捷思評估準則外，專家另外新增一項「系 統錯誤」準則，代表操作系統時發生非人為因素之系統錯誤。本研究系統經過專 家評估，共發現29 項使用性問題，其中嚴重程度為 5 的「重要使用性問題」有 七項；嚴重程度為4 的「主要使用性問題」有五項；嚴重程度為 3 的「次要使用 性問題」有六項；嚴正程度為2 的「美觀問題」有九項；嚴重程度為 1 的「非使 用性問題」有兩項。本研究針對專家發現之系統問題，提出解決之方法，並優先 修正重要程度較高之問題。使用性問題與解決方法依照違反之捷思評估準則分類 敘述：

(1) 系統狀態的可視性：專家表示，編輯基本資料時，點選 「取消」，無法回到 主選單，僅能消除前次輸入的資料，容易造成操作時的誤解，因此本研究將 基本資料之「取消」按鈕更改為「復原」，避免使用者誤會。此外，專家指出 歷程檔案資料夾應顯示內含的資料數量，避免資料夾數量增加時，造成使用 者操作時的困擾。

(2) 系統與真實世界符合：專家共發現三個此類型的問題，第一為歷程檔案的資 料類型中，「文書檔案」應改為「資料檔案」比較適合；第二是「人員資料搜 尋」應改為「其他使用者資料搜尋」較恰當；第三則是討論區的「新增討論 串」不易瞭解意思，應改為「新增主題」較接近一般使用者習慣。

(3) 使用者控制與自由度：專家表示除了資料夾的「進入」按鈕，使用者應還可 以透過點選歷程檔案資料夾之標題，進入資料夾內容頁面，因此本研究將標 題加上超連結，讓使用者可直接透過點選標題進入內容頁面。

(4) 一致性與標準：系統中包含許多「取消」與「回上一層」按鈕，當其意義相 同時，應採用同一種表示法，以提升系統的一致性。專家也指出內容頁面中，

歷程檔案的控制按鈕會因為不同資料類型，顯示不一樣的按鈕，有時會造成 使用上的困擾，較合理的方式應為新增資料讀取頁面，使用者可在進入讀取 頁面後，再透過不同控制按鈕存取各類型歷程檔案。

(5) 錯誤防範：專家認為佈告欄的公告僅能包含單一相關連結，且未提供連結之

說明文字，在使用上較不便。因此本研究增加可包含的超連結數量，並可為 各連結撰寫說明文字，幫助使用者在點選前的判斷。此外，部分資料填寫區 中，「*代表必填」的說明文字不夠明顯，應採用更大的字型。最後，專家認 為離開資料輸入頁面時，應先確認是否儲存已輸入資料，但本研究經評估後，

認為此功能必須使用較困難之技術且花費時間較多，因此將此問題列為改版 時優先修改項目。

(6) 採用認知避免回想：專家認為要進入他人留言版時，必須輸入要前往的留言 版擁有者之帳號，會降低操作效率，應新增其他搜尋機制，方便使用者瀏覽。

此外，專家也表示搜尋人員資料的結果表格中，應加入欄位說明，讓使用者 能快速瞭解各欄位內容之意義。

(7) 操作彈性與效率：此類型問題共有五項，第一為教學資源功能中應將「新增 教學資源」放置到最外層，讓使用者可以快速地新增不同類型之教學資源；

第二是由於師資培育中心教授使用系統最主要之目的在於加強與實習學生之 互動，因此教授類型的使用者帳號應把「實習學生資料」放置到系統介面最 外層，以提升操作效率；第三則為使用者在回覆留言時，應可加入不同之標 題，以方便其他使用者瀏覽時快速瞭解回覆內容；第四是系統應提示使用者 有多少未閱讀之留言訊息，讓使用者不需頻繁地進入留言板，才能得知是否 有新留言。最後，專家認為檔案上傳時，點選「瀏覽」並選取上傳檔案後後，

應放置上傳按鈕讓使用者直接上傳，然而經本研究評估後，認為此功能需要 較複雜之技術，因此列為未來改版時優先修改項目。

(8) 具備美感與簡單的設計：專家表示在個人資料部分，實習學生資料中有關實 習學校的部分，應以不同之顏色表示，與其他資料區隔。此外，系統字型大 小有時會瀏覽器設定不同，導致系統畫面顯示不正常，應設法調整，避免不 正常的畫面產生。

(9) 幫助使用者從錯誤中認知判斷與復原：基本資料更新後，原本顯示的「更新 聯絡人資料成功」訊息應為「更新基本資料成功」較恰當。

(10) 提供輔助說明：專家共發現共有五項問題，第一為基本資料中的人員搜尋功 能，應按照使用者搜尋之目的，增加對應之功能，例如將使用者加入通訊錄、

寄送E-mail 給該使用者與進入該使用者之留言版等；其次是在行事曆中，擁 有記事之「i」圖示應有說明文字；第三為留言版的「悄悄話」選項應提供說 明文字；第四則是應在資料備份功能畫面中提供說明文字，讓使用者瞭解備 份方式與下載檔案之格式；最後為通訊錄中，「引入人員資料」按鈕應有說明 文字，讓使用者瞭解其意義。

(11) 系統功能錯誤：專家操作系統時發現兩個系統錯誤，第一個是在新增行事曆 並將記事發佈至其他使用者行事曆時會發生錯誤，第二則是佈告欄中下載之 檔案無法執行。本研究經過詳細檢查後，已排除上述系統錯誤。

除上述之系統問題外，專家在評估時也指出，希望系統能夠新增以下五項功 能：

(1) 記錄使用者從系統寄 E-Mail 的資料。

(2) 教學資源可讓同學共同建立。

(3) 通訊錄匯入功能。

(4) 師資培育中心與實習學校之通訊功能。

(5) 討論區可再分群組，提供實習教師與指導教授之私密討論空間。

本研究經評估後，認為除上述第五項之外，其餘功能皆須使用較困難之技術，

並改變系統運作之模式，因此列為未來系統改版時優先修改之功能。因此本研究 針對上述專家提出之第五項功能，增設指導教授與其指導之實習學生之討論區，

提供教授與其實習學生可討論較私密議題的空間。本研究專家測試與評估之結 果，以及解決系統問題之方法，整理於表5-1 中。

表5-1、專家測試與評估結果

(3) 教授帳號應把「實習學生資

(5) 討論區可再分群組，提供實 習教師與指導教授之私密討 論空間。

5 新增指導教授與實習學生之 討論區。

由於本研究邀請的專家皆擁有師資培育實務經驗，因此進行測試評估後，也 請專家分析系統應用在師資培育領域之可行性，專家們認為本系統在改進先前發 現之問題後，確實能夠實際應用於師資培育領域。此外，也有專家建議雖然系統 已有操作指引功能，但在實際應用之前，應撰寫系統使用說明書，透過「使用者 情境（user scenario）」的方式，協助不同類型使用者快速地了解本系統可能的應 用，進一步提升系統之可用性。

本小節為螺旋模式的第十次循環，輸出文件編號《01_010》請見附錄十一。