第四章 系統試用與評鑑
第一節 實施步驟
本階段首先必須確定參與試用及評鑑的學校與教師人數，接下來開始設計評鑑問卷 內容。問卷內容確定之後，我們則至各個學校進行系統展示並開始進行為期兩週的試用 與問卷填答，隨後回收問卷。在問卷分析與整理的過程中，我們再與其中幾位填答者做 深入的訪談以便收集更詳細的資料。本研究之系統試用與評鑑實施流程如圖 4.1 所示。
圖 5.1 系統試用與評鑑流程
第二節 參與者
本系統的試用與評鑑在國立師大附中高中部以及台北市立景美女中兩所學校進 行，共有十二名國文教師自願參與本系統之試用與評鑑，詳細名單請參考附錄三。這十 二名教師之年資分佈如下：
確定實施對象
設計評鑑問卷內容
問卷分析與整理
撰寫系統評鑑結果
深度訪談 進行系統展示與試用
(2004/04/20-2004/05/04)
一、 小於一年：兩名
二、 二至五年：一名
三、 六至十年：一名
四、 十年以上：八名
如上所示，參與系統評鑑的教師以十年以上的資深教師為多，其豐富的教學實務經 驗有助於提供我們系統設計與應用上的回饋與建議。
第三節 評鑑工具
我們透過問卷調查與訪談等兩種方式請參與教師針對我們所建置完的資料庫系統 進行評鑑，詳細作法分述如下。
一、 問卷調查
問卷調查的目的在於了解使用者對於系統操作的方便性及系統在國文科教學之適 用性的看法。問卷內容分為三部分：
(一) 教學習慣
此類題目用於了解參與教師的教學及備課習慣，其以單選題及複選題為主，共有五 題，分別針對教材種類、教材準備方式、備課時遭遇的困難、教學活動進行方式以及每 學期進行電腦輔助教學的時數等五方面設計適合的選項供填答者勾選。
(二) 系統現況評估
此部份共有十八題，均為開放式問題，目的在於了解使用者對於系統架構、查詢介 面、系統內容及系統外觀之看法。
(三) 系統應用建議
此部份共有六題，均為開放式問題，針對以下各方面請填答者表示意見：系統在備 課上的應用、系統在命題上的應用、系統在課堂教學上的應用、系統在其他教學相關工 作上的應用及系統在學生學習活動上的應用等。
二、 訪談
在整理填答結果時，我們從中選定填答意見較多且提出的建議較新穎之教師進一步 安排深度訪談，以確切了解她們的看法。我們將兩次訪談的結果納入下一節的評鑑結果 中一併呈現。
第四節 評鑑結果
本節中我們由教學習慣、系統評估以及系統應用等三方面呈現評鑑結果。
4.4.1 教學習慣調查結果
一、 教材種類
教師們課前所準備的教材以「講義」及「補充教材」為主，其次是「作業」、「考 卷」、「學習單」、「教案」以及「投影片」等。
二、 教材準備方式
教材準備方式最普遍的是「網路下載」，其次是「參考書」、「他人作品」以及「教 科書」。其他尚有「教師手冊」、「期刊」、「論文」、「多媒體」、「原典」以及「研 究論文」等。
三、 備課時遭遇的困難
最普遍的備課困難為「時間不足」，有將近一半的教師有這方面的困難，其次是「缺 乏相關資料」。其他尚有「龐雜」與「設備不足」。
四、 教學活動進行方式
最普遍的教學進行方式為「講述教學」與「討論教學」，其次是「分組合作」。其 他尚有「網路輔助學習」、「個別報告」以及「表演」。
五、 每學期進行電腦輔助教學的時數
有超過三分之一的教師每學期進行電腦輔助教學時數超過十小時以上，其次二至三 小時有三名教師，少於一小時者有兩名教師，四至六小時有兩名教師，七至九小時有一 名教師。
4.4.2 系統功能評鑑結果
一、 系統架構
本系統將國學知識分為「文章」、「人物」、「文體」、「典籍」、「字」、「詞」
及「句」等七大類，多數教師認為這是個很恰當的方式，條理分明且架構完整。
二、 查詢介面
多數教師對於查詢介面的方便性抱持肯定的態度，認為使用上簡單且容易上手。也 有老師表示其搜尋線索豐富且分類詳細，可讓使用者依任何路徑進行查詢，此一特色對 於資料的蒐集極有幫助。
針對查詢介面，教師們認為可再改進的地方有以下幾點：
(一) 選單的設計可再精簡。
(二) 除了目前的選單之外，在文章、作者、典籍名稱、字詞的部分可以利用注音符號 或筆畫索引來提供另一種查詢方式。
三、 系統內容
以目前的系統內容而言，教師們表示就各家版本資料的蒐集上頗為完備，多數老師 表示期望能夠將收集範圍繼續擴充。對於國文科知識的結構，教師們意見較為分歧，尤 其針對以下幾方面：
(一) 文章的情懷之分類 (二) 朝代的劃分
(三) 文體的分類
教師們在問卷中提出了不同的分類方式。事實上在需求分析及系統規劃階段，這些
知識單元的切割與分類即是我們一再反覆討論斟酌之處。由於許多項目的各家分法不 同、古今看法不一，因此難有定論。本系統正式上線使用之後，若能進一步收集更多使 用者之意見，應可從中求取最大的共識，並據以修改本系統之知識分類方式。
教師們對目前的系統內容尚有以下建議：
1. 目前系統中的資料仍須繼續勘正以求精確。
2. 無版權的古文希望大量放入以擴大資料量。
3. 所有項目的資料仍需持續輸入。
4. 關於字與詞的音義資料可參考字、辭典以增加完整性。
5. 人物資料的「地位」這個部分可以史傳（如史記及二十五史）中記載的人物資料做 為主要內容。
這些針對系統內容上的建議將是我們今後在系統經營上所要繼續努力的目標。我們 希望能邀請有意願的教師參與系統的經營，因為唯有在具備專業知識的國文教師之配合 下，系統內容的正確度與豐富度才能逐日提升。
四、 系統外觀
就系統的畫面配置、顏色及字體而言，多數教師均表示肯定。
教師們所提出需要改進的地方主要在於希望加強畫面的中國風味。教師們認為在系 統畫面中嵌入中國山水、字畫、古人像或是具有象徵意味的圖案將更能彰顯出本系統「國 文科」的特色。另外教師們也提到圖案的設計可盡量活潑、動態，如以會流動的水或會 移動的雲做為插圖，應可以平衡目前知識庫以文字為主的靜態感。
4.4.3 系統應用建議
關於教師所建議的系統應用方式，以下分教師面、學生面及其他等三部份加以討論。
一、 教師方面
有關本系統的使用方式，教師們普遍認為其快速、精確的檢索方式對於教師們查詢 資料是有幫助的。許多教師表示本系統在應用上以「字」、「詞」及「句」的綜合比較
上最有明顯的助益。教師們認為本系統可為教學工作提供以下的幫助：
(一) 協助職前教師與新進教師熟悉教材
由於知識庫內容涵蓋各版本所收錄之文章，方便教師們迅速取得相關教材資料。許 多教師表示這對於新進教師的助益很大。因為他們普遍缺乏教學經驗，需要大量的時間 蒐集整理相關資料。本線上知識庫能夠協助新任教師於這方面的需求。
(二) 提供命題上的協助
教師通常需要準備許多教材，如教案、講義、學習單、考卷及作業等資料。參與系 統評鑑的教師們在試用過系統之後認為本知識庫對命題的幫助最大。綜合教師們的使用 心得，目前知識庫所能支援的題目類型有以下幾種：形音義的比較題、字詞句的比較題、
統整性的題目及記憶性的題目等。
(三) 提供多媒體資料以輔助課堂教學
由於本知識庫系統提供了影音圖片的分享，老師們表示，當資料庫資料夠豐富時，
其所提供的多媒體資源可做為課堂教學的素材庫。換言之，這些多媒體資料可用於課堂 教學中以增加上課的趣味性。
(四) 可於課堂教學中使用以減少板書時間
也有老師們表示，本系統可在上課時搭配單槍投影機，利用投影的方式直接展示系 統內容，如此可減少教師板書的時間。
二、 學生方面
所有的教師們都表示本線上知識庫系統亦適合學生使用。綜合教師們的意見，本系 統可以提供學生下列的輔助：
(一) 課前預習
有教師表示本系統可以拿來讓學生做課前預習的工具，以增加學生對文章周邊知識 的了解。
(二) 課外指定閱讀教材
有教師表示本系統可以拿來讓學生做課外指定閱讀的工具，可搭配小考以確實要求 學生上線閱讀。
(三) 學生自學教材
由於資料庫中含有大量的教材，有興趣的學生可依個人的喜好與需求，透過網路進 行文章的閱讀以及相關資料的瀏覽。
(四) 扮演參考書的功能
教師們表示，對於學生而言，這個系統也可扮演參考書的角色。本系統提供了大量 的補充資料，可彌補教科書的不足。
三、 其他建議
(一) 成立系統管理團隊
本知識庫系統能否發揮最大效用取決於其中資料量之豐富與否，因此，若能成立一 管理團隊，負起新增、修改與維護資料內容正確性之責任，將使此一資料庫系統隨時保 持可用、好用的狀況。許多教師們均指出成立管理團隊的重要性。有教師們提議系統管 理團隊可以「學校」為基礎，從小單位做起。先將本系統外放在各個學校中，由各校有 意願的國文教師共同來經營其知識庫。待各校的知識庫內容發展具一定規模，再依各校 國文科教師的文化來思考如何將各校的知識庫作統整與合併。
(二) 國高中教材合併
國高中國文科的教材在銜接上會有重複的階段，尤以白話文的部分為多，因此有教 師提出整合兩者的建議。但也有教師提出國中與高中國文的教學方向與難度有所差異，
因此可能牽涉到知識結構的不同，所以在合併上可能有所困難。這方面的建議本研究將 再斟酌其可行性。
(三) 增加題庫的部分
有教師提出本系統在文章、字、詞及句中可增加一個「相關試題」的欄位，用以儲 存相關考題，如此，將可方便教師們在查詢資料時，不僅可以看到知識內容，也可以查 詢相關的歷年考題。
4.4.4 小結
本系統試用與評鑑階段邀請了十二位高中國文教師參與，這些教師群以年資逾十年
的資深教師為主，且所有教師均具有電腦輔助國文科教學的經驗。這些教師對於系統架 構與介面設計多抱持正面的看法，唯在系統內容方面，老師們對知識分類方式看法有所 分歧，並認為內容正確性與豐富量是本系統有待改進之處。國學知識範圍廣大，在知識 架構的規劃中必須有所取捨，難免刪除許多旁枝末節的知識單元，加上知識分類的方式 各家看法不一，因此這項工作在未來系統改進過程中，仍將是極大挑戰。在內容正確性 與豐富度方面，須仰賴有意願配合的教師們協助，持續地增加系統的資料量並勘正資 料。唯有使用者的通力合作才能使本系統永續經營，進而使其成為一個國文科知識集粹 之處。另外，參與評鑑的教師建議本系統亦可應用於教師命題與授課，以及對學生自學 上的輔助。這些建議均可做為日後系統在發展與推廣上的參考。
