網站評估方法

國內外學者對於各類網站品質評估重點，早期大都集中在對評估指標

（evaluation criteria）的研究，Wilkinson 則認為有三個重要的標準必須注意 的，除了不同指標值和不同網站類型，應參據具體情況擇選不同指標項目 外，評估指標需要一些實證研究來確保所產生的結論是可靠的，更重要的 是還需要強而有力的理論基礎，俾使網站評估作業能具備全面性且不遺漏 某些重點（Wilkinson, 1997）。

早期 Schriver（1989）和 Sweeney（1993）曾提出兩種常用的網站評價 方法：用戶評價法與專家評價法。在用戶評價法中，一個網站的可用性測 量是指：通過從目標使用者群中選擇若干潛在用戶，對其調查來獲取相關 資料和結論。常用的工具是可用性測試，即目標使用者帶著真實使用者的 任務使用網站，並在此過程中描述他們的感受；而專家評價法是讓具有相 關專業知識的專家們評價網站的可用性和有效性。這兩種評價方法都有利 於對網站的品質做出評估，但是用戶評價法更有利於評價網站的用戶友好 程度。而 Kantner 和 Rosenbaum（1997）則建議先使用專家評價法，以收 集較易檢測到的可用性問題，然後使用用戶評價法，用於發現真正很難發 現的可用性問題。然而，在實際使用中，由於成本問題和操作上的難度，

人們更傾向於使用專家評價法來評價網站品質。

各種網站應採用何種評估方式，眾說紛紜；朱慶華與杜佳（2007）強 調，網站評價研究的主要關鍵，在於是否根據網站屬性與使用者特性去擇 選合理的評價方法，以及建構科學的評價指標體系，俾以找出客觀合理的 標準項目，並進一步判斷網站是否符合使用者的預期，並對其提出必要的 改進與建議。因此，發展網站評估指標之前，應先建構評估指標體系的理 論基礎，進而對指標體系數據進行處理與分析。

在著重網站評估理論基礎前提下，各領域研究採用文獻研討法、專家 判斷法、腦力激盪、專業團體模式、提名小組、焦點團體法、德菲法等質 性評估方式，或透過問卷調查法、迴歸分析法、因素分析法（及主成份析

47 Branch, Kim, & Koenecke

（2000）

線上教材評鑑檢核

●

Mioduser et al.（2000）

網站基礎學習評鑑指標

Walker & Fraser（2005）.

遠距教育學習環境評估項目

Büyüközkan et al.,（2007）.

數位學習網站質量評估

●

Chang & Tonya（2007）

全球定位系統網路學習環境

48 Shee & Wang（2008）

網路數位學習系統評鑑規準

● ●

Yang & Chan（2008）

英語學習網站評鑑規準

● ● ●

Chao & Chen（2009）

遠距數位學習系統規準

● ●

Hsu et al.,（2009）

網路學習平臺評鑑

● ● ●

Zaharias & Poylymenakou

（2009）

49

從相關文獻來看，早期以文獻分析法最為常見，而後隨著評估方法的 發展，多以文獻分析為基礎搭配其他質性量化的方法來進行網站評估架構 之構建與指標項目之確認；何種評估方法較為妥適並無一套標準，但一般 研究者在使用單一的文獻分析法、個案研究或專家訪談後，多僅得到評估 指標項目內容（羅綸新，2005；鍾瑞國、楊寶，2006；Shee & Wang, 2008；

Yang & Chan, 2008），對於無法將研究所得到的網站評估項目數據化，提供 網站管理者維運管理提升服務品質上更精確的參考，甚為可惜。

近期研究者逐漸重視網站評估指標體系的完整性，認為具體的分級指 標與指標權重同等重要；本研究如能透過德菲法（DM）不僅獲得集思廣益 的效果，又可兼顧專家獨立判斷的品質，而運用層級分析法（AHP）具簡 明而有系統的特性，應可進一步提供各項指標權重數，達到教學網站評估 指標建構之研究目的。

此外，另有鑑於教育領域系統具有高度模糊、主觀及不確定等特徵，

複雜度較一般工程系統來的高，傳統講求精確的數學方法顯然不完全適合 處理教育領域內部的各類資料，因此，本研究將模糊理論概念導入研究方 法之中，以模糊語意方式解決現實環境中不明確性與模糊性的資料，藉由 模糊德菲法（FDM）及模糊層級分析法（FAHP）等評估方法，取得受訪 專家的共識，增強評估架構的可信度與客觀性，同時考慮其間模糊地帶的 問題，完成本研究之教學網站評估架構，並就架構內各項評估指標的可行 性、適用性，以及其相對權重資料進行修正與確認。

本研究方法雖與 Chao 和 Chen（2009）研究遠距數位學習系統規準，

以及張琬翔與尹玫君（2014）研究科學教育網站評估指標的方法相似（以 模糊層級分析法作為評估指標權重取得之方式），惟本研究的關注重點，

在嘗試以學習者角度，按網路搜尋使用行為，依序探究學習者在各行為階 段所面臨到的各種情境、反應與選擇，以感知可用性、易用性與有趣性的 觀察，逐步梳理出教學網站評估構面與指標，建構出更符學習需求的教學 網站評估指標架構。

50

51