第五章 結論與建議
第一節 結論
依據本研究之目的,茲將透過文獻探討及二階段問卷調查所得之研究 發現,歸納成以下結論。
壹、 透過文獻探討發現一般類型與教學網站評估架構指標之共通性與差 異處
網路資源為新世紀知識來源的主要途徑,各種類型網站因應服務對象 不同而有不同的特色與差異,網站評估重點因此而有所不同;研究者從第 二章文獻探討中發現,一般網站評估機制多從資訊構建理論或網站績效等 層面切入,評估內涵大多包含「網站內容」、「網頁設計」、「網站系統 技術」與「個人化服務」等 4 項層面及即時更新、準確明確、權威、豐富 完整、客觀、排版適切、吸引性、舒適性、連結易用、分類標示架構、導 覽搜尋檢索、互動評估回饋與安全性等 13 項指標;至於其他類型網站除上 述評估基本層面外,依網站特色而各有其關注重點,例如側重使用者的滿 意度應用性作為、特殊功能可用性、或整體服務品質等指標。
研究者再針對教學網站相關文獻,探就較為其他研究者所採用的評估 指標,而後運用雙向細目分析法,綜理做為後續討論的基礎。透過文獻探 討發現,教學網站評估內涵大多包含「網站內容」、「多媒體教材」、「網
102
頁設計」、「網站系統技術」與「個人化服務」等 5 項層面,以及準確明 確、即時有效、權威可信、多元豐富完整、課程結構完整、品質融合適切、
影音設計創新、視覺聽覺吸引、整體排版適切、圖像聲音舒暢、連結易用、
分類標示架構、導覽搜尋檢索、互動評估回饋與學習輔助工具等 15 項指 標。
與一般網站相較,教學網站評估機制除關注基本層面外,特別著重教 學媒材與個人化服務,例如課程結構完整性、媒材品質適切、影音設計創 新,以及網站所提供的學習輔助工具支援等;一般網站與教學網站評估指 標的共通性與差異處詳如表 5-1。
表 5-1 一般網站與教學網站評估指標上的共通性與差異處
構面 指標 一般網站 教學網站
網站內容 1.準確明確性 ◎ ◎
2.即時有效性 ◎ ◎
3.權威可信 ◎ ◎
4.豐富完整 ◎ ◎(多元豐富完整)
網站設計 5.排版適切 ◎ ◎
6.吸引性 ◎ ◎(視覺聽覺吸引)
7.舒暢度 ◎ ◎(圖像聲音舒暢)
網站系統技術 8.連結易用 ◎ ◎
9.標示架構 ◎ ◎(分類標示架構)
10.搜尋檢索 ◎ ◎(導覽搜尋檢索)
多媒體教材
12.課程結構完整 -- ◎
13.品質融合適切 -- ◎
14.影音設計創新 -- ◎
個人化服務 11.互動評估回饋 ◎ ◎
15 學習輔助工具 -- ◎
資料來源:研究者自行整理
103
貳、 綜理國內外教學網站評估模式,提出適合的評估觀點與研究方法 網站評估觀點依網站特色或關注角度,而有不同的發展趨勢;據國內 外研究者對於評估觀點與關注內涵,各有研究理論與主張,除了以資訊架 構、科技接受、使用介面、使用績效、服務質量或品質管理等層面進行研 析外,亦有研究者主張直接透過網路連結與網站紀錄資料的觀察與分析,
可全面且有系統的了解網路資源的分布狀況與發展規律,是一項運用計量 工具獲取網路特徵與訊息的評估檢證觀點,惟多數研究者認為網路計量方 式雖具客觀條件可求得系統數據,但仍多建議必須搭配問卷調查,方以進 一步了解使用者主觀想法與評估指標應其備的意涵。
有鑑於此,本研究考量教學網站評估重點應不僅單以系統數據即可解 釋各種教育教學現場或學習學習主觀因素等,況且,網站評估研究主要關 鍵在於是否根據網站屬性與使用者特性去擇選合理的評價方法,俾以找出 客觀合理的標準項目;因此,本研究的評估觀點,是從學習者的使用需求 與思考角度進行分析,期使指標構建更切合研究主題,未來有餘力再以網 路計量與使用者問卷方式輔以檢證。
此外,為確保網站評估指標具可靠性,在發展指標前,應先完備研究 方法理論基礎,俾使評估作業能具備全面性,對指標體系數據的處理與分 析,才具實證性。
一般指標體系建構之專家決策模式,包含質性、量化與複合性等;綜 理文獻,早期以文獻分析法最為常見,而後隨著評估方法的發展,多以文 獻分析為基礎搭配其他質性量化的方法來進行網站評估架構之構建與指標 項目之確認,但部分研究仍多僅得到評估指標項目與內容,對於無法將研 究所得到的評估項目重要性予以數據化,供作網站維運管理提升服務品質 上更精確的參考,甚為可惜;因此,為求網站評估指標體系的完整性,兼 顧分級指標與指標權重內涵,採用的研究方法宜包含:
一、 以文獻分析法針對研究背景與文獻資料進行雙向細目分析;
104
二、 採質性屬性的德菲法(獲集思廣益效果,兼顧專家獨立判斷品質);
三、 採量化屬性的層級分析法(具簡明有系統的特性,可進一步提供指 標權重數,達到評估指標建構之研究目的);
四、 運用模糊理論(避免極端值的影響,給予專家更彈性的評估值尺度), 使研究成果更具可信度與可參考性。
參、 了解教學網站評估指標建構階段各指標篩選變化過程
指標初擬階段,本研究先蒐集國內外教學網站相關文獻資料,了解評 估內涵並分析其發展特性後,運用雙向細目分析法綜理一般研究者採用的 評估指標(5 項層面 15 項指標)做為後續討論的基礎;綜理分析後發現多 數研究者從課程教學與自主學習層面切入,惟並無一套標準機制。
為期本研究所發展的教學網站評估指標能更符合教學網站屬性與使 用者特性,強調學習層面上的各種特性,吸引各類學生樂於使用,並使教 育教學相關資源被有效吸收,進而達到廣泛教育的目的;本研究嘗試以學 習者角度,按網路使用行為與步驟,依序探究學習者各階段行為與反應,
在不遺漏任何重要評估指標的前提下,以技術接受模式中感知可用性、易 用性與有趣性等觀察元素,重新整理發展出教學網站評估架構計 5 項層面、
36 項指標,期能各項指標定義說明亦於此階段完成草稿。
為進一步確認評估指標之適切性及定義描述,本研究透過問卷由學者 專家協助篩選及修改指標,以求適用於我國教學網評估指標建構系統。
一、 依適切性評估結果計算反應次數與平均數,經第一階段篩選,5 項層 面 36 項指標均分別高於 90%及 1.8,爰全予保留;惟針對「網站系 統技術品質」層面的「科技設備相容性高」與「連結品質良好流暢」
二項定義與文字,參考專家與指導教授意見酌予修改。
二、 依重要性程序結果,計算門檻值,經第二階段篩選,計有 5 項層面 30 項指標門檻值高於 0.6,爰剔除 6 項未達門檻值之項目,包含:
105
106
107
肆、 建立我國教學網站的評估架構,並確定其評估指標之權重
本研究經過文獻探討及 2 次問卷,將所獲取評估專家對於各項指標適 切與重要性的意見,綜整成我國教學網站的評估指標權重,如表 5-3。
表 5-3 教學網站評估指標權重表
層面 指標 層面權重 指標權重
課程教材 品質
教材內容正確完整
34.13%
6.44%
課程範圍明顯區隔 5.18%
教材可擴展移植性 4.99%
教材內容豐富多元 3.53%
教材具互動模式 2.92%
教材適用性高 2.85%
教材內容創新具吸引力 2.65%
功能術語具一致性 1.98%
數位多媒體影音品質 1.94%
搭配運用數位媒體功能 1.65%
網站系統 技術品質
安全機制與個資隱私
27.05%
6.18%
科技設備相容性 5.11%
傳輸下載回應穩定且快速 3.75%
導航系統明確 3.40%
連結品質良好流暢 3.19%
搜尋檢索功能捷 2.76%
標示架構清楚完整 2.66%
個人化 服務功能
提供自主學習工具
16.47%
3.86%
學習歷程之運用 3.54%
提供奬勵制度 3.25%
建立學習成就評估機制 3.06%
提供互動回饋與社群交流平臺 2.75%
(續下頁)
108
層面 指標 層面權重 指標權重
網站基本 資訊內容
創意具吸引性
13.42%
3.36%
規劃明確性 3.23%
資訊正確有用 2.60%
資訊即時更新 2.22%
資訊豐富完整 2.01%
網頁設計
整體設計有趣且具創意
8.93%
3.24%
排版配置適宜 2.92%
系統架構性與層次區隔 2.77%
5 層面 30 項指標 100% 100%
資料來源:研究者自行整理
一、 總體評估指標與權重體系
本研究所建構的教學網站評估指標層級架構,包含 5 項層面(第一層 指標)及 30 項指標(第二層指標),並依其權重值,了解教學網站評估層 面之重要性,依序為「課程教材品質」權重 34.13%、「網站系統技術品質」
權重 27.05%、「個人化服務功能」權重 16.47%、「網站基本資訊內容」權重 13.42%、「網頁設計」權重 8.93%;表示課程教材與網站系統技術等二項因 素,決定教學網站建構百分之六十以上的成敗,如再強化個人服務功能,
當可達到近百分之八十之效益;至於網站基本資訊與網頁設計,可視為網 站建構上的附屬要求,該二項的重要性,並未嚴重影響使用者的學習效益 與學習速度。
換言之,在人力財力物力有限的前提下,網站建構者可擇重改善網站 品質,俾發揮最大效益;抑或可言,教師或學生在擇選教學網站提供學生 作為自主學習的輔助工具時,可參考各指標重要性,依序擇選適合的教學 網站供學生使用,應可使其學習效益事半功倍。
109
二、 課程教材品質層面中各項評估指標與權重
在課程教材品質此一層面中包含 10 項評估指標,依其權重值,了解 其重要性分別為:教材內容正確完整 18.88%(佔整體架構權重 6.44%)、
課程範圍明顯區隔 15.18%(佔整體架構權重 5.18%)、教材可擴展移植性 14.61%(佔整體架構權重 4.99%)、教材內容豐富多元 10.34%(佔整體架 構權重 3.53%)、教材互動模式 8.56%(佔整體架構權重 2.92%)、教材適
課程範圍明顯區隔 15.18%(佔整體架構權重 5.18%)、教材可擴展移植性 14.61%(佔整體架構權重 4.99%)、教材內容豐富多元 10.34%(佔整體架 構權重 3.53%)、教材互動模式 8.56%(佔整體架構權重 2.92%)、教材適