第五章 實驗與分析
5.4 評量系統滿意度分析
圖 5.8 為網頁資訊搜尋與整合能力指標滿意度問卷評量結果,由圖可知,第 二項與第五項指標評量較低,其他均有同意等級以上之滿意度。大部分的指標均 有同意以上的滿意度,顯示其能力指標的定義均為大多數人可接受。因此,系統 所訂立的指標,是能確實協助教師培養學生網頁資訊搜尋與整合的能力的,且藉 由系統評量的結果,可以清楚的了解學生在學習中的問題為何。
表 5.5 網頁資訊搜尋能力輔助評量與分析系統滿意度問卷問卷
網頁資訊搜尋能力輔助評量與分析系統滿意度問卷
為了協助教師評量學生網路資訊搜尋與整合的能力,我們開發一網頁資訊搜尋能力輔助學習 與評量系統(以下簡稱本系統)。本問卷的目的在於針對我們所建立的網頁資訊搜尋能力輔助學習與 評量系統做滿意度調查。請各位先進在使用系統後,依照下列問題給予滿意度評分。
以下系列問卷作答方式分為五等第,分別為:非常同意(5)、同意(4)、 普通(3)、不同意(2)、非常不同意(1),請依題意勾選符合自己
程度的等第。
非 常 同 意
同 意
普 通
不 同 意
非 常 不 同 意 1. 本系統可以正確地記錄學生的搜尋歷程。 □ □ □ □ □ 2. 本系統所呈現之搜尋歷程資訊是容易理解的。 □ □ □ □ □ 3. 本系統所提供之搜尋歷程資訊具有即時性。 □ □ □ □ □ 4. 本系統提供搜尋歷程資訊的速度合宜。 □ □ □ □ □ 5. 本系統所提供之搜尋歷程資訊對於分析學生之搜尋能力有幫
助。 □ □ □ □ □
6. 本系統所提供之搜尋歷程資訊對於評量學生之搜尋能力有幫
助。 □ □ □ □ □
7. 本系統的介面是容易操作的。 □ □ □ □ □
8. 本系統所呈現之評量指標資訊是容易理解的。 □ □ □ □ □ 9. 本系統所提供之評量指標資訊具有即時性。 □ □ □ □ □ 10. 本系統所提供之評量指標資訊對於分析學生之搜尋能力有幫
助。 □ □ □ □ □
11. 本系統所提供之評量指標資訊對於評量學生之搜尋能力有幫
助。 □ □ □ □ □
12. 整體而言,我對本系統感到滿意。 □ □ □ □ □
再次感謝您撥空填寫此問卷,謝謝!
搜尋歷程的紀錄
同意, 62.50%
非常同意 , 37.50%
非常不同 意, 0%
不同意, 0%
普通, 0%
圖 5.9 搜尋歷程是否正確紀錄評分結果
圖 5.9 為搜尋歷程是否正確紀錄之評量結果,由圖可知,非常同意者佔 37.5%,同意者佔 62.5%,大部分受訪者對此項指標均有同意以上的滿意度。
搜尋歷程的可看度
同意,25%
普通, 25%
不同意, 12.50%
非常不同 意, 0%
非常同意 , 37.50%
圖 5.10 搜尋歷程是否容易理解評分結果
圖 5.10 為搜尋歷程是否容易理解評分結果之評量結果,由圖可知,非常 同意者佔 37.5%,同意者佔 25%,普通佔 25%,不同意佔 12.5%,大約一半的 人對此項評分有同意等級以上的滿意度,表示搜尋歷程的呈現方式並不理想,
有待改進。
搜尋歷程的即時性
非常同 意, 25%
非常不同 意, 0%
不同意, 12.50%
普通, 25%
同意, 37.50%
圖 5.11 搜尋歷程是否具即時性評分結果
圖 5.11 為搜尋歷程是否具即時性之評量結果,由圖可知,非常同意者佔 25%,同意者佔 37.5%,普通佔 25%,不同意佔 12.5%,大約一半的人對此項 評分有同意等級以上的滿意度,因系統中之學習歷程大多為網頁資料,搜尋歷 程之即時性並不是很理想,表示可能有某些網頁連結以失效,會影響評分結 果,有待改進。
提供搜尋歷程的效率
同意, 37.50%
普通, 0%
不同意, 0%
非常不同 意, 0%
非常同 意, 62.50%
圖 5.12 搜尋歷程的提供是否速度合宜評分結果
圖 5.12 為搜尋歷程的提供是否速度合宜之評量結果,由圖可知,非常同 意者佔 62.5%,同意者佔 37.5%,大部分受訪者對此項指標均有同意以上的滿
意度。
搜尋能力之分析
同意, 37.50%
普通, 37.50%
不同意, 0%
非常不同 意, 0%
非常同意 , 25%
圖 5.13 搜尋歷程的提供是否有助分析評分結果
圖 5.13 為搜尋歷程提供是否有助分析之評量結果,由圖可知,非常同意 者佔 25%,同意者佔 37.5%,普通佔 37.5%,大部分受訪者對此項指標均有同 意以上的滿意度,但仍有少部分受訪者認為搜尋歷程中的資料有某部分學生瀏 覽的網頁均為類似網頁,造成評分上的困難。
搜尋能力之評量
非常同意 , 25%
非常不同 意, 0%
不同意, 普通, 0% 0%
同意, 75%
圖 5.14 搜尋歷程的提供是否有助評量評分結果
圖 5.14 為搜尋歷程提供是否有助評量之評量結果,由圖可知,非常同意
者佔 25%,同意者佔 75%,大部分受訪者對此項指標均有同意以上的滿意度。
系統介面易懂
非常同意 , 25%
非常不同 意, 0%
不同意, 普通, 0% 0%
同意, 75%
圖 5.15 系統介面是否易於操作評分結果
圖 5.15 為系統介面是否易於操作之評量結果,由圖可知,非常同意者佔 25%,同意者佔 75%,大部分受訪者對此項指標均有同意以上的滿意度。
評量指標資訊易懂
同意, 50%
普通, 0%
不同意, 0%
非常不同 意, 0%
非常同意 , 50%
圖 5.16 評量指標的呈現是否容易理解評分結果
圖 5.16 為評量指標的呈現是否容易理解之評量結果,由圖可知,非常同 意者佔 50%,同意者佔 50%,大部分受訪者對此項指標均有同意以上的滿意 度。
評量指標資訊之即時性
非常同意 , 37.50%
非常不同 意, 0%
不同意, 0%
普通, 25%
同意, 37.50%
圖 5.17 評量指標的呈現是否具即時性評分結果
圖 5.17 為評量指標的呈現是否具即時性之評量結果,由圖可知,非常同 意者佔 37.5%,同意者佔 37.5%,普通佔 25%,大部分受訪者對此項指標均有 同意以上的滿意度,但仍有少部分受訪者不認同,因評量指標需經過學習歷程 前處理與指標的運算,並非學生學習完的第一時間內,即可評量出結果,而這 其中,或許有些學習歷程內容會失效,造成評量結果不理想,因而造成某些受 訪者不是很認同此項評分。
評量指標對於搜尋能力的分析
非常同意 , 50%
非常不同 意, 0%
不同意, 普通, 0% 0%
同意, 50%
圖 5.18 評量指標是否助於評量評分結果
圖 5.18 為評量指標是否助於評量之評量結果,由圖可知,非常同意者佔 50%,同意者佔 50%,大部分受訪者對此項指標均有同意以上的滿意度。
評量指標對於搜尋能力的評量
同意, 50%
普通, 12.50%
不同意,
0% 非常不同 意, 0%
非常同意 , 37.50%
圖 5.19 評量指標是否助於分析評分結果
圖 5.19 為搜尋歷程是否正確紀錄之評量結果,由圖可知,非常同意者佔 37.5%,同意者佔 50%,普通佔 12.5%,大部分受訪者對此項指標均有同意以 上的滿意度。
整體評價
同意, 75%
普通, 0%
不同意, 0%
非常不同 意, 0%
非常同 意, 25%
圖 5.20 評量指標是否助於評量評分結果
圖 5.20 為評量指標是否助於評量之評量結果,由圖可知,非常同意者佔
25%,同意者佔 75%,大部分受訪者對此項指標均有同意以上的滿意度。
網頁資訊搜尋與整合能力評量系統滿意度問卷 4.38 3.883.75
4.63
3.88 4.25 3.88
4.50 4.13 4.504.254.25
0.00 1.00 2.00 3.00 4.00 5.00
1 2 3 4 5 6 7 8 9 10 11 12
圖 5.21 網頁資訊搜尋與整合能力評量系統滿意度問卷評分結果
圖 5.21 為網頁資訊搜尋與整合能力評量系統滿意度問卷之整體評量評分結 果,除了問題 2、3、5 和 7 之外,其他的問題滿意度均在同意以上,則我們可看 出,系統在搜尋歷程的呈現上,搜尋歷程的及時性,搜尋歷程資訊的協助分析資 訊,以及系統介面的容易操作度,都是我們必須要重新審查檢討的地方。
搜尋歷程的呈現,目前系統中是以表格的方式,秀出系統中所儲存的搜尋歷 程,但若歷程資料字串太長,則會影響到版面的美觀,且歷程資料應依照歷程種 類依序列出。搜尋歷程的及時性,因考量學習歷程若是以儲存網頁內容的方式,
將會耗費大量的儲存空間,所以改成只儲存其網路連結,但若是遠端網頁被移除 或是遺失,則無法在之後瀏覽其內容,此為本系統中尚待解決的問題之ㄧ。
系統介面的操作度也是尚待改進的部分之ㄧ,系統設計時較少考慮到使用方 便的問題,只是將所需的資訊記錄在系統中,或是呈現給使用者瀏覽,而系統中 各項功能的使用介面並未特別設計,因此容易造成使用者有使用上的不便。
而問題 4、8 和 10,為滿意度較高的問題,由問卷內容我們可以觀察出,系 統中提供給教師之搜尋歷程資訊的速度是較滿意的,因系統與學習歷程資料庫均
運行在同一台主機,因此資料擷取速度是相當快速的。系統中所呈現之評量指標 資訊是容易被理解的,我們在介面中有針對指標內涵做大致說明,因此使用者可 以隨時在頁面瀏覽指標之內涵,讓使用者可以迅速的理解我們所呈現的指標結 果。系統中提供之評量指標對於評量學生的搜尋能力是有幫助的,經由六大指標 評量之結果,教師可以清楚的了解學生的問題為何,因此可觀察出系統所提供之 評量指標對於評量學生的搜尋能力是有幫助的。