第三章 研究方法與設計
第五節 研究工具與資料分析
依據上述之研究方法,本節將介紹所採用之研究工具與資料分析方式,茲分 述如下:
一、研究工具
(一)指定檢索任務設計
本研究之指定檢索任務設計為貼近受試者日常生活情境,設計一網路調查問 卷蒐集受試者相關網路活動。網路問卷調查於2009 年 3 月 1 日起至 3 月 15 日,
共取得226 個網路活動描述,整理如表 3-5-1:
表3-5-1、網路問卷調查整理結果
接觸頻率
任務類別 經常執行之任務 不常執行之任務
生活取向 97
(問卷A、B 題項)
78
(問卷E、F 題項)
工作取向 33
(問卷C、D 題項)
18
(問卷G、H 題項)
生活取向任務係指使用者利用網路從事非學術性活動之休閒娛樂相關活動,
如收發信件、購物消費、網路娛樂、旅遊指引或金融交易等。本研究參考2009 年 1 月台灣寬頻網路使用調查(梁德馨,2009)、資策會2007 年我國網路調查報告(孫 鴻業,2008)、2008 年 12 月 Pew Internet 網路活動調查(Pew Internet, 2008a)及 2009 年 Pew Internet 上網世代調查報告(Pew Internet, 2009)等四份調查報告中提 及網路相關活動列表,並以此為基礎進行歸納。工作取向任務係指使用者利用網 路進行個人學術研究等相關活動,如檢索學術文章、名詞解釋、圖書館館藏查詢 等,並依照次數多寡進行歸納。
經初步統計與討論後,扣除網路工具使用(如收發 E-mail、上傳或下載檔案
等)項目,本研究各取經常執行任務與不常執行任務之前二名活動項目;另參考
任務6:請尋找 Thomas H. Davenport 最新發表於哈佛商業評論的文
章 精確
任務6:請試著回想上週您在哪裡尋 找Thomas H. Davenport 的期 刊文章,接著找到上週點選 任務8:請至 conferencealerts 中的
Internet and World Wide Web 類別尋找2009 年 4 月進行的 DMA Social media 研討會相 關資訊
更動
任務8:請試著尋找上週所找到的 2009 年 4 月 22 日舉行的 DMA Social media 研討會官 方網站
指定檢索任務並未限定時間,計算任務完成時間從受試者點選螢幕錄製軟體起,
至成功尋找到目標資訊而關閉螢幕錄製軟體為止。因此,兩階段實驗除執行任務 時間外,加上實驗說明、問卷填寫及訪談等,第一階段實驗可在六十分鐘內完成,
第二階段實驗則為九十分鐘。
(二)檢索任務調查表及檢索結果評估表
根據研究目的與問題,本研究參考Bruce, Jones and Dumais(2004)及 Capra
(2006a)等相關文獻參考製作檢索任務調查表及檢索結果評估表。檢索任務調查 表包含:個人背景資料、任務接觸次數、及對目標資訊所在地之熟悉度等三項,
檢索結果評估表則包含有無找到目標資訊、檢索結果滿意度、及檢索過程難易度 等三項。
(三)訪談大綱
為能深入瞭解受試者尋獲與再尋獲資訊時所採用的檢索策略及其想法,訪談 大綱共分三部分:網站/頁取用途徑之原因、檢索策略與技巧之運用、及檢索結果 評估。訪談時搭配操作畫面,並提出檢索歷程中所觀察到的問題,期能挖掘受試 者心中的想法。
(四)電腦螢幕錄製軟體
為 全 程 錄 下 實 驗 中 受 試 者 之 操 作 過 程 , 並 產 生 檢 索 記 錄 , 本 研 究 使 用 LogSquare3人機互動與行為觀察分析軟體。事先徵得受試者同意,將該軟體安裝於 受試者即將進行實驗之個人電腦中。實驗開始時,由受試者點選後開始錄製整個 操作過程,藉以記錄實驗過程與產生檢索記錄進行質化分析。
二、資料分析
本研究採質量兼具的方式,透過實驗與觀察所得,以量化方式統計檢索歷程,
如檢索詞彙、檢索語句、任務完成時間、檢索路徑、瀏覽相關網頁數量、點擊次 數等相關項目,從中歸納受試者資訊尋獲與資訊再尋獲之檢索行為。此外,經問 卷取得受試者基本資料、及受試者對檢索任務之接觸次數、熟悉度等資料,接著 透過量化方式以次數分配表及次數百分比進行簡單描述統計分析。最後,任務完 成後訪問受試者資訊尋獲與再尋獲之檢索策略與想法,並將錄音資料謄錄逐字稿,
再以質化方式進行編碼與分析。
(一)檢索歷程分析
藉由電腦螢幕錄製軟體記錄整個檢索歷程,將檢索歷程資料進行編碼,製作 檢索歷程分析記錄表且輔以觀察記錄資料,分析項目如表3-5-3 所示:
表3-5-3、檢索歷程資料之分析項目說明
類別 分析項目 說明
網 路 瀏 覽 器使用
網路瀏覽器種類 受試者於每一檢索任務中所使用之網路瀏覽器種類,如 Internet Explorer、Mozilla Firefox 等
功能使用 檢索過程中,受試者所點選之瀏覽器相關功能,如回上 頁、重新整理、回首頁、停止等按鍵
網站/網頁 取用分析
原有取用途徑 受試者檢索時所使用之網站/網頁取用途徑,如搜尋引 擎、bookmark 等
更換原有取用途徑 檢索過程是否更換原有取用途徑、新取用途徑為何
檢索詞彙 分析
檢索詞彙平均長度 統計受試者輸入中文與英文檢索詞彙之字元數量 中文詞彙字數統計 統計中文檢索詞彙之使用字數,以每個單字數計次 檢索詞彙概念組合 歸納每一檢索任務之相關檢索詞彙,通常以一完整名詞所
表達之概念為主
(接下頁)
(承上頁)
檢索語句 分析
檢索語句平均長度 統計受試者輸入檢索詞彙之使用數量
布林邏輯使用 受試者輸入之檢索語句是否包含布林邏輯運算元,如 AND/and、OR/or、NOT/not 等
修飾符號使用 受試者輸入之檢索語句是否包含修飾符號,如””(限定)、
+(即 and)、-(即 not)、( )(即限定)等
檢索語句更動 過程中,受試者是否更動檢索語句,如增加、刪減、更改 檢索詞彙等
檢 索 歷 程 分析
檢索歷程平均長度 統計受試者輸入檢索語句之使用次數
檢索結果頁瀏覽數量 輸入檢索語句後,受試者瀏覽檢索結果之頁數 任務完成時間 統計受試者從執行任務開始至結束之執行時間 點選次數 受試者於每一檢索任務期間所點選之總次數
相關網頁瀏覽數量 受試者於每一檢索任務期間所開啟並瀏覽之網頁總次數 網頁平均停留時間 受試者於每一檢索任務期間停留於每一網頁之時間 檢索路徑 受試者於每一檢索任務期間所找到相關網頁之執行動作
(二)問卷資料分析
問卷主要為取得受試者基本資料及受試者對檢索任務之瞭解程度,故分析項 目分別為性別、網路使用經驗、任務接觸次數、任務熟悉度、檢索滿意度、有無 尋獲目標資訊及檢索難易度,以量化方式利用次數分配表及次數百分比進行簡單 描述統計之分析。
(三)訪談記錄分析
將錄音檔謄錄逐字稿後,以質化方式進行編碼與分析,並依據訪談內容,分 析受試者網路瀏覽器之選用原因、相關功能使用、檢索策略與技巧之運用、資訊 再尋獲之回想情況、檢索滿意之原因、檢索困難點等,藉以瞭解受試者主觀感受,
作為後續系統改善與提升網路資訊素養之建議。