第五章 調查結果與分析
第三節 進一步研究建議
一、此次任務設計希望測試檢索系統所有功能,故設計自簡易與進階 查詢、結果顯示、檢索結果排序、層級瀏覽、調閱申請、線上使 用說明、個人化服務等多項功能,任務設計儘可能說明操作步 驟,以降低不同測試者對於題意的誤解,主要目的在於測試系統 介面的易用性,並非瞭解檢索者在線上使用行為的觀察,未來可 以針對使用者線上使用檔案資訊系統的檢索行為加以觀察分 析,瞭解檢索者檢索行為喜好和傾向。
二、對於系統易用性評估研究之建議為本次研究僅分析 15 位受測者
檢索失敗處,主要目的作為系統介面改善之參考,但並未探究有 經驗使用者與無經驗使用者之差異,未來可進一步分析不同背景 使用者容易出錯之設計有否差異。
三、此次分析觀察錯誤類型標示,係採由兩位研究參與者共同討論一 起標示認定錯誤類型方式進行,如為檢核標示結果之一致性,未 來可考量由兩位研究者分別標示,並檢核標示錯誤結果之一致 性,以驗證結果之有效性。
參考書目
王向明主編(2001)。檔案文獻檢索。上海:上海大學出版社。
李殷(2009)。國家與機關檔案目錄查詢系統使用介面之親和性改善。
檔案季刊,8 卷 2 期,132-137。
林巧敏(2003)。二二八事件檔案資訊網目錄使用調查研究。中國圖 書館學會會報,70 期,147-164。
林巧敏(2004)。檔案資料庫目錄品質控制之探討。圖書與資訊學刊,
49 期,頁 79-93。
林巧敏,鄭伊廷(2011)。臺灣地區檔案典藏機構數位化作業現況分 析。檔案季刊,10 卷 2 期,76-93。
林妙樺(2006)。數位典藏系統入口網站界面可用性評估模式之探討。
大學圖書館,10 卷 2 期,160-182。
林佳穎、吳明德(2011)。圖書館電子資源整合查詢系統之好用性評 估:以國立臺灣大學圖書館 MUSE 電子資源整合查詢系統為例。
大學圖書館,15 卷 2 期,1-18。
姜義臺(2010)。圖書館電子資源整合檢索系統優使性之研究:以靜 宜大學為例。圖書與資訊學刊,2 卷 4 期,25-36。
馮惠玲主編(1999)。檔案文獻檢索。北京:高等教育出版社。
張郁蔚(2007)。以訪談法探討「全國檔案目錄查詢網」使用者之滿 意情形。大學圖書館,11 卷 1 期,139-165。
張淑惠(2004)。我國歷史檔案館館藏檢索系統在 Web 環境中建置之 研究。未出版碩士論文,國立政治大學圖書資訊與檔案學研究 所,臺北市。
維基百科(2011)。易用性。2011 年 12 月 2 日,取自
http://zh.wikipedia.org/zh-tw/%E6%98%93%E7%94%A8%E6%80
%A7
鄭伊廷(2012)。檔案目錄整合檢索系統之優使性研究-以 ACROSS 為 例。未出版碩士論文,國立政治大學圖書資訊與檔案學研究所,
臺北市。
潘淑滿(2003)。質性研究:理論與應用。臺北市:心理。
檔案管理局(2012)。本局簡介電子書。關於檔案管理局。上網日 期 : 2012 年 12 月 30 日 , 檢 自 : http://www.archives.gov.tw/eBook/index.html
檔案管理局(2012)。101 年 1 月至 6 月國家檔案開放應用辦理情形報 告 。 上 網 日 期 : 2013 年 3 月 13 日 , 檢 自 : http://www.archives.gov.tw/Publish.aspx?cnid=163
謝建成、劉至逢(2009)。大學圖書館網站使用性評估之探討。教育 資料與圖書學,47 卷 2 期,163-197。
蔡維君(2006)。大學圖書館網站好用性評估:以臺灣大學圖書館網 站為例。碩士論文:臺灣大學圖書資訊學研究所,臺北市。
魏澤群(2007)。優使性 2.0 (Usability 2.0):網站經驗設計與使 用者研究。臺北市:網奕資訊科技股份有限公司。
Alling, Emily, Naismith, Rachael.(2007). Protocol Analysis of a Federated Search Tool: Designing for Users.
Internet Reference Services Quarterly,
12(1/2), 195-210.Retrieved from December 20, 2012 from http://works.bepress.com/alling_emily/1
Altman, B., Nemmers, J. R.(2001). The Usability of On-line Archival Resources : The Polaris Project Finding Aid.
The
American Archivist
,64,121-131.Chapman, J. C.(2010). Observing Users: An Empirical Analysis of User Interaction with Online Finding Aids.
Journal of Archival Organization
,8(1),4-30.Clark, Jason A. (2004). A Usability Study of the
Belgian-American Research Collection: measuring the functionality of a digital library.
OCLC Systems &
Services
, 20(3), 115–127.Cox, R. J. (2007). Revisiting the Archival Finding Aid
. Journal of Archival Organization
,5(4),5-32.Daines, J. G., & Nimer, C. L. (2011). Re-Imagining Archival Display: Creating User-Friendly Finding Aids.
Journal of Archival Organization
,9(1),4-31.Duff, W.M. & Johnson, C.A.(2002). Accidentally Found on Purpose:
Information-Seeking Behavior of Historians in Archives.
Library Quarterly,
72(4),472-496.Edgecombe, J.(1993). Finding Aids. In J. Ellis (Eds.),
Keeping Archives
(pp.248-272). Australia, Society of Archivists.Garmendia, J. (2002) . User Input in the Development of Online Services: the PRO catalogue.
Journal of the Society of Archivists
,23(1),51-58.International Council on Archives Committee on Descriptive Standards (ICA/CDS). (2002).
Report of the Sub-committee on Finding Aids Guidelines for the Preparation and Presentation of Finding Aids
. Retrieved September 23, 2011,from http://www.icacds.org.uk/eng/findingaids.htm Kramer, E.F. (2005). IUPUI Image Collection : a UsabilitySurvey.
OCLC Systems and Services
, 21(4),346-359.Krause, MG, Yakel, E.(2007). Interaction in virtual archives:
the polar bear expedition digital collections next generation finding aid.
American Archivist
,70 :282-314.Lack, R.(2006). The Importance of User-Centered Design:
Exploring Findings and Methods.
Journal of Archival Organization
,4(1/2),69-86.Library and Archives Canada. (2012).
State of Holdings: The condition of Analogue Holdings at Library and Archives Canada
. Retrieved from December 20, 2012 fromhttp://www.bac-lac.gc.ca/eng/about-us/modernization/Do cuments/State%20of%20the%20Holdings-June%202012_e.pdf Long, Holley, Lage, Kathryn & Cronin, Christopher, (2005). The
flight plan of a digital initiatives project, part 2:
Usability testing in the context of user-centered design.
OCLC Systems & Services
, 21(4), 324–345.Nielsen, J.(1993).
Usability Engineering
.San Francisco, Calif.: Morgan Kaufmann Publishers.Nielsen, J.(2000, March 19).
Why You Only Need to Test With Five Users
. Retrieved November 2, 2011, fromhttp://www.useit.com/alertbox/20000319.html
Nielsen, J., Landauer, T.K.(1993).
A Mathematical Model of the Finding of Usability Problems.
Paper presented at the Proceedings ACM/IFIP INTERCHI'93 Conference, Amsterdam, The Netherlands . April 24-29, pp.206-213.Nimer, C.,Daines, G.(2008). What Do You Mean It Doesn't Make Sense? Redesigning Finding Aids from the User's
Perspective.
Journal of Archival Organization
, 6(4),216-232.Ochoa,M., Minton, T., and Benson, D.(2009).
Usability Test Report for the University of Florida Digital Collections
. Gainesville, FL.: University of Florida DigitalCollections. Retrieved January 28, 2013, from http://ufdc.ufl.edu/UF00094728/00001
Pearrow, M. (2007).
Web Usability Handbook
. Boston: Charles River Media.Preece, J.(1998).
A Guide to Usability: Human Factors in Computing.
New York: Wiley Computer Publishing.Proffitt, M. (2006). How and Why of User Studies: RLG's RedLightGreen as a Case Study. Journal of Archival Organization,
4
(1/2), 87-110.Prom, C. J.(2004). User Interactions with Electronic Finding Aids in a Controlled Setting.
American
Archivist
,67(2),234-268.Reakes, P., & Ochoa, M. (2009). Non-Commercial Digital Newspaper Libraries: Considering Usability.
Internet Reference Services Quarterly, 14
(3/4), 92-113.Rosenbusch, A.(2001). Are Our Users Being Served ? A Report on Online Archival Databases.
Archives and
Manuscripts,
29(1),44-61.Rubin, J.(1994).
Handbook of Usability Testing: How to Plan, Design, and Conduct Effective Tests
. Canada: John Wiley& Sons.
Scheir, W.(2005). First Entry: Report on a Qualitative
Exploratory Study of Novice User Experience with Online Finding Aids.
Journal of Archival Organization
,3(4),49-85.
Stevens, M. E.(1977). The Historian and Archival Finding Aids.
Georgia Archive,
5,64-74.Stevenson, Jane.(Oct., 2008). 'What Happens If I Click on This?': Experiences of the Archives Hub.
Ariadne Issue,
57, Retrieved March 13, 2013,from ,http://www.ariadne.ac.uk/issue57/stevenson/
Tibbo, H. R.(2003). Primarily History in America: How U.S.
Historians Search for Primary Materials at the Dawn of the Digital Age.
American Archivist,
66(1), 9-50.The National Archives.(2013).
Who We Are
. Retrieved March 13, 2013,from,http://www.nationalarchives.gov.uk/about/who-we-are.htm
The National Archives.(2013).
Catalogues and online records
. Retrieved March 13, 2013, from,http://www.nationalarchives.gov.uk/records/catalogues -and-online-records.htm
The U.S. National Archives and Records Administration
(NARA).(2013).
About Online Public Access (OPA)
. Retrieved March 13, 2013, from,http://www.archives.gov/research/search/about-opa.html The U.S. National Archives and Records Administration
(NARA).(2013).
About ARC.
Retrieved March 13, 2013, from,http://www.archives.gov/research/arc/about-arc.h tmlUsability Net.(1998).
Usability Definitions. ISO 9241-11:
Guidance on usability.
Retrieved December 1, 2011, fromhttp://www.usabilitynet.org/tools/r_international.htm
#9241-11
Yakel, E.(2004). Encoded Archival Description: Are Finding Aids Boundary Spanners or Barriers for Users?
Journal of Archival Organization
,2(1/2),63-77.Yakel, E., & Torres, D. A. (2003). AI: Archival Intelligence and User Expertise.
American Archivist
,66(1),51-78.Yakel, E., Shaw, S., & Reynolds, P. (2007). Creating the Next Generation of Archival Finding Aids.
DLib
Magazine
,13(5/6), Retrieved November 2, 2011, http://www.dlib.org/dlib/may07/yakel/05yakel.html附錄一:檢索任務描述
任務一(檢索方式)
‧請於國家檔案資訊網(https://ha.archives.gov.tw/index.aspx) 中,以「都市計畫」一詞於簡易搜尋檢索。
‧承上,由於「都市計畫」一詞檢索結果超過千筆,請以進階搜尋檢 索,設定仍以「都市計畫」為檢索詞,但限定為「交通部臺灣鐵路管 理局」之檔案,繼續進行檢索。
任務二(查詢結果顯示)
‧請將檢索結果以檔案日期由大到小排序,並瀏覽最新一筆結果的內 容。
任務三(層級瀏覽功能)
‧請檢索「二二八紀念碑案」一案,並試著瀏覽案卷下所屬案件。
任務四(調閱申請)
‧承上,請在二二八紀念碑一案下,瀏覽幾個案件,並請試著點選至 多三筆案件後,提出案件調閱申請
(請持續動作至可點選列印申請單
為止,但不用印出)
。無會員資格者,請先申請會員帳號後再繼續申請動作。
任務五(線上輔助說明)
‧國家檔案資訊網提供「使用說明」服務,使用者遇到檢索問題時可 供參考。請試著點選「使用說明」,瀏覽您有需求的服務頁面。
任務六(個人化服務)
‧國家檔案資訊網提供使用者 RSS 訂閱服務。請試著連結至 RSS 訂閱 畫面,並訂閱 RSS 清單中您最有興趣的項目。
親愛的研究者,您好:
感謝您撥冗 參與本學術研究。本問卷旨在瞭解歷史研究者使用檔 案管理局「國家檔案資訊網」介面操作與互動情形,藉以探討檔案資訊 系統介面存在之易用性問題,期許可供國內檔案資訊系統設計與功能改 善之參考。此份問卷所有填答資料,僅供本次研究統計分析之用,不會 對外公開,敬請您放心填答,惟有 您鼎力相助,本研究方得以順利進行。
再次謝謝您的協助與支持!順頌 時棋
國立政治大學圖書資訊與檔案學研究所 助理教授 林巧敏 敬啟
附錄二:「國家檔案資訊網」易用性評估問卷
一、基本資料與使用系統經驗分析 1 請問您目前的身分別?
□(1) 碩士生 □(2) 博士生 □(3) 教師 □(4) 研究助理 2 請問您的性別與年齡?
□(1) 男,______歲 □(2) 女,______歲 3 請問您是否曾使用過「國家檔案資訊網」?
□(1) 有,使用頻率為
□每週 1-3 次 □半個月 1-3 次 □1 個月 1-3 次 □2-3 個月 1-3 次
□4-6 個月 1-3 次
□(2) 無,原因為___________________________________
4 請問您曾使用「國家檔案資訊網」系統以外的檔案檢索系統進行研究嗎?
若有,請寫下曾使用過之檔案檢索系統。
□(1) 有,曾使用過_________________________________
□(2) 無
5 請問您網路檢索的年資為?
□(1)1-2 年 □(2)2-3 年 □(3) 3-4 年 □(4) 5 年以上
二、對於「國家檔案資訊網」系統之看法
(5) 滿意度
1 您是否覺得藉由「國家檔案資訊網」系統進行檢索的結果能符合資訊需求?
□(1)非常認同 □(2)認同 □(3)普通 □(4)不認同 □(5)非常不認同 2 您是否覺得「國家檔案資訊網」系統提供對於檢索結果分類的功能有助益?
(目前系統對檢索結果提供「主題」、「年代」、「全宗名」、「國家檔案分類」
瀏覽之功能)
□(1)非常認同 □(2)認同 □(3)普通 □(4)不認同 □(5)非常不認同 3 您是否對於「國家檔案資訊網」系統檢索結果的正確性感到滿意?
□(1)非常認同 □(2)認同 □(3)普通 □(4)不認同 □(5)非常不認同 4 您往後是否還會再利用「國家檔案資訊網」系統做為檢索工具?
□(1)非常認同 □(2)認同 □(3)普通 □(4)不認同 □(5)非常不認同 5 您往後是否會推薦他人使用「國家檔案資訊網」系統?
□(1)非常認同 □(2)認同 □(3)普通 □(4)不認同 □(5)非常不認同
問卷結束!感謝您的協助!
附錄三:國家檔案資訊網使用者訪談大綱
國科會補助專題研究計畫項下出席國際學術會議心得報告 計畫編號 NSC 101-2410-H-004-194
計畫名稱 檔案資訊檢索系統易用性評估與使用者意見調查
(英文) An Analysis of Archival Citation and Use Behavior on Historians : 2006-2012 for Example
地檔案館進行口述紀錄的成果,臺灣史學工作者過去曾累積豐富的口訪實務
四、報告內容原文
歷 史 學 者 引 用 與 使 用 檔 案 行 為 分 析 :以 2006-2010 引 文 為 例 林巧敏
國立政治大學圖書資訊與檔案學研究所副教授 E-mail:[email protected]
摘 要 使用;另一個研究方式是「引用文獻分析」(citation analysis),透過參考書 目與實際引用文獻的計量研究,瞭解真正被使用者應用而且發揮效益的檔案特 性。(Beattie,1990)
本研究關注檔案資料對於歷史學者研究之影響,擬由歷史學術期刊引用文 獻中,分析歷史學者研究文獻引用檔案資料之數量與性質,瞭解被引用之檔案資
料類型、檔案資料年代以及經常被使用之檔案全宗與館藏來源。研究設計採用被
Uva、Case、Orbach 等人曾探索歷史學者資訊尋求行為,將歷史學者找尋資 訊得過程大致分為:選擇問題(problem selection)、規劃研究過程(detailed planning ) 、 蒐 集 資 料 ( data collection ) 、 分 析 解 釋 ( analysis and interpretation)與繕寫修正(writing/rewriting)等五步驟,並認為這些步 驟有可能重疊進行。(Uva,1977;Case,1991;Orbach,1991)
Stone 曾歸納描述人文學者研究資訊行為的特性為:傾向於單獨研究、需要 及其他資訊的可得性等。(Meho & Haas,2001,p.9)
過去對於史學者資訊使用行為調查經常是採用問卷、訪談或是引用文獻分 析的方式。當研究取樣範圍對象多,重點在瞭解多數普遍的意見時,以問卷調查
過去對於史學者資訊使用行為調查經常是採用問卷、訪談或是引用文獻分 析的方式。當研究取樣範圍對象多,重點在瞭解多數普遍的意見時,以問卷調查