第四章 系統評估結果
第三節 目標使用者可用性測試結果
一、 量化資料結果
使用者問卷包含 SUS 系統使用性和 QUIS 使用者互動滿意度兩份量表，藉 以分別蒐集相關資料。在系統操作之後，首先請 12 位實習老師填寫 SUS 問卷，
陳述其對於本系統使用性程度之了解，以李克特式六點量表為等第，從 1 分到 6 分代表從非常不同意到非常同意。表 4-3-1 為第二階段目標使用者評鑑的系統使 用性量表的描述性統計結果。
72
備註：正向題為第 1、2、3、4、6、8、10、12 題；灰底色為負向題，包括第 5、7、9、11、13 題。
73
74
分別為4.00和4.17，是屬於滿意度中較差的兩項，也能發現本系統較缺乏活潑與 一致性。
二、 質化資料結果
質性資料主要來自問卷的開放性問題和訪談內容。問卷共有四題開放性問題：
「我認為我常用到的 ASSIST 功能依序是？」、「我認為 ASSIST 的優點為？」、
「我認為 ASSIST 需要改進的部分？」、「我認為 ASSIST 可以再增加的功能有？」。 訪談則依據問卷填寫結果和預設訪談大綱，以一對一方式深入了解目標使用者的 意見。研究者將回收之問卷，以及訪談錄音檔轉謄的逐字稿進行編碼，總共編譯 出開放編碼 77 項，將其概念相似者整合與重新分類後，再彙整出 13 項主軸編 碼，主軸編碼與其包含之開放編碼請見附錄十三。以下依照編碼性質，分為「系 統介面設計建議」、「系統功能操作建議」、「系統功能應用看法」、「系統其他改善 建議」四方面解說。
（一）系統介面設計建議 1. 教師檢定考古題顯示
教師檢定功能中的考古題練習全數為選擇題，當使用者選擇答案送出後，會 立即以紅色文字顯示正確解答，但有受試者表示若以紅字呈現正確解答，會誤以 為答錯，引發內心的壓力。另外老師也認為，現有的設計將送出的按鈕擺放至畫 面底部，距離題目與選項太遠，容易造成作答時來回移動的不便。
不管我選對的還是錯的，它都是紅色的字，會讓我覺得一瞬間分不太出來我到底是答對還 是答錯…（省略）…會覺得我不管選什麼都錯的，我壓力好大。（S06-in-03）
就是選擇答案的問題，它太下面了。（S06-in-02）
75
2. 問題留言板標示與次序
在教師檢定功能中，問題留言板會依照問題發表時間自上而下由新到舊排序，
但若多位使用者同時對同一問題提出發問時，則會變成自上而下是由舊到新，實 習教師認為，一旦留言日漸增加，若要在同個問題內尋找自己的發言，需要持續 往下滑動，增加不少麻煩，若能統一將最新留言發表排在前面，可以增加閱讀便 利性。另外在行動版本的 ASSIST 問題留言板的排列方式，是將發表者與發表內 容並排且以黑色字體呈現，受試者表示此顯示方式會讓目光沒有一個定點目標，
增加瀏覽的困難。研究者觀察也發現，許多受試者在點開問題留言板時，往往會 有些許停頓才繼續動作，應該更加凸顯留言者的名稱，藉以區別每則留言。
有最新留言的那個問題，它可以排在比較上面，因為現在的問題還只有一點點，可是以後 有很多問題的話不知道會不會很亂。（S06-in-06）
手機板如果即時需要的話，我覺得還蠻方便的，就是希望名字可以再明顯一點。（S07-in-03）
我看我們回覆問題的時候，我覺得可以用跟其他人不同的區別，因為剛剛找我的問題，我 覺得找比較久一點。（S07-in-01）
（二）系統功能操作建議 1. 訊息回覆
教師檢定中的問題留言板僅有提供最新訊息的排列，使用者必須自行點選本 功能進入檢閱，才能夠確認自己的問題是否已有其他使用者回應。受試者表示，
將疑問張貼在問題留言板後，並不曉得何時能獲得回應，若有他人回覆，但系統 沒有提醒通知，很難確定自己的發問究竟是否有被他人閱讀及回覆，得要自己反 覆進入檢閱較不方便。
我們提出問題就是這題有問題，那我不知道是不是管理員回答訊息的時候，會有提示你的 問題解決了？ （S04-in-04）
76
我不知道我什麼時候可以得到正確的答案，可能有人回覆可是我不知道，我不知道我的問 題有沒有被大家看到？（S06-in-05）
2. 直接拍照
經過專家評鑑建議增加的個人筆記活動相片功能，由於程式撰寫的技術難度 較高，第一階段的修改僅可讓使用者從電腦上傳照片以及編輯文字解說，行動版 可同步瀏覽該照片與訊息。雖然受試者相當支持本功能的用途，但同時也認為攝 影可說是現今行動裝置的基本配備，應該能直接利用手機拍攝照片及上傳，增加 個人筆記的即時性，此部分的使用者反應亦在本研究者的預料之中，未來系統修 改應朝向此方向進行。
教案活動照片（個人筆記）能由手機直接上傳。（S04-qu-04）
我覺得手機也要同時可以，因為現在智慧型手機也應該都會有照相的功能，那你就不用再 用相機或手機拍了之後再透過電腦再回來，變得就是說多一個程序，應該說在手機的部分 就應該做到這樣子。（S11-in-03）
3. 跨年度出題
教師檢定中的考古題練習，可分為「自我練習」和「模擬測驗」兩種形式，
後者是讓使用者自行選擇科別、年度和測驗題目數量後，以隨機方式出題。受試 者認為，既然名為模擬測驗，應以科目分類即可，無須侷限在各個年度，用打散 的方式更能考驗自己的實力。
模擬的部分應該可以直接全部大模擬，就不用再分年度了，既然是模擬測驗的話，就不用 僅限於在某個年度，還是要選科目啦，因為不能說整科。（S11-in-01）
77
4. 輔助說明
教師檢定的問題留言板提供使用者回覆他人訊息、編輯或刪除自己訊息的功 能，但測試過程中，有多位受試者僅能完成回覆他人訊息的任務，編輯自己訊息 的部分多有停頓的情形。研究者觀察發現，發生此情況的受試者，多是根據畫面 有放置「回覆」按鈕才執行任務，長按編輯這類無按鈕的操作手勢不容易被受試 者記得。另外在個人筆記活動照片的頁面，也有受試者不清楚如何開啟瀏覽照片，
即使能進入瀏覽，也不一定能發現照片可以放大縮小，對於系統內其他按鈕符號 所代表之涵義亦有困惑。
剛剛那個不是要編輯問題留言板，我發問的問題要編輯，結果我試了半天要長按才能修改。
（S08-in-01）
照片放大…可以直接放大嗎？因為我剛剛試過好像沒辦法…喔…了解，我以為這個就放這 張照片，所以我會想要…[直接在縮圖用手指縮放]。（S03-in-05）
可是我不知道笑臉要幹嘛，是寫我的心情還是學生的心情。（S06-in-01）
考量到受試者在測試時翻閱的便利性，操作手冊僅先以紙本形式提供受試者，
有受試者希望將此操作手冊放入系統中，此建議與本系統規畫不謀而合。但該名 受試者也提議，若能在第一次接觸系統時，能有個別步驟提示，能讓使用者更容 易上手。
如果是這樣子的話會很好，就對於第一次用來講的話，不會的我就可以馬上查這樣。 （S05-in-06）
我覺得你們可以在第一次使用的時候顯示那些操作指令，讓第一次使用者知道使用的步驟，
或是說使用的指示。（S05-in-04）
78
（三）系統功能應用看法
本研究者在訪談時，針對本次新開發之三個功能：個人筆記、教學教案、教 師檢定，詢問受試者的看法，結果受試者認為最常使用的功能依序應為：教師檢 定、個人筆記、教學教案。
1. 教師檢定
教學檢定一致被所有實習老師認為是最實用的功能，也是最常會使用的功能。
做實習教師的主要目標即是在教育實習階段吸收課堂實務經驗，並且通過教師檢 定取得教師證。本功能讓實習教師能隨時隨地練習教師檢定，掌握自己的學習程 度，也省去攜帶厚重書本的麻煩。
我覺得教師檢定當然是現階段，準備考試的一個重點。（S11-in-04）
因為在學校的時間蠻零碎的，你可能要跑來跑去，可能好不容易坐下來，你就可以做一下 題目。（S03-in-09）
可以不用拿著書就可以做題目，比較方便，坐捷運的時候也可以看題目。（S08-in-06）
我剛剛讀完書，可能選擇我要的類別去測試一下，當個小模擬，看自己讀書有沒有讀進去 這樣子。（S07-in-08）
2. 個人筆記
多數受試者認為，個人筆記的優點在於能夠在任何時間地點隨手記錄重要事 件和當下感受，由於實習老師必須繳交教學歷程檔案或心得給實習的學校或大學 的師培單位，本功能可輔助他們記錄實習階段的各類事物。
我可以立即記錄說我今天發生了什麼事情…（省略）…因為有時候你一整天經過的話也很 累，你也會忘記，所以你不如就趕快寫下來。（S05-in-09）
因為我們之後要繳交教學歷程檔案，所以我覺得這部分會比較常用到，而且就可以紀錄我 們不管在任何事情上的一個紀錄。（S11-in-05）
79
不過也有受試者表示，因為習慣和效率的緣故，還是會以手寫為主，況且行 動裝置有螢幕尺寸偏小不易輸入，以及課堂中不便使用等問題。
我個人筆記手寫的速度會比我在使用手機去按或者用電腦打字還要方便，而且如果平常觀 課的時候做筆記，其實帶電腦、平板，有些老師也不是這麼喜歡，所以通常這部分我還是 習慣手寫。（S09-in-06）
我手機的螢幕實在太小了，如果我用手機打教案（編按：應為筆記）我應該很快就瞎掉了。
（S06-in-15）
3. 教學教案
受試者表示教學教案可在靈感湧現，或發現值得學習的事情，即刻簡易紀錄 下來，而且本功能已有預設格式，只需照表填入便能清楚分類。但也有多位受試 者表示，教案需要使用大量文字編寫，並不適合在行動裝置上使用，以紙本手寫
受試者表示教學教案可在靈感湧現，或發現值得學習的事情，即刻簡易紀錄 下來，而且本功能已有預設格式，只需照表填入便能清楚分類。但也有多位受試 者表示，教案需要使用大量文字編寫，並不適合在行動裝置上使用，以紙本手寫