影片教學嵌入問答機制對學習態度影響之初探

全文

(1)國立臺灣師範大學理學院資訊工程學系碩士論文 Department of Computer Science and Information Engineering College of Science. National Taiwan Normal University Master’s Thesis. 影片教學嵌入問答機制對學習態度影響之初探 Learning Attitude Towards Different Question Embedding Mechanisms in Lecture Videos. 研究生：陳哲雋撰. 指導教授：. 中華民國. 109. 李忠謀. 年. 博士. 8. 月.

(2) 摘要影片教學提供學習者自主學習的彈性，學習者可以隨時隨地取得學習資源並依照自己步調進行學習，在影片教學中常利用問答測驗提供學生自主學習檢驗的機制，然而先前的研究發現單純提供問答測驗對學生自主學習的幫助有限。本研究利用將問答嵌入於觀念教學說明後並提供回饋及複習機制，達成類似傳統面對面課程教室在說明觀念後提問確認學習情形的效果，以此協助學生自主學習，並設計實驗瞭解學生在此問答機制下的是否能有較佳的學習態度及學習表現。研究結果發現問答嵌入於觀念說明後不僅能提供自主檢驗機制，還能提升學習專心程度並給予適當的挑戰感，此外複習機制也能有效提供回饋並協助釐清觀念。根據研究發現，本研究建議設計影片教學應提供學生與課程內容良好連結的自主學習檢測方式，另外也應提供學生能快速確認錯誤原因之方法。關鍵字：影片教學、學習態度. i.

(3) ABSTRACT Video lectures set learners free of the bond of physical classrooms.. Learning resources. are easily accessible, which allows learning take place at learners’ own pace anytime and anywhere. Assessments often come along with lecture videos as learning aids for the learners. However, research found that simply providing assessments after lectures brings limited help for the learners. This study proposed a mechanism which mimics authentic classroom behaviors: The assessment consisted of a few questions followed by customized feedback based on learners’ answers, and each question is embedded right after the target concept is delivered.. The study. aimed to explore whether learners would adopt more positive learning attitude and perform better through such mechanism. The result showed that having questions embedded after the target concept not only enhanced learners’ concentration and triggered them to self-monitor their learning, but also provide them appropriate challenge.. Furthermore, the customized feedback effectively clarify. any misconception. According the result, this study suggests that combining self-monitoring assessment closely tied to the content and customized concept clarifying feedbacks can effectively promote learning in video lectures. Keywords: video lecture, learning attitude. ii.

(4) 目錄摘要 ............................................................................................................................................. i ABSTRACT ............................................................................................................................... ii 目錄 ........................................................................................................................................... iii 圖目錄 ........................................................................................................................................ v 表目錄 ....................................................................................................................................... vi 第壹章緒論 .............................................................................................................................. 1 第一節研究動機 .................................................................................................................. 1 第二節研究目的 .................................................................................................................. 2 第三節論文架構 .................................................................................................................. 2 第貳章文獻探討 ...................................................................................................................... 3 第一節影片教學學習表現 .................................................................................................. 3 第二節影片教學互動機制 .................................................................................................. 4 第參章研究與實驗設計 .......................................................................................................... 5 第一節研究方法 .................................................................................................................. 5 第二節實驗設計 .................................................................................................................. 6 第肆章實驗結果與討論 ........................................................................................................ 13 第一節對於學習態度的影響 ............................................................................................ 13 第二節對學習表現的影響 ................................................................................................ 21 iii.

(5) 第伍章結論 ............................................................................................................................ 29 參考文獻 .................................................................................................................................. 31 附錄 .......................................................................................................................................... 34 附錄一學習單成績標準 .................................................................................................... 34 附錄二螢幕錄影行為編碼表 ............................................................................................ 44 附錄三訪談逐字稿 ............................................................................................................ 45. iv.

(6) 圖目錄圖 1 問答嵌入示意圖 ........................................................................................................... 6 圖 2 教學影片系統截圖 ...................................................................................................... 8 圖 3 問答題目截圖 .............................................................................................................. 8 圖 4 問答回饋截圖 .............................................................................................................. 9 圖 5 實驗流程 .................................................................................................................... 11 圖 6 翻轉教室兩階段示意圖 ............................................................................................ 12 圖 7 實驗組與控制組教學影片嵌入問答位置比較示意圖 ............................................ 12. v.

(7) 表目錄表 1 認知負荷問卷 ............................................................................................................ 10 表 2 學習單各題成績標準 ................................................................................................ 10 表 3 心智負荷描述統計 .................................................................................................... 13 表 4 心智負荷雙因子變異數分析結果 ............................................................................ 14 表 5 心智負荷各項目獨立樣本 T 檢定 ........................................................................... 14 表 6 心智努力描述統計 .................................................................................................... 15 表 7 心智負荷雙因子變異數分析結果 ............................................................................ 15 表 8 心智負荷各項目獨立樣本 T 檢定結果 ................................................................... 16 表 9 訪談編碼表 ................................................................................................................ 18 表 10 課程學習單獨立樣本 T 檢定結果 ......................................................................... 21 表 11 兩組螢幕錄影實際分析人數 .................................................................................. 22 表 12 學習單各題平均總花費時間獨立樣本 T 檢定結果............................................ 23 表 13 學習單各題平均作答花費時間獨立樣本 T 檢定結果........................................ 24 表 14 學習單各題平均查看教學影片花費時間獨立樣本 T 檢定結果........................ 25 表 15 學習單各題平均查詢外部資源花費時間獨立樣本 T 檢定結果........................ 26 表 16 學習單各題平均其他行為花費時間獨立樣本 T 檢定結果................................ 27. vi.

(8) 第壹章緒論第一節研究動機傳統課程中，教師必須利用課堂有限的時間進行各類型的教學活動，礙於進度壓力，老師通常必須在教學內容的深度和廣度間進行取捨，無法將知識完整的傳授，另外傳統的面對面講授教學也很難滿足不同先備知識和學習風格學生的學習需求，隨著科技的普及，數位學習被視為一種解決的手段，而影片教學則是其中一種常被應用的教學方法。影片教學被大量應用於數位學習之中，常見的大規模網路開放課程 (Massive Open Online Courses, MOOCs) 平臺，如 Coursera、Udacity 等都有許多以影片教學為主的線上課程，教師事先將教學錄製成影片，學生可以隨時隨地取得教學影片[3][8]，並按照自己的步調進行學習或重複觀看影片[8][17]，先前的研究指出影片教學有助於提升學生的學習表現[19]和滿意度[8][22]，且學生通常都認為教學影片對於學習有幫助[1][3]。許多的教學方法也會利用影片教學的優點來設計課程，例如翻轉教室就常利用教學影片讓學生先在課前自主學習做好充足的準備，教師則在面對面課程時進行更深入的教學[15]，這類結合教師教學與自主學習的教學環境中，會希望學生在自主學習的階段能將學習內容融會貫通，但學生常因各種因素（包括懶惰、忘記等）而未能完成完整的學習[7][13][16]，以至於無法跟上學習進度。傳統面對面教學教師可以藉由問答來了解學生是否有跟上學習進度，確保學生在進階內容的學習前能有足夠的基礎理論知識，而在影片教學課程除了教學影片則常利用測驗題目供學生與教師檢驗學習成果，先前的研究也提到線上測驗可以幫助學習[4]，但大部分的測驗皆是在教學影片外給予，有研究發現學生在使用教材學習時若遇到問題無法及時得到解答 [16] 並需要花費額外的努力去了解錯誤的原因[4]，或是當學生想要複習重要觀念時需要花費額外的時間從影片中找到該觀念在影片的位置[6]，而 Angeli, 1.

(9) Valanides 和 Kirschner [2] 的研究指出統合性教材較分散性教材更能減少學生在認知上的花費與負荷，因為在分散性教材中學生需要花費額外的認知資源找尋因此將教學場景（教學影片）和補充內容間的關聯，因此當這些問答測驗無法適當的和教學內容連結將對於自主學習的效果產生負面影響。. 第二節研究目的一般面對面課程教學環境中，教師會在教學過程利用問答確認在前段的講解中學生的學習狀況，當學生答錯會立即給予回饋並重新講述確保學生理解教學內容後才繼續後續的課程，本研究在教學影片中觀念的講述後立刻提供問答及複習機制來達到同樣的效果以增進影片教學的自主學習效果，並利用實驗來了解學生學習態度及學習表現的改變。本研究具體研究問題如下： (一) 在觀念說明後立刻提供問答及複習機制對於學習態度是否有正向影響？ (二) 在觀念說明後立刻提供問答及複習機制是否有較佳的學習表現？. 第三節論文架構論文共分為五個章節，第壹章緒論介紹研究動機以及研究目的；第貳章為文獻探討，回顧過去影片教學相關研究，探討過去影片教學的學習表現以及影片教學上互動機制設計對學習的影響；第參章為研究與實驗設計，闡述研究的問答嵌入機制，並說明為探討問答機制對學生學習影響而進行的實設計，包括課程設計、研究對象與研究工具；第肆章為實驗結果與討論，說明研究結果並對資料進行分析與討論，探究學生在不同問答嵌入機制對學習態度及表現的影響；第伍章為結論，總結研究結果並對於未來提供建議。. 2.

(10) 第貳章文獻探討第一節影片教學學習表現先前的研究認為影片教學最重要的優點是彈性[21]：可以隨時隨地取得教學影片 [3][8]，並按照自己的步調進行學習或重複觀看影片[8][17]，此外也有多篇研究提到學生認為影片教學的彈性可以幫助學習及理解課程內容[3][8][11][21]，且學生比起傳統教學或教科書更喜歡線上學習或影片[10][13][14][17]。此外若搭配影片教學與傳統面對面課堂教學，在面對面課堂前利用教學影片讓學生做好準備，學生則能夠投入到教學活動之中[15]，或是進行更深入的學習[16]。部分研究指出影片教學有助於提升學生的學習表現[19]和滿意度[22]，但也有研究發現是否有使用影片教學對於成績沒有顯著的影響 [3] ， Zhang, Zhou, Briggs 和 Nunamaker[22]的實驗中發現提供學生得以自主查詢目標內容的互動式影片教學相較於單純提供影片或非互動式影片有更好的學習表現，並指出影片教學是否能提升成績要取決於如何使用。在傳統面對面教學環境教師可以藉由各種方法（如提問、測驗等）直接了解學生學習狀況，但影片教學作為一種虛擬教育(virtual education)則相當重視學生的自主動機和紀律性[12]，Wieling 和 Hofman[20]的研究也發現課程參與率對於成績有正向的影響，然而 Lee 與 Lee [13] 發現在以影片為主要教學手段的翻轉教室教學環境中約只有一半的學生完成完整教材，且大部分學生都表示只理解了自認為最主要的內容，Sharp [16] 也提到部分學生未完成或到最後一刻才完成課前準備，也有研究提到學生在學習上遇到困難時，無法立即得到回答[4][16]，這些都對影片教學的效果產生不良影響。. 3.

(11) 第二節影片教學互動機制為提升自主學習，影片教學嘗試提供互動機制來協助學生的學習， Despotakis, Palaigeorgiou 和 Tsoukalas[6]的研究中建議可以提供機制去協助找到教學影片的重點來滿足學生需求並提升學習效果，而在 Zhang 等人[22]的研究中定義了互動式影片教學為「得以自主查詢影片目標內容」，並比較了三種影片線上教學模式（互動式影片教學、非互動式影片教學和無影片線上教學）與傳統教學模式課程對於學生學習表現及學習滿意度的影響，發現學生在線上教學的滿意度皆高於傳統教學，且互動式影片教學最佳；而在學習表現上則以線上影片教學顯著高於傳統教學，線上教學中以互動式教學最佳，而非互動式影片教學和無影片線上教學則無顯著差異。除了協助搜尋教學重點外，影片教學也常會設計問答機制，在傳統面對面課程中，教師時常會利用提問目前課程進度內容方式確認學生是否瞭解，並且適度給予即時性的回饋，但這在線上課程較難做到，因此常利用在影片後提供問答或形成性測驗來提供學生自主檢驗學習情形，同時協助教師確認學生學習情形，然而在 Wieling 和 Hofman[20] 的研究中提供了形成性測驗和自動回饋機制卻對成績無顯著的影響，該研究認為可能原因之一為學生被要求必須回答過測驗才可以取得後續內容造成學生為了盡快完成學習隨意作答，僅以取得教學內容為目標。Chen、Yang 和 Hsiao[4]則提到學生認為線上測驗有助於學習，但卻無法即時知道正確解答，且需要自己去尋找錯誤處。Angeli, Valanides 和 Kirschner[2]的研究則指出時空分散性教材中學生需自行從分散的教材間獲得意義，而統合性教材較能減少學生在認知上的花費與負荷，若將問答機制視為一種教材，大多數影片教學會選擇將問答題目在影片外給予或直接錄製於影片中，但前者造成了分散式教材，後者無法讓學生和教材互動。. 4.

(12) 第參章研究與實驗設計第一節研究方法根據先前研究文獻，要提升教學影片自主學習成效可藉由達成以下幾點達成： 1.. 提供學生自主檢測機制，並且給予適當回饋[4]。. 2.. 連結影片學習內容和問答內容，減少認知負荷[2]。. 3.. 提供定位重點方法[6]。在傳統面對面的講授課程中，教師在講解完觀念後會利用提問來確認學生對於該觀. 念的學習情形，而在影片教學中則可以利用提供問答測驗來達到相同的效果，並同時確認學生是否有完整進行學習，不過在面對面課程中教師都是在觀念說明後立即進行提問，並在答錯後給予回饋和講解，而影片教學則是在整個教學單元後才給予測驗，但這樣問題和教學內容則無法有效的連結，之前的研究也發現當學生在回答錯誤時會無法確認錯誤的原因和正確的解答[4][16]，需要額外的努力來尋找答案，因此本研究在每個單元的教學影片中，當一個觀念說明後立即進行問答測驗，並要求必須回答正確才能進行後續的教學避免學生為了能快速完成課程而隨意作答[20]，而作答後會給予題目說明的回饋，若學生答錯則會立即將影片進度回到相應觀念的說明片段要求學生重新觀看教學，以此來達到類似面對面課程中教師提問後給予學生回答並重新講解的效果，圖 1 為本研究問答嵌入的示意圖。. 5.

(13) 教學單元. 觀念說明. 觀念說明問答測驗. 問答測驗. 答錯. 答錯圖 1 問答嵌入示意圖. 為了瞭解將問答嵌入於觀念說明後對於學習的影響，本研究就學習態度及學習表現兩方面來進行探討，學習態度方面先利用認知負荷瞭解學生是否能適應問答機制，接著利用訪談來進一步探討學生在學習時的想法及學習行為；而在學習表現方面，則利用學習單來確認學生在經由此問答機制的影片學習後的學習成效，並在學生回答學習單時進行螢幕錄影，藉由錄影紀錄來瞭解將問答嵌入於觀念說明後能否讓學生對教學內容更加熟練，並反應在作答時能更有效率的完成。. 第二節實驗設計本研究為探討問答嵌入於觀念說明後對學習的影響，設計實驗了解學生在不同嵌入機制下學生在學習態度及學習表現的不同，本節將針對實驗課程設計、研究對象、研究工具及實驗流程進行說明。 3.2.1 實驗課程設計以「資訊安全」課程進行實驗，課程分為三大主題：「程式安全」、「密碼學」和「網頁安全」，程式安全部分課程說明緩衝區溢位發生的原因和攻擊；密碼學主要說明何為「完善保密性(perfect secrecy)」和常見加密演算法的應用；網頁安全以跨網域指令碼攻擊(Cross-Site Scripting, 簡稱 XSS)及 SQL 注入(SQL injection)兩種常見攻擊為例說明網. 6.

(14) 頁的攻擊方法與防護。三個主題分別對應三種類型的課程，密碼學課程為單純理論的課程設計，網頁安全則為操作及應用為主的課程，程式安全課程則為理論和操作應用兼具，利用三種類型的課程探討問答機制在不同設計類型課程中對於學習的影響，並瞭解嵌入於觀念後的問答機制是否較適合何種類型的課程。 3.2.2 研究對象一般大學中將資訊安全課程設計為資訊工程碩士班課程，因此本研究以大學資訊工程研究所碩士班學生為研究對象，志願形式招募 10 人，每位參與者皆具備足夠的數學及程式能力，並對於程式的運行有足夠的了解，其中女性六人、男性四人。藉由招募表單背景調查「是否修習至少八小時以上資訊安全相關課程或講座」以及「對於線上影片教學熟悉程度」兩問題回答將學生平均分為實驗組與控制組兩組，使兩組成員背景大致相當，每組五人，兩組女性皆為三人、男性皆為兩人。 3.2.3 研究工具本小節將介紹實驗中各項研究工具：一、可嵌入問答機制之影片教學系統為瞭解學生在不同嵌入機制的影片教學對學習的影響，本研究設計一影片教學系統來實作上述影片教學問答及複習機制，當教學影片播放到相關觀念教學片段時嵌入該觀念的問答，在本研究的教學系統中會在問題的進度位置給予箭頭提示，如圖 2 所示，而問答題目指示也能協助定位重點，問答會在同一畫面中跳出並暫停影片播放（圖 3），學生必須立即回答題目，以此方式達成問答和學習內容的直接連結，並且達到統合教材之目的，學生不需切換畫面即能直接觀看。. 7.

(15) 圖 2 教學影片系統截圖. 圖 3 問答題目截圖. 8.

(16) 學生回答後會立即給予問題解說及相關回饋（圖 4），若為實驗組之學生回答錯誤後會強迫學生回到問題相關的影片片段重新複習，學生必須重複此流程直到回答正確才能繼續觀看後續教學，藉由此方式確認學生對於學習內容能正確理解課程內容，並能使學生確實完成教材學習。. 圖 4 問答回饋截圖. 二、認知負荷問卷為瞭解學生在嵌入問答教學的適應度，在每次教學後會讓學生回答量表問卷了解當周單元學習時的認知負荷，問卷改編自 2013 年 Hwang, Yang 和 Wang [9]根據 Sweller, VanMerrienboer 和 Paas [18]提出的認知負荷概念所制定的認知負荷問卷，問卷有七個測量項目，其中包含四個心智負荷(Mental Load)測量項目及三個心智努力(Mental Effort)測量項目，如表 1 所示，問卷為六點李克特量表，6 為非常同意，1 為非常不同意。. 9.

(17) 表 1 認知負荷問卷心智負荷(Mental Load) ML1 學習的內容對我來說是困難而不容易學會的 ML2 我需要很努力才能回答教學影片中的問題 ML3 我覺得回答教學影片中的問題是麻煩的 ML4 回答教學影片中的問題讓我感到挫折心智努力(Mental Effort) ME1 影片的呈現方式讓我在觀看時需要高度的專注及思考 ME2 我需要投入許多心力來理解教學內容以回答系統內的問題 ME3 影片教學的方式讓我感到難以執行三、課程學習單用於了解學生課程學習成果，利用 Google 線上表單方式發放，學生在作答時可以用任何方式來搜尋資料以回答問題。學習單成績由研究者與另一位協助研究者逐題根據成績標準給予成績，在雙方評分完成後進行討論直到各題成績一致，成績標準由分為五級，標準如表 2 所示，各題詳細內容與成績標準則如附錄一所示。表 2 學習單各題成績標準級分評分標準四級分回答到所有問題且答案完全正確三級分幾乎回答到所有問題且問題答案大致正確，但有小部分錯誤二級分答案部分正確或只回答正確部分問題一級分雖依據問題回答但答案或觀念皆錯誤零級分無作答或答非所問四、作答情形螢幕錄影參與者被要求在作答學習單時需進行螢幕錄影紀錄其操作行為，利用作答時的行為了解不同影片問答機制下學習表現的不同。螢幕錄影蒐集後，由研究協助者進行行為時間編碼，編碼表如附錄二，五、訪談紀錄課程結束後對參與者進行訪談，訪談內容為了解參與者在實驗中對於影片問答機制的感受以及對於自主學習造成的影響。 10.

(18) 3.2.4 實驗流程實驗課程為期六周，如圖 5 所示，第一周課程僅作為熟悉實驗流程，實驗資料僅在後續五周蒐集，第二周為程式安全主題課程，第三周和第四周為密碼學主題，而第五周和第六周則為網頁安全課程。課程採取類似翻轉教室方式進行，分為線上影片教學和面對面課程兩階段，如圖 6 所示，第一階段為線上影片教學，會先給予學生教學影片網站，並要求學生在面對面課程前先觀看網站中課程主題相應的教學影片自主學習，每周的課程影片約為 20 ~ 40 分鐘。實驗組與控制組的不同如圖 7 所示，每周影片會依照教學內容分為一至三個觀念，實驗組教學影片在觀念教學片段後立刻提供該觀念之問答問題，並且必須回答正確才能進行後續課程，而控制組則是在影片最後獲得相同的問題，但僅包含問題題目及答題回饋，答錯也不會要求重新觀看教學片段。第二階段為面對面課程，在面對面課堂上參與者必須作答課程學習單以及認知負荷問卷，作答期間參與者皆被要求進行錄影紀錄作答時的操作，作答結束後會進行當周課程內容及學習單題目的講解確保每位參與者無論影片學習成果如何都能對當周課程知識足夠熟悉。六周課程節結束後則安排訪談了解學生對於學習及問答機制的觀感。. 圖 5 實驗流程. 11.

(19) 教學影片學習資源. 學習單. 線上影片教學. 面對面課程. 圖 6 翻轉教室兩階段示意圖. 實驗組. 控制組. XXX. XXX. OOO ……... OOO ……... 問答. 問答圖 7 實驗組與控制組教學影片嵌入問答位置比較示意圖. 12.

(20) 第肆章實驗結果與討論第一節對於學習態度的影響為了瞭解在教學影片適當時機提供問答及複習機制對於學習態度的影響，本研究比較實驗組與控制組在認知負荷是否不同並進一步利用訪談來瞭解兩組在學習行為及態度上的差異。 4.1.1 認知負荷認知負荷問卷中包含「心智負荷(Mental Load)」及「心智努力(Mental Effort)」兩個部份，表 3 顯示在心智負荷方面實驗組和控制組在三個主題課程方面的描述統計結果，進一步以組別和主題為自變項，心智負荷平均分數為依變項進行雙因子變異數分析 (Two-way Analysis of Variance, 簡稱 Two-way ANOVA)，結果如表 4 所示，組別間存在顯著差異(F = 5.74, p < .05)，根據 Cohen 的建議[5]，效應值達高度效應 (η² > .138)，而在主題間則無顯著差異(F=0.66, p=.528)，因子間不存在交互作用 (F = 1.32, p = .286)，這表示不同的問答及複習機制會對於心智負荷產生影響，但不同的影片教學課程設計上則沒有顯著的差異。表 3 心智負荷描述統計課程主題程式安全密碼學網頁安全. 組別. n. M. 實驗組. 5. 3.45. 控制組. 5. 2.80. 實驗組. 5. 3.35. 控制組. 5. 2.90. 實驗組. 5. 2.93. 控制組. 5. 2.85. 13. SD 3.15 2.85 2.89. 0.68 0.95 0.37 0.36 0.50 0.78. 0.84 0.63 0.61.

(21) 表 4 心智負荷雙因子變異數分析結果因子. F. p. η². 組別間. 5.74. .025*. .193. 主題間. 0.66. .528. .052. 雙因子間交互作用. 1.32. .286. .099. 註：*p < .05. 由於組別間存在顯著差異，接著以組別為自變項，各個心智負荷測量項目為依變項進行獨立樣本Ｔ檢定，結果如表 5，在「學習的內容對我來說是困難而不容易學會的(ML1)」 (t = 3.62, p <.01) 和「我需要很努力才能回答教學影片中的問題(ML2)」(t = 3.55, p <.01) 兩個項目中實驗組皆高於控制組，而在其他幾項則無顯著差異，由於平均上 6 級只達到 4 級，因而認為在心智負荷上實驗組對於學習內容會感到較有挑戰，但不至於感到挫折或麻煩，也不會有太大的負擔。表 5 心智負荷各項目獨立樣本 T 檢定項目. 組別. M. SD. 實驗組. 4.13. 1.08. 控制組. 2.90. 0.76. 實驗組. 4.43. 0.98. ML1. ML2 控制組. 3.13. 1.02. 實驗組. 2.17. 0.90. 控制組. 2.33. 0.75. 實驗組. 2.23. 0.82. 控制組. 2.37. 0.81. ML3. ML4 註：**p < .01 14. t值. p. 3.62. .001**. 3.55. .001**. -0.55. .586. -0.45. .658.

(22) 在心智努力方面，表 6 顯示不同組別在三個主題課程方面的描述統計結果，並以組別和主題為自變項，心智努力平均分數為依變項進行雙因子變異數分析，結果如表 7，組別間存在顯著差異(F = 16.09, p < .01)，根據 Cohen 的建議 [5]，效應值達高度效應 (η² > .138)，而在主題間則無顯著差異(F = 1.70, p = .204)，因子間不存在交互作用 (F = 0.96, p = .398) ，這表示不同問答及複習機制同樣會對於心智努力產生影響，而不同的影片教學課程設計上同樣無顯著的差異。. 表 6 心智努力描述統計課程主題程式安全密碼學網頁安全. 組別. n. M. 實驗組. 5. 3.80. 控制組. 5. 3.07. 實驗組. 5. 3.53. 控制組. 5. 3.03. 實驗組. 5. 3.43. 控制組. 5. 3.03. SD 3.43 3.03 3.23. 0.38 0.64 0.62 0.51 0.19 0.43. 0.63 0.75 0.38. 表 7 心智負荷雙因子變異數分析結果因子. F. p. η². 組別間. 16.09. .001*. .401. 主題間. 1.70. .204. .124. 雙因子間交互作用. 0.96. .398. .074. 註：**p < .01. 由於組別間存在顯著差異，接著以組別為自變項，各個心智努力測量項目為依變項進行獨立樣本Ｔ檢定，結果如表 8，在「影片的呈現方式讓我在觀看時需要高度的專注 15.

(23) 及思考(ME1)」(t = 2.31, p <.05) 和「我需要投入許多心力來理解教學內容以回答系統內的問題(ME2)」(t = 2.51, p <.05)兩個項目中實驗組皆高於控制組，且平均上 6 級只達到 4 級，而在「影片教學的方式讓我感到難以執行(ME3)」則無顯著差異，並且都低於 3 級，因此認為兩組皆能適應教學方式，且實驗組學習上會比控制組更加投入。. 表 8 心智負荷各項目獨立樣本 T 檢定結果項目. 組別. M. SD. 實驗組. 4.33. 1.01. 控制組. 3.47. 1.04. 實驗組. 4.33. 1.29. ME1. ME2 控制組. 3.37. 0.74. 實驗組. 2.10. 0.99. ME3 控制組. 1.80. t值. P. 2.31. .028*. 2.51. .018*. 1.05. .304. 0.49. 註：*p < .05. 4.1.2 訪談課程結束後對 6 名參與者進行訪談，其中實驗組（S1、S2、S3）及控制組（S4、S5、 S6）成員各三名。訪談後對參與者回答進行編碼，表 9 為編碼結果，在負擔部分實驗組和控制組提到的內容大部份都不相同，只有在影片長度上認為可能較長，但實驗組編號 S2 的參與者提到因為教學提供的問題會在教學相關片段後給予，所以能提升印象，也比較不會吃力。此外實驗組也提到由於答錯會強迫重看相關觀念片段，並要再次作答直到. 16.

(24) 正確讓他感到麻煩，加上認為系統會記錄作答情形，因此會不想要答錯，但也因此讓他對於學習時更為認真專注。多數人都有提到需要努力理解題目或課程內容才有辦法回答教學影片嵌入的問題，但由於控制組的問題會是在影片最後才提供，還需要回想相關概念或要回頭複習才有辦法回答，也因此控制組多只將問題當作協助複習使用，甚至有參與者提到不一定會作答，而實驗組則因為會在概念的教學後立刻給予問題，且必須要做答正確才能繼續課程，因而多數將其視為驗證學習成果手段。對於問題後的回饋，實驗組大多數認為回饋足夠幫助了解問題答案，而其中實驗組編號 S3 的參與者提到回饋可能沒有回答到他的問題，但後續回頭重看相關片段的機制可以釐清「是自己想法錯還是題目出錯」，控制組則多認為回饋不足夠協助瞭解問題答案，但也都有提到若能提供相關觀念在影片的位置會更能幫助理解。另外對於答錯重看相關片段這個機制上，S2 和 S3 都認為能幫助學習加深印象，雖然 S2 也提到如果沒有這機制，其實也會主動回過頭去弄懂，但實驗組都提到此機制可以減少搜尋內容花費的心力與時間，也確保一定會去重新釐清觀念，從此可推論「答錯重新觀看相關片段」的機制是一種能提供學生釐清問題的回饋機制，也能在學生自主學習上提供協助。. 17.

(25) 表 9 訪談編碼表觀看教學影片的感受類別次類別. 編碼. 人數實驗組：1(33%). 不想要答錯. LO-cor 控制組：0(0%). 實驗組：1(33%) 回答問題很 LO-ann 麻煩負擔. 控制組：0(0%). 需要回想或理解較前面 LO-re 內容感到影片偏 LO-long 長. 努力理解. EF-uds. 努力回想. EF-re. 努力. 可以幫助驗證自主學習 QI-help 影片內問題成果對學習的影響幫助回想複 QI-re 習. 範例 S1: 因為知道後面有問題我就有種不想答錯的感覺，就是會在問題之前會比較認真去看好以免答錯之類的 S1: 那就一樣會讓我覺得我前面就是要認真的去看，讓我答對才可以順利看下去，不然這樣一直退回來，感覺很麻煩，很不想要這樣在的感覺. 所以你現在已經覺得夠吃力了？你覺得如果放在後面會更吃力囉？控制組:：1(33%) S2：現在放中間是剛剛好，我是覺得放後面會更吃力實驗組：1(33%). 實驗組：1(33%) 控制組：2(68%). 你會覺得影片略長嗎？ S4：呃，稍微 S2: 因為我覺得，對題目，實驗組：3(100%) 對課程內容沒有到很熟悉本來就會花比較多時間去思考題目的意思，怎麼解控制組：2(68%) 啊，所以會花比較多時間在思考問題之類的 S4: 會須稍微想一下那個就是剛剛，就是，教材上面實驗組：0(0%) 的內容是甚麼，然後再去理解完後再去回答上面的問題，就是會需要一點時控制組：3(100%) 間去理解中間的概念是甚麼再去回答這個問題 S2: 就前面剛講到沒多實驗組：2(67%) 久，就馬上就有這個問題，我覺得會印象比較深刻，控制組：1(33%) 那就等於是再複習一次前面講了甚麼內容 S4: 因為在最後的時候，因為課程可能二十分鐘左實驗組：0(0%) 右，但可能重點是在前面，是前面的部分，那可能就 18.

(26) 是前面，可能前面，看完前面有點忘了部分，那可能控制組：3(100%) 後面在這邊你不是很熟，會需要回去再看一次這樣子不同問答機制對學習的影響實驗組：1(33%) 專心. 更加專心. CON-more 控制組：0(0%). 足夠協助瞭 FB-eno 解問題答案問題後回饋. 不足夠協助瞭解問題答 FB-nen 案. 實驗組：2(67%) 控制組：1(33%) 實驗組：1(33%). 控制組：2(68%). 感到麻煩. COR-ann. 實驗組：1(33%). 加深印象. COR-imp. 實驗組：1(33%). 必須回答正確(僅實驗組). 協助回到問 RE-ret 題觀念片段. 答錯重看相關片段(僅實驗組) 加深印象. 無差別. S1: 會讓我更想認真的去上課，因為等一下的問題會跟正在上的課很有關，會特別認真 S1: 讓我更瞭解上課內容吧，也不用自己翻回前面看是怎麽樣答錯之類的 S3: 因為有時候，我覺得有回饋其實也還好，因為畢竟回饋給的內容不會是很詳細的，問題又比較難，可能不會剛好解答到你的問題點 S1: 那就一樣會讓我覺得我前面就是要認真的去看，讓我答對才可以順利看下去，不然這樣一直退回來，感覺很麻煩，很不想要這樣在的感覺 S2: 因為現在影片的機制是錯了會讓你回去看影片那再作答一次，會更加深你的印象. S1: 就是我答錯想回去看的時候就是不用自己回去實驗組：3(100%) 找那個地方，就是，它會自動幫我回去到那個地方. RE-imp. 實驗組：2(67%). RE-ndiff. 實驗組：1(33%) 19. 影片答錯會要求重看嘛，那你剛剛有講到重觀看概念會加深你的印象，那所以這個對你學習還有甚麼其他的影響嗎？就是答錯了直接叫你重看一遍 S2：可是我覺得影響就是會加深印象，這就是影響 S2: 如果我自己都會回頭去看影片的話，那其實有.

(27) 其他. 感到麻煩. RE-ann. 實驗組：1(33%). 感到受監督. Other-sup. 實驗組：1(33%). 沒有這個機制都沒有差，反正我都會自己去看影片 S1: 那就一樣會讓我覺得我前面就是要認真的去看，讓我答對才可以順利看下去，不然這樣一直退回來，感覺很麻煩，很不想要這樣在的感覺 S1: 那邊也看得到那這樣還不如認真學習，然後，然後答對這樣子也覺得比較好的感覺吧. 4.1.3 小結從認知負荷問卷中，可以發現實驗組對於學習的內容比控制組感到更有挑戰，且會投入更多努力在學習上，在六點量表中平均約為四級分，可以認為問答嵌入在教學的適當時機會造成學習上需要多花心思，但並不會造成過多的負荷，而從訪談中參與者提到問答機制嵌入於觀念教學後可以提升學習的專注，而「回到相關觀念片段重新觀看」機制能有效的提供檢驗與回饋並減少尋找錯誤原因的時間及心力；問答於影片後的控制組僅將問答視為一種幫助回想複習的方法，且由於不像實驗組必須回答正確才能繼續，控制組可能會跳過問題或是僅作答但未確實去了解錯誤原因，因此本研究認為於觀念教學後立即嵌入問答機制可以在一定程度上激勵學生的自主學習且不會造成過重負擔。. 20.

(28) 第二節對學習表現的影響為瞭解在適當時機提供問答及複習機制是否能提升學習表現，利用面對面課程時的學習單成績和作答時的螢幕錄影來探究不同問答機制對學習表現的影響。 4.2.1 課程學習單對學習單成績課程各主題及總成績以滿分 4 分進行標準化後進行獨立樣本 T 檢定結果如表 10，發現成績在兩組間皆無顯著差異，兩組成績平均約略為 2 級分（答案部分正確或只回答正確部分問題），此結果應是由於作答學習單時可以採取任何方法搜尋資料回答問題，因而參與者的回答上都能達到一定水平而造成成績差異不大。表 10 課程學習單獨立樣本 T 檢定結果. 程式安全密碼學網頁安全總成績. 實驗組. 控制組. (n = 5). (n = 5). M. SD. M. SD. t值. p. 1.83 2.18 2.09 2.06. 0.92 0.16 0.53 0.19. 1.97 2.12 1.97 2.03. 0.22 0.29 0.31 0.19. -0.32 0.40 0.42 0.15. .767 .701 .688 .883. 4.2.2 作答情形螢幕錄影參與者在作答學習單時皆被要求進行螢幕錄影，排除錄影不完整及影片損毀後，兩組錄影實際進行分析的人數如表 11，螢幕錄影藉由四種類型動作（作答、查看教學影片、查詢外部資源及其他）進行編碼後統計每個人各動作所花費之時間，接著以組別為自變項，學習單各題整體作答時間及各類行為時間為依變項進行獨立樣本Ｔ檢定，各題在整體花費時間上，如表 12 所示，實驗組與控制組大都無顯著差異，僅在「Cross-Site Scripting」. 21.

(29) 單元題號 1 整體花費時間實驗顯著低於控制組(t = -2.594, p = .036*)；而在四類型動作（表 13~16）上，在「替換式密碼 & Entropy」單元題號 3 在行為「作答」的時間上實驗組顯著高於控制組(t = .907, p = .038*) ，其餘題目則在時間花費上無顯著差異。探究造成這個結果的原因，在「替換式密碼 & Entropy」單元題號 3 的題目是利用加密前後機率計算 Entropy 來加密法本身洩漏的資訊量，但由於題目設計不良，導致雖然可得到答案，但洩漏的資訊量為負數違反常識，而讓實驗組成員以為計算錯誤，反覆驗算而不敢提交，在這題上可以看出實驗組在觀念上略優於控制組。而「Cross-Site Scripting」單元題號 1 的題目是定義說明類型的題目，然而在其他定義說明類型題目上沒有顯著差異，因而無法確定造成差異的原因。表 11 兩組螢幕錄影實際分析人數單元. 實驗組人數. 控制組人數. 安全的程式. 5. 5. 替換式密碼 & Entropy. 5. 4. Block Cipher & Public key cipher. 5. 4. Cross-Site Scripting. 5. 4. SQL injection. 4. 5. 22.

(30) 表 12 學習單各題平均總花費時間獨立樣本 T 檢定結果實驗組. 控制組安全的程式單元. 題號. M. SD. M. SD. t值. p. 1-1 & 1-2 1-3 1-4 2-1 2-2. 641.40 129.60 240.00 163.20 127.80. 278.55 51.79 209.19 148.76 181.21. 535.40 213.40 174.60 122.00 288.20. 76.98 204.19 137.51 53.68 255.07. 0.82 -0.89 0.58 0.58 -1.15. .436 .400 .575 .576 .285. 2-3. 181.20. 163.28. -1.19. .269. 題號. M. SD. M. SD. t值. p. 1 2-1. 617.20 261.40. 225.79 126.40. 570.75 215.50. 381.44 122.66. 0.23 0.55. .825 .601. 2-2 3. 357.00 166.74 604.75 215.89 1294.80 462.51 707.25 447.91 Block Cipher & Public key cipher 單元. -1.95 1.92. .092 .096. t值. p. 0.91 0.30 0.13 -0.85 2.07 0.59. .393 .771 .902 .423 .077 .573. t值. p. 題號 1 2 3 4 5 6. M. 155.98 301.20 替換式密碼 & Entropy 單元. SD. M. SD. 535.00 306.17 381.25 151.12 247.20 125.88 219.25 152.02 391.40 137.90 377.00 202.20 128.60 43.90 192.75 164.16 179.00 82.23 79.75 53.90 126.60 102.55 92.50 56.76 Block Cipher & Public key cipher 單元. 題號. M. SD. M. SD. 1. 122.80. 14.55. 172.75. 40.50. -2.59 .036*. 2 3-1 3-2. 287.40 595.80 971.60. 113.17 346.00 770.74 831.50 549.99 724.50 SQL injection 單元. 257.63 311.20 725.24. -0.42 -0.57 0.58. .694 .587 .578. 題號. M. SD. M. SD. t值. p. 1 2 3. 97.50 210.50 650.50. 50.72 82.92 465.81. 102.60 344.60 433.20. 60.87 148.31 248.14. -0.13 -1.61 0.91. .897 .153 .396. 單位：秒. 23.

(31) 表 13 學習單各題平均作答花費時間獨立樣本 T 檢定結果實驗組. 控制組安全的程式單元. 題號. M. SD. M. SD. t值. p. 1-1 & 1-2 1-3 1-4 2-1 2-2. 557.20 98.40 219.60 152.60 81.40. 174.17 64.78 224.29 152.67 123.75. 456.00 106.20 87.60 84.80 248.40. 95.83 23.00 29.44 67.48 236.42. 1.14 -0.25 1.30 0.91 -1.40. .288 .810 .228 .390 .199. 2-3. 123.00. 207.61. -1.30. .253. 題號. M. SD. M. SD. t值. p. 1 2-1. 475.00 178.40. 273.70 137.33. 236.75 108.75. 150.61 96.23. 1.55 0.86. .165 .421. 2-2 3. 216.40 184.86 234.00 206.58 913.40 312.49 414.50 261.66 Block Cipher & Public key cipher 單元. 題號 1 2 3 4 5 6. M. 58.82 248.80 替換式密碼 & Entropy 單元. SD. M. SD. 312.60 283.78 194.00 160.04 144.80 92.71 71.75 78.24 280.60 108.91 275.75 161.07 90.00 52.96 149.00 178.76 77.00 77.78 23.75 26.59 26.20 9.44 64.25 37.39 Block Cipher & Public key cipher 單元. -0.13 .896 2.55 .038* t值. p. 0.74 1.25 0.05 -0.71 1.29 -1.99. .483 .250 .958 .500 .237 .133. 題號. M. SD. M. SD. t值. p. 1. 90.80. 26.43. 98.50. 62.40. -0.25. .808. 2 3-1 3-2. 228.60 430.00 802.40. 103.35 142.75 419.82 687.50 463.16 336.75 SQL injection 單元. 125.24 319.58 362.58. 1.13 -1.01 1.64. .296 .346 .145. 題號. M. SD. M. SD. t值. p. 1 2 3. 97.50 166.25 601.75. 50.72 103.70 455.72. 68.60 84.40 341.60. 63.88 31.99 201.41. 0.74 1.69 1.16. .486 .134 .285. 單位：秒. 24.

(32) 表 14 學習單各題平均查看教學影片花費時間獨立樣本 T 檢定結果實驗組. 控制組安全的程式單元. 題號. M. SD. M. SD. t值. p. 1-1 & 1-2 1-3 1-4 2-1 2-2. 147.00 29.80 14.00 10.60 46.40. 247.43 45.20 23.01 14.62 76.79. 156.40 49.00 51.40 33.00 36.80. 211.62 55.05 76.80 22.21 36.66. -0.06 -0.60 -1.04 -1.88 0.25. .950 .563 .327 .096 .807. 2-3. 58.00. 160.79. -0.49. .635. 題號. M. SD. M. SD. t值. p. 1 2-1. 111.20 85.40. 159.24 99.54. 196.50 126.00. 201.68 77.18. -0.71 -0.67. .500 .526. 2-2 3. 118.80 188.24 152.25 126.63 275.00 273.02 225.25 202.85 Block Cipher & Public key cipher 單元. -0.30 0.30. .771 .771. t值. p. -1.81 -1.80 -2.28 -1.13 -0.59 0.27. .162 .158 .057 .339 .572 .792. 115.19 101.60 替換式密碼 & Entropy 單元. 題號. M. SD. M. SD. 1 2 3 4 5 6. 12.40 13.60 16.60 2.80 25.00 34.20. 題號. M. SD. M. SD. t值. p. 1. 14.40. 24.68. 31.75. 29.15. -0.97. .365. 2 3-1 3-2. 20.60 101.80 89.80. 30.80 173.75 210.73 86.25 164.96 188.00 SQL injection 單元. 191.38 84.92 282.77. -1.58 0.14 -0.66. .208 .895 .533. 題號. M. SD. M. SD. t值. p. 1 2 3. 0.00 13.50 25.50. 0.00 27.00 51.00. 10.80 78.00 24.20. 12.36 81.73 33.71. -1.95 -1.50 0.05. .122 .178 .964. 27.73 133.50 131.73 30.41 103.75 96.67 28.16 98.25 74.83 6.26 50.75 84.46 34.38 40.25 43.08 65.37 23.75 42.91 Block Cipher & Public key cipher 單元. 單位：秒. 25.

(33) 表 15 學習單各題平均查詢外部資源花費時間獨立樣本 T 檢定結果實驗組. 控制組安全的程式單元. 題號. M. SD. M. SD. t值. p. 1-1 & 1-2 1-3 1-4 2-1 2-2. 27.20 0.00 6.40 0.00 0.00. 60.82 0.00 14.31 0.00 0.00. 0.00 56.80 34.80 4.20 3.00. 0.00 127.01 49.32 9.39 6.71. 1.00 -1.00 -1.24 -1.00 -1.00. .374 .374 .251 .374 .374. 2-3. 0.00. 61.27. -1.00. .374. 題號. M. SD. M. SD. t值. p. 1 2-1. 120.60 0.00. 158.28 0.00. 178.50 27.75. 192.98 55.50. -0.50 -1.00. .635 .391. 2-2 3. 44.40 99.28 258.25 187.64 200.00 205.71 94.00 119.77 Block Cipher & Public key cipher 單元. -2.21 0.91. .062 .394. t值. p. 1.27 0.12 -0.31 -0.02 1.12 0.64. .246 .905 .768 .986 .299 .543. 題號 1 2 3 4 5 6. M. 0.00 27.40 替換式密碼 & Entropy 單元. SD. M. SD. 345.60 347.82 109.50 136.50 99.40 106.94 89.00 145.99 94.20 93.52 123.25 186.50 34.60 47.44 35.25 58.52 77.60 105.33 15.75 31.50 66.20 113.46 26.50 53.00 Block Cipher & Public key cipher 單元. 題號. M. SD. M. SD. t值. p. 1. 17.60. 39.35. 42.50. 53.80. -0.81. .447. 2 3-1 3-2. 38.20 57.20 60.60. 62.16 29.50 127.90 57.75 135.51 158.75 SQL injection 單元. 42.44 84.47 192.88. 0.24 -0.01 -0.90. .819 .994 .398. 題號. M. SD. M. SD. t值. p. 1 2 3. 0.00 30.75 23.25. 0.00 36.03 43.87. 37.40 201.60 67.40. 51.97 187.27 80.69. -1.61 -1.99 -0.98. .183 .111 .361. 單位：秒. 26.

(34) 表 16 學習單各題平均其他行為花費時間獨立樣本 T 檢定結果實驗組. 控制組安全的程式單元 t值. 題號. M. SD. M. SD. 1-1 & 1-2 1-3 1-4 2-1 2-2. 0.00 1.40 0.00 0.00 0.00. 0.00 3.13 0.00 0.00 0.00. 9.00 1.40 0.80 0.00 0.00. 20.12 3.13 1.79 0.00 0.00. -1.00 .374 0.00 1.000 -1.00 .347 -. 2-3. 0.20. 0.00. 1.00. .374. 題號. M. SD. M. SD. t值. p. 1 2-1. 9.20 0.00. 9.26 0.00. 0.00 0.00. 0.00 0.00. 2.22 -. .090 -. 2-2 3. 0.00 3.20. 0.00 0.00 0.00 5.02 1.50 3.00 Block Cipher & Public key cipher 單元. 0.59. .572. 題號. M. SD. t值. p. 1 2 3 4 5 6. 0.00 0.00 0.00 1.20 10.40 0.00. 0.00 0.00 0.00 0.00 0.00 0.00 0.00 3.00 6.00 2.68 1.75 3.50 23.26 1.50 3.00 0.00 0.00 0.00 Block Cipher & Public key cipher 單元. -1.00 -0.27 0.75 -. .391 .796 .478 -. 題號. M. SD. M. SD. t值. p. 1. 0.00. 0.00. 0.00. 0.00. -. -. 2 3-1 3-2. 0.00 6.80 18.80. 0.00 0.00 15.21 0.00 42.04 41.00 SQL injection 單元. 0.00 0.00 63.59. 0.88 -0.63. .407 .548. 題號. M. SD. M. SD. t值. p. 1 2 3. 0.00 0.00 0.00. 0.00 0.00 0.00. 0.00 0.00 0.00. 0.00 0.00 0.00. -. -. 0.45 0.00 替換式密碼 & Entropy 單元. SD. M. 單位：秒. 27. p.

(35) 4.1.3 小結實驗組與控制組在學習成績無顯著不同，並且在學習單作答平均分數達到 2 級分顯示兩組都能到達基本水準，而從作答紀錄則發現實驗組在利用理論進行計算上的觀念略優於控制組，這結果顯示在適當時機提供問答及複習機制，能幫助理論觀念的學習。. 28.

(36) 第伍章結論本研究於影片教學中觀念教學片段後嵌入問答及複習機制，試圖提升影片教學成效，並設計實驗探討問答對於學生學習的影響，經過實驗後發現在將問答嵌入於相關觀念片段後的影片教學環境可以提升學生的專心程度並給予適當的挑戰感，同時可以利用問題即時驗證自主學習的成果，而「回到相關觀念片段重新觀看」的複習機制能有效的提供回饋並釐清觀念，同時減少尋找錯誤原因的時間及心力，這也和 Despotakis、Palaigeorgiou 和 Tsoukalas[6]的研究發現相同；而若將問答置於影片最後時，學生僅將問答視為複習方法，且不一定能完善利用。學習表現上，在學習單的作答中，由於能以任何方式搜尋答案因此在成績上，實驗組還是控制組間無顯著的差異，但從作答時的螢幕錄影，則發現實驗組在理論觀念上優於控制組，呼應訪談中學生表示問答和複習機制可以幫助觀念的學習。根據以上結果，本研究建議設計影片教學應思考如何提供學生良好的自主學習檢測方式並且檢測要與課程內容連結，另外也建議要提供學生答錯後能確定錯誤原因方法，在本研究中發現「問答嵌入於觀念說明後」及「答錯回到相關觀念片段重新觀看的複習機制」都能對影片教學自主學習提供良好的輔助。在研究限制上，實驗週期僅有約一個月，屬於短期實驗，尚需長期的研究來探討不同的問答嵌入機制對於學習者的長時間影響，此外本實驗雖然嘗試模擬一般教學環境，然而參與者並無學習與成績上的壓力，和一般教學環境可能存在差異，需要其他. 29.

(37) 相關研究來進一步探討。另外本研究發現適當時機提供問答測驗及複習機制能協助學生自主學習，然而這些輔助對於學生在學習成效上的影響也需要進一步的研究。. 30.

(38) 參考文獻 [1]. Amresh, A., Carberry, A. R., & Femiani, J. (2013). Evaluating the effectiveness of flipped classrooms for teaching CS1. 2013 IEEE Frontiers in Education Conference (FIE), 733–735. https://doi.org/10.1109/FIE.2013.6684923. [2]. Angeli, C., Valanides, N., & Kirschner, P. (2009). Field dependence–independence and instructional-design effects on learners’ performance with a computer-modeling tool. Computers in Human Behavior, 25(6), 1355–1366. https://doi.org/10.1016/J.CHB.2009.05.010. [3]. Bennett, P. N., & Glover, P. (2008). Video streaming: Implementation and evaluation in an undergraduate nursing program. Nurse Education Today, 28(2), 253–258. https://doi.org/10.1016/j.nedt.2007.04.005. [4] Chen, S.-C., Yang, S. J. H., & Hsiao, C.-C. (2016). Exploring student perceptions, learning outcome and gender differences in a flipped mathematics course. British Journal of Educational Technology, 47(6), 1096–1112. https://doi.org/10.1111/bjet.12278 [5] Cohen, J. (1988). Statistical Power Analysis for the Behavioral Sciences. In Statistical Power Analysis for the Behavioral Sciences (2nd ed.). Routledge. https://doi.org/10.4324/9780203771587 [6]. Despotakis, T. C., Palaigeorgiou, G. E., & Tsoukalas, I. A. (2007). Students’ attitudes towards animated demonstrations as computer learning tools. Journal of Educational Technology & Society, 10(1), 196–205.. [7]. Gilboy, M. B., Heinerichs, S., & Pazzaglia, G. (2015). Enhancing Student Engagement Using the Flipped Classroom. Journal of Nutrition Education and Behavior, 47(1), 109– 114. https://doi.org/10.1016/J.JNEB.2014.08.008. [8]. Hill, J. L., & Nelson, A. (2011). New technology, new pedagogy? Employing video 31.

(39) podcasts in learning and teaching about exotic ecosystems. Environmental Education Research, 17(3), 393–408. https://doi.org/10.1080/13504622.2010.545873 [9]. Hwang, G. J., Yang, L. H., & Wang, S. Y. (2013). A concept map-embedded educational computer game for improving students’ learning performance in natural science courses. Computers and Education, 69, 121–130. https://doi.org/10.1016/j.compedu.2013.07.008. [10] Johnson, G. B. (2013). Student perceptions of the Flipped Classroom. https://doi.org/10.14288/1.0073641 [11]. Kay, R., & Kletskin, I. (2012). Evaluating the use of problem-based video podcasts to teach mathematics in higher education. Computers & Education, 59(2), 619–627. https://doi.org/10.1016/J.COMPEDU.2012.03.007. [12]. Kumar, A., Kumar, P., & Basu, S. C. (2011). Student Perceptions of Virtual Education: An Exploratory Study. In Web-Based Instructional Learning (pp. 132–141). IGI Global. https://doi.org/10.4018/978-1-931777-04-9.ch010. [13]. Lee, G. C., & Lee, P.-L. (2015). Data Structures in Flipped Classroom: Students’ Effort and Preference. 2015 International Conference on Learning and Teaching in Computing and Engineering, 152–155. https://doi.org/10.1109/LaTiCE.2015.28. [14]. Owston, R., York, D., & Murtha, S. (2013). Student perceptions and achievement in a university blended learning strategic initiative. The Internet and Higher Education, 18, 38–46. https://doi.org/10.1016/J.IHEDUC.2012.12.003. [15] Roach, T. (2014). Student perceptions toward flipped learning: New methods to increase interaction and active learning in economics. International Review of Economics Education, 17, 74–84. https://doi.org/10.1016/J.IREE.2014.08.003 [16] Sharp, J. H. (2016). The Flipped C# Programming Classroom: What Students Had to Say. Proceedings of the EDSIG Conference ISSN (Vol. 2473, p. 3857). [17] Sharp, J. H., & Schultz, L. A. (2013). An Exploratory Study of the use of Video as an 32.

(40) Instructional Tool in an Introductory C# Programming Course. Information Systems Education Journal, 11(6), 33–39. [18] Sweller, J., VanMerrienboer, J. J. G., & Paas, F. G. W. C. (1998). Cognitive Architecture and Instructional Design. Educational Psychology Review, 10(3), 251–296. https://doi.org/10.1023/A:1022193728205 [19]. Traphagan, T., Kucsera, J.V., & Kishi, K. (2010). Impact of class lecture webcasting on attendance and learning. Educational Technology Research and Development, 58(1), 19–37. https://doi.org/10.1007/s11423-009-9128-7. [20] Wieling, M. B., & Hofman, W. H. A. (2010). The impact of online video lecture recordings and automated feedback on student performance. Computers and Education, 54(4), 992–998. https://doi.org/10.1016/j.compedu.2009.10.002 [21] Winterbottom, S. (2007). Virtual lecturing: Delivering lectures using screencasting and podcasting technology. Planet, 18(1), 6–8. https://doi.org/10.11120/plan.2007.00180006 [22]. Zhang, D., Zhou, L., Briggs, R. O., & Nunamaker, J. F. (2006). Instructional video in e-learning: Assessing the impact of interactive video on learning effectiveness. Information and Management, 43(1), 15–27. https://doi.org/10.1016/j.im.2005.01.004. 33.

(41) 附錄附錄一學習單成績標準單題元號 1-1 1-2. 1-3. 安全的程式. 1-4. 題目. 參考解答. 級分標準. void foo(int a) { int x=3; //do someting } 請畫出當執行至此函數時記憶體 stack 內是如何儲存並說明高位至低位依序為放了哪些內容？. (圖片省略)  參數 a(「參數」和參數名「a」皆必須)  return address  前一 frame 的位置(或 saved rbp)  區域變數 x(「區域變數」和變數名「x」皆必須). 我們知道在執行期間暫存器 rbp 和我們的函數在 stack 中的位置有關，請說明此暫存器的用途並指出 rbp 紀錄的位置是第一題的圖中哪個部分. rbp 指向 stack frame 的開. 請說明當函式內容執行結束時暫存器 rip 和 rbp 是如何和 stack 內容互動. 將 rip 指向「return address」，並將「前一個 frame 的位置」給 rbp. 零級分：無作答或答非所問一級分：順序錯誤、結構有缺失或出現無關結構二級分：順序大致正確但結構上有缺少或錯誤三級分：順序正確但結構有部分錯誤四級分：完全正確零級分：無作答或答非所問一級分：兩部分皆回答錯誤二級分：只回答正確其中之一三級分：兩部分皆回答大致正確，但有部分細節錯誤（例如提到 rbp 指向 stack 但未說明開始位址，而另一部分則回答正確）四級分：兩部分完全正確零級分：無作答或答非所問一級分：兩部分皆回答錯誤. 始位址 rbp 記錄的是上題「前一個 frame 的位置」的部分. 二級分：只回答正確 rip 或 rbp 其中之一三級分：順兩部分皆回答大致正確，但有部分細節錯誤 34.

(42) 2-1. 2-2. 2-3. （例如回答 rip 指向下筆指令位置，而 rbp 則回答正確）序正確但結構有部分錯誤四級分：兩部分完全正確 int bof() 由於未檢查陣列（或說字零級分： { 串）邊界，但 puts 可以寫無作答或答非所問 char buf[100]; 入任意長度內容造成超出一級分： gets(buf); 兩部分皆回答錯誤 return 1; 邊界覆寫其他記憶體位置二級分： } 只回答正確其中之一這個程式會發生三級分： buffer overflow，請兩部分皆回答大致正確，說明 buffer 但有部分細節錯誤（例如 overflow 的發生原提到 rbp 指向 stack 但未因說明開始位址，而另一部分則回答正確）四級分：兩部分完全正確呈上題，若想利用 1.找到我們要控制 return 零級分： buffer overflow 控回去的位址，目的：要將無作答或答非所問制程式的流程，請此位址寫入 rip 已達到控一級分：說明該如何進行制接下來要執行的指令步驟錯誤 2.找出要覆寫的 buffer 到二級分： rbp 的距離，目的：找到只正確回答步驟，但未說 frame 中「前一個 frame 明目的或目的皆未回答正的位置」來找到「return 確 address」三級分： 3.覆寫到 rbp+8 後再用步步驟正確，但目的有部分驟 1 的位置覆寫 return 錯誤 address，目的:利用 buffer 四級分： overflow 將目的位置寫入完全回答正確所有步驟「return address」延續上題，若依這 rip 會指向「return 零級分： address」也就是覆寫為被些步驟執行，請說無作答或答非所問控制的位置，rbp 則指向明當該函釋內容執一級分：「前一個 frame 的位置」，行結束時暫存器 rip 和 rbp 的變化回答皆由於 rip 是用於控制指令執 rip 和 rbp 會如何變錯誤，且未回答或回答錯行的暫存器，因此將能控制化，並以暫存器的誤可以任意控制程式流程程式從任意指令開始執行變化說明可以任意的原因控制程式流程的原二級分：因 rip 和 rbp 的變化回答部分錯誤，且未回答或回答 35.

(43) 錯誤可以任意控制程式流程的原因. 1. Stream Cipher & Entropy. 你獲得一段訊息: “Oqkkfk, oqkkfk, fv xcm trii,” brqp xcm Symmv. “Tcf qb xcm lrqkmbx fl xcmo rii?” “Tcrx?!” umiimp xcm Symmv. “Vf fvm qb ofkm lrqk xcrv Q! Xcm Symmv oybx crjm xcm ambx fl mjmkuxcqvg mjmkufvm nvftb xcrx. Tcrx hfyip am ofkm lrqk xcrv xcrx?” “Bvft Tcqxm qb xcm lrqkmbx fl xcmo rii!” kmwmrxmp xcm Orgqh Oqkkfk. “Tcrx pf ufy nvft – ufy’km r oqkkfk!” kfrkmp xcm Symmv. Rvp bcm bxfkomp fll. Bxqii, xcm Symmv trb afxcmkmp Bf afxcmkmp trb bcm xcrx xcm Symmv pmhqpmp xf am kqp fl xcm gqki, fvhm rvp lfk rii. “Q hrvvfx trqx rvfxcmk pru!” bcm pmhirkmp. Xcm Symmv hriimp lfk. TcanFindPlaintextWithoutK ey. 36. 三級分： rip 和 rbp 的變化回答大致正確，但可以任意控制程式流程的原因有部分錯誤四級分：完全回答正確變化及原因零級分：無作答或放棄作答一級分：回答完全看不出規律或有意義的字詞二級分：回答與答案可以看出關聯，但大部分錯誤三級分：回答大致正確，只有少部分字元不符四級分：完全正確.

(44) 2-1. cmk bmkjrvx, r cyvxborv. “Lqvp r kmrbfv xf xrnm Bvft Tcqxm pmmw qvxf xcm tffpb,” bcm brqp, wfqvxqvg cmk ifvg lqvgmk rx xcm bmkjrvx. “Xcmv nqii cmk.” 若有另一訊息用同樣的金鑰加密「XhrvLqvpWirqvx mdxTqxcfyxNmu」請問此訊息明文為何試說明 perfect securecy 要符合哪些條件？. 1.給予任意密文但其所有明文的可能性皆相同 2.Key 的長度要大於等於明文（加密內容）的長度 3.Key 的產生要完全隨機 4.Key 不可重複使用註：第一點可以寫 P[M=m|C=c]=P[M=m]，但要說明 M 為明文的集合和 C 是明文的集合. 2-2. 為何 one time pad 的 key 只能使用一次？請嘗試用 perfect securecy 說明，並說明若 key 重復使用可以如何破解. 若 key 只使用一次，則對於對密文來說，給任一個 key 都能產生相對應的明文，因此所有明文的機率相同，但若 key 重複使用，則會提高部分明文的可能性，因此就不符合 perfect seurecy，若還能進一步確定重覆的 key pool 甚至可以用 XOR 的特性：假設有密文 C1 和 C2，且已知皆使用同一 Key，若能得到兩密文其中之一的明文 m1，則能利用 C1 xor C2 = m1 xor m2 來得到另一明文 37. 零級分：無作答或答非所問一級分：回答皆不為四點任一項二級分：四點中只正確回答到其中一點或兩點三級分：四點中只正確回答到其中三點四級分：完全正確零級分：無作答或答非所問一級分：回答未能正確用 Perfect securacy 說明且也未正確說明如何破解二級分：只正確回答「用 Perfect securacy 說明」和「如何破解」其中之一三級分：「用 Perfect securacy 說明」和「如何破解」皆有回答正確但不夠完整四級分：完全正確.

(45) 利用 Perfect securacy 說明部分必須包含： 「對一密文來說，給任一個 key 都能產生相對應的明文，因此所有明文的機率相同」 「若 key 可以重複使用，則會提高部分明文的可能性」如何破解部分必須包含： 說明 XOR 可逆且說明「有已知明文」 要解釋清楚怎麼利用「C1 xor C2 = m1 xor m2」 3 如果有段 4bits 的訊息，若加密後出現的密文結果機率如上表所示，已知 key 只有兩種(k1, k2)且選用的機率相同，請問當獲得密文時，key 洩漏了多少 bits 的資訊？. 1. Block Cipher & Public Key Cipher. 試說明 Stream cipher(或稱替換式密碼), block cipher 和 public key cipher(或非對稱式密碼)的差別. 完全正確：H(K|C)=2+13.4375 =-0.4375 部分正確：H(K)H(K|C)=1.4375. stream cipher 和 block cipher 皆採用同一金鑰加密和解密，而 publlc key cipher 則加密解密會採用不同金鑰。 Stream cipher 會將明文和金鑰皆視為一種串流來進行加密解密，明文和金鑰無固定大小，block cipher 則先將明文切割為固定大小的區塊並分組來進行加密或解密操作。需包含比較：  是否同一金鑰加密和解 38. 零級分：無作答或放棄作答一級分：回答看不出和正確答案的關聯二級分：嘗試用 H(K)、H(M)會 H(C)回答但推倒過程有錯誤三級分：推導過程大致正確但答案有誤四級分：完全正確零級分：無作答或答非所問一級分：對三種加密法定義的了解皆錯誤二級分：對三種加密法的說明有部分錯誤，且未點出「是否用同一金鑰加密和解密」和「是否切割固定大小區塊」三級分：對加密法的定義大致正確，但未進行比較.

(46) 2. 密  是否切割固定大小區塊呈上題，若想用可以，可以利用 block Block cipher 來實 cipher 來產生偽隨機的現 Stream Cipher 是 Key 並用 one time pad 對否可行？若可，該明文加密，由於 block 如何進行？ cipher 產生的 key 可以視為一種隨機，所以也足夠安全註：若只是單純切割 blcok 直接加密不夠安全，並不算成功實現. 3. 試說明 ECB, CBC, CTR 三種 Encryption mode 的流程.  ECB：單純切割 block 後對每個 block 加密解密  CBC：切割 block 後給予一個 initial vector 先對 block 進行 XOR 後在加密，加密後的 block 除了最後組合成完整密文外，還作為下一區塊的 initial vector  CTR：產生一個 counter，並對 counter 加密後利用加密的 counter 作為 key 對每個 block 進行 one time pad 加密，每個 block 所對應的 counter 必須不同. 四級分：完全正確零級分：無作答或答非所問一級分：回答不可以二級分：未能明確點出方法或提出的方法不可行三級分：只提出「單純切割區塊並對每個區區塊進行 stream cipher」方法四級分：完全正確零級分：無作答或答非所問一級分：對三種加密模式的定義皆錯誤二級分：對三種加密模式的說明都有包含部分錯誤三級分：定義大致正確但遺漏部分細節四級分：完全正確. 註： CBC 必須說到 initial vector 的流程. CTR 必須提到 one time pad（或說 XOR 也可以）和「每個 block 所對應的 counter 必須不同」. 4. 一般認為 ECB mode 是不安全的，請說明原因並舉例. 由於 ECB 只是單純切割 block 後對每個 block 加密解密，若兩個 block 內容相同則會加密後會得到相. 39. 零級分：無作答或答非所問一級分：說明和例子明顯錯誤.

(47) 同結果，因此明文本身有明顯區塊或時常發生內容相同的情況，則可能會洩漏明文資訊 (必須說到「明文本身有明顯的區塊或時常發生內容相同的情況」或「兩個 block 內容相同則會加密後會得到相同結果」). 二級分：說明未能完整包含所有關鍵或未包含適當例子三級分：說明和例子大致正確四級分：完全正確. 舉例來說，例如影像若同一顏色的區塊會加密出相同的內容而使影像內容洩漏，或像文章，由於常用字詞會時常出現，若區塊剛好為同樣內容，則可以進行頻率分析來找到 key. Cro ssSite Scri ptin g. 5. 當我們進行加密時常用類似這樣的格式來標示採用的演算法: 「AES-128CBC」請問這代表的是甚麼加密演算法？. 採用 key 長度為 128 bits 的 AES 加密演算法， Encryption mode 利用 CBC mode 進行. 6. 呈上題，若採用同樣的演算法及 Encryption mode 但不同的 key size，請問還有哪些可能？（用同樣的格式回答）. AES-192-CBC AES-256-CBC. 請說明甚麼是 Cross-site scripting?. 未檢查使用者輸入內容，攻擊者得以注入並執行程. 1. 40. 零級分：無作答或放棄作答一級分：未提出是 AES 加密法，也未明確說明 key size 和 CBC mode 二級分：只提出 AES 或只說明 key size 和 CBC mode 三級分：提出 AES 但缺少或答錯 key size 和 CBC mode 其中之一四級分：完全正確零級分：無作答或放棄作答一級分：錯誤的 key size 二級分：只有 key size 其中之一三級分：正確說出兩種 key size 但格式錯誤四級分：完全正確零級分：無作答或答非所問.

(48) 這個攻擊的原理及目標為何?. 2. Cross-Site Scripting 分成三類，請問是哪三類？他們的定義及差別為何？. 式碼，攻擊的目標多為線上服務，藉由注入程式碼至線上服務的請求並執行來達到攻擊目的註: 原理必須有說明「注入並執行程式碼」目標必須提到大多為線上服務  Reflected XSS  直接將程式碼注入至 request 以影響 response  Stored XSS  程式碼被儲在伺服器，當瀏覽到相關內容才被執行  DOM Based XSS  利用 HTML DOM 的特性來影響網頁內容. 一級分：原理和目標有明顯錯誤二級分：原理或目標部分錯誤三級分：原理和目標大致正確，但遺漏部分細節四級分：完全正確零級分：無作答或答非所問一級分：對三種類型的定義皆錯誤二級分：三種類型的說明有包含部分錯誤三級分：定義都大致正確但遺漏部分細節四級分：完全正確. 註： Reflected XSS 不能只說「輸入影響輸出」 Stored XSS 必須提到儲存 HTML DOM 可簡稱 3-1. 請嘗試通關: https://xssgame.appspot.com 的 level 1，請問 level 1 是哪種類型的 XSS 攻擊?另外說明你的攻擊流程及原理. DOM Reflected XSS，觀察可發現輸入後網址多了參數 query，而 query 的值會直接放到網頁中，因此可直接注入<script></script>來執行 javascript 程式碼. 41. 零級分：無作答或答非所問一級分：回答非 Reflected XSS 二級分：未說明或說明不清楚攻擊流程和原理三級分：說明流程中未提及實際攻擊手法或原理說明有些微缺失四級分：.

(49) 3-2. 1. SQL injection. 2. 3. 完全正確延續上題，請通關 Stored (或 DOM-based) 零級分： level 2 XSS，可以發現輸入的內無作答或答非所問請問 level 1 是哪種容包含 HTML 會直接呈一級分：類型的 XSS 攻擊? 現到留言板上，但不能使回答非 Stored XSS 或另外說明你的攻擊用<script></script>，但可 DOM-based XSS 流程及原理二級分：以改用 DOM event 的觸順序大致正確但結構上有發來執行程式碼缺少或錯誤註：三級分： Stored XSS 和 DOM-based 順序正確但結構有部分錯 XSS 必須寫到其中之一誤攻擊流程及原理必須提到四級分： DOM event 觸發（或藉完全正確由.....觸發）執行程式碼請說明甚麼是 SQL SQL injection 發生於當資零級分： injection?這個攻擊料庫連線之服務未檢查使無作答或答非所問的原理及目標為用者輸入，直接將帶有惡一級分：何? 意 SQL 指令的資料注入原理和目標明顯錯誤資料庫操作指令，使得資二級分：料庫伺服器執行得以任意原理或目標部分錯誤操作資料庫，攻擊目標必三級分：定為包含 SQL 資料庫的原理和目標大致正確，但服務遺漏部分細節四級分：註：完全正確原理必須說明「將帶有惡意 SQL 指令的資料注入資料庫操作指令」目標必須有「操作資料庫」請說明在 SQL  讓攻擊內容比較短零級分： injection 中註解的  繞過(避開)後續的檢查無作答或答非所問目的（請舉出至少  讓指令簡單化無須管後一級分：兩項）續語法及符號閉合回答不為四點之一  測試指令內容以確認如二級分：何攻擊回答只包含四點之一三級分：以上四點擇二回答和四點大致符合四級分：完全正確請嘗試通關: 可以發現其 username 接零級分： https://www.wechall 將使用者輸入直接放入無作答或答非所問. 42.

(50) .net/challenge/traini ng/mysql/auth_bypa ss1/index.php，並說明攻擊方法（包含你的輸入）及原理. SQL 指令，但在 password 則會經 MD5 處理後才和 SQL 指令接合，因此無法對此部分進行注入，但可利用註解來避開 password 檢查，因此在 username 以「' or 1 = 1#」而密碼則隨意輸入就能讓該 SQL 指令變為「SELECT * FROM users WHERE username='' or 1=1#’' AND password = 'something'";」，註解後的內容不會被執行. 43. 一級分：原理說明錯誤或不清楚二級分：未說明攻擊或說明不清楚三級分：流程及原理大致正確但細節有遺漏未提及實際攻擊手法四級分：完全正確.

(51) 附錄二螢幕錄影行為編碼表行為類別作答. 查看教學影片. 子類別. 編碼. 備註. 學習單上作答. 1a. 若有複製貼上內容標註在備註欄. 利用外部工具作答. 1b. 備註欄標註使用的工具. 播放片段觀看. 2a. 利用拖曳條搜尋. 2b. 利用點擊時間點搜. 2c. 尋. 查詢外部資源. 若為一秒內快速搜尋視為一次行為，並在備註欄標註跳躍次數. 暫停播放觀看. 2d. 搜尋引擎瀏覽中. 3a. 在備註欄寫搜尋的關鍵字. 3b. 備註欄標註是第幾個搜尋排序，超過第五標註「第五以後」. 4. 備註欄說明何種行為. 觀看網站頁面. 其他. 44.

(52) 附錄三訪談逐字稿訪談對象：S1(實驗組) 研究者：這個訪談主要是對整個實驗內容總合的來做，那我們就是從你在使用上的一些問題，我會問你一些問題，你就根據你在實驗過程中的狀況來回答 S1：好研究者：那首先我看到你在問卷上面，「你需要很努力才能回答教學影片中的問題」那你這邊的平均得分，好，我看你的平均得分是 3.8，好 3.8 分，那我們的滿分是 6 分嘛，你平均回答 3.8 分，那你覺得「你需要很努力才能回答教學影片中的問題」，我想問你在回答時問題時的感覺是怎麽樣，需要什麼努力或會有負擔嗎？ S1：嗯……因為我覺得…思考一下] 研究者：就是回答問題整體來講你覺得這個回答問題對你學習有什麼影響或感受？ S1：影響喔……會讓我更想認真的去上課，因為等一下的問題會跟正在上的課很有關，會特別認真(CON-more) 研究者：所以，嗯好，所以因為你知道影片會有這些問題，所以你就會花費努力在學習上面 S1：對研究者：所以你覺得是，努力的部分是在哪裡？ S1：[思考一下]努力？研究者：對因為是「你需要很努力才能回答教學影片中的問題」嘛？你總會覺得那個地方需要努力嘛？ S1：上課？和可能要答對吧？研究者：我應該這樣問，就是你覺得是在你在回答上要多一些思考在問題答案才覺得需要努力呢？還是要先多一些努力學習過才能回答問題？ S1：先(多一些)努力學習過才能回答問題(EF-uds) 研究者：所以你剛剛才覺得回答問題需要努力 S1：對研究者：好，那接下來我要再問的是，我們在影片中我們會在中間嵌入一些問題嘛？像我們在影片一個段落後，我們講完一個概念會嵌入一寫問題問你這個段落的一些概念，那你覺得嵌入問題，就是在問題在影片中間這件事情呢，對你的學習有什麼樣的影響？ S1：學習，覺得讓我，嗯，對我來說，會讓我比較想要認真吧？因為知道後面有問題我就有種不想答錯的感覺，就是會在問題之前會比較認真去看好以免答錯之類的(LOcor, CON-more) 研究者：所以你就會因為這個問題，因為你看到這邊會有一個問題你就會花比較多的心力，就是可能會花比較多的心思在學習之上，去瞭解內容它在講什麼，是不是？ S1：對，而且我心裡就會想說，因為我如果答錯，那邊也看得到那這樣還不如認真學習，然後，然後答對這樣子也覺得比較好的感覺吧(LO-cor,Other-sup) 45.