• 沒有找到結果。

第三章 研究方法

第四節 研究工具

本研究所使用之研究工具,包含華語文閱讀診斷測驗試題、貝氏網 路程式、順序理論程式、開放式課程補救教材、系統滿意度問卷、華語 文閱讀診斷與開放式課程補救教學系統。

一、華語文閱讀診斷測驗試題

根據所選用的華語文「新版實用視聽華語」一、二冊教材進行教材 分析後,建置出的華語文知識結構,其結構包含六個由上到下共六個階 層的知識節點,每個知識節點各出 5 題,因此整份診斷試題之總題數為 30 題,總分為 100 分。

在試題編製完成後,交由 4 位具有華語文專長並且有多年教學經驗 的專家審核並修正本診斷試題,針對診斷試題是否符合華語文的出題架 構以及各個題目是否符合所對應的知識概念,以確保試題具有專家效度。

而在信度部分,則招募共 63 位學習華語文的外籍生擔任受測者進行紙 筆預試,在預試結束後針對預試結果進行內在信度分析,分析結果之 Cronbach’s Alpha 值為 0.794,因其大於 0.7 之標準,因此本診斷試題無 須進行修改即可於正式實驗之用,詳細的診斷測驗題目內容於附錄二中 呈現。

二、貝氏網路程式

本研究所使用之貝氏網路程式,採用台北市某大學心測中心自行開

發的貝氏網路程式作為本研究診斷測驗分析時的軟體。該套貝氏網路程 式在操作上主要分為三個階段:

(一)將預試資料及試題資料輸入至程式碼中

此部分包含預試的人數、知識節點數量、診斷試題題目,受測者的 答題情況、專家效標、各個診斷試題與知識節點的關聯性等,將基本數 值以常數或是矩陣的方式輸入進去後即完成初步設定。

(二)訓練貝氏網路

當第一階段之相關資料都輸入完畢後,則開始訓練貝氏網路,貝氏 網路程式會根據輸入的資料,透過貝氏定理進行各個節點決斷值的計算,

並且將計算得出的決斷值儲存在程式的紀錄檔之中。所分析的決斷值將 作為正式實驗提供受測者進行貝氏網路診斷時,系統診斷的依據。

(三)推論診斷結果

由前述所得出的決斷值計算並儲存在紀錄檔中,當有受測者進行貝 氏網路診斷時,貝氏網路程式即向系統要求該名受測者所有測驗的答題 情況,並搭配決斷值對該名受測者針對各個節點是否發生概念錯誤進行 診斷推論,推論結果則回傳至系統內並顯示於網頁中讓受測者知曉自己 的診斷結果。

三、順序理論程式

本研究所使用之順序理論程式為台北市某大學心測中心自行開發

之順序理論分析程式,其將題數與題號以及受測者作答情形輸入至程式 中後,並給予一閥值,在過往的文獻當中,研究者使用的閥值不盡相同,

因此參考其使用的閥值,本研究之閥值訂定在 0.15 至 0.2 之間,而經由 閥值所分析出之試題結構則於附錄四中呈現。(謝典佑、郭伯臣、許曜 瀚、許天維,2008;Bart & Krus, 1973)。程式會根據輸入之資料計算出 各個試題間的關係,進而得出整個診斷試題的試題結構,其將作為進行 適性化診斷測驗時的選題依據。

四、開放式課程補救教材

本研究所使用之開放式課程補救教材將以影片的方式進行呈現,每 個知識節點都會搭配一段開放式課程影片,時間約為五至十分鐘,以符 合小單元學習之設計,因此六個知識節點將會有六部開放式課程內容,

做為系統使用之補救教材。

在開放式課程教材內容拍攝的部分,由 1 位具有華語文專長、對本 研究所使用之「新版實用視聽華語」一、二冊之教材非常了解,並且有 13 年教導初階華語文教學經驗的老師協助拍攝,老師透過白板上的大字 報作為教具,利用板書技巧和課程講解進行教學拍攝,在拍攝完後將以 威力導演 11 作為影片後製之程式,最後完成補救教學系統所使用之開放 式課程補救教材。

五、系統滿意度調查問卷

本研究針對使用華語文閱讀診斷與開放式課程補救教學系統進行 補救教學的受測者(實驗組),在系統的操作便利性、實用性以及完整 性進行系統滿意度調查,藉此了解透過本系統進行補救教學後,對本系 統的看法與建議。本問卷參考用 IBM 公司為內部系統評估電腦系統而研 發的問卷(Lewis, 1995)。問卷的計分方式採用 Likert(1932)五點尺 度衡量法衡量,共有「非常同意」、「同意」、「普通」、「不同意」和「非 常不同意」等五種選項,而分數則依序為 5 分、4 分、3 分、2 分及 1 分。

六、華語文閱讀診斷與開放式課程補救教學系統

本研究所建置的華語文閱讀診斷與開放式課程補救教學系統共可 分為三個主要系統功能,分別是帳號管理系統、貝氏網路診斷系統以及 適性化補救教學系統,如圖 3-11 所示。

圖 3-11 系統功能架構圖

同樣是透過 ASP.NET 開發網頁應用程式和 MS-SQL 資料庫管理系統進 行製作,試題呈現方式則是以網頁方式進行呈現,系統流程如圖 3-12 所 示。

受測者在進入系統登入頁面後,可以在帳號與密碼欄位中輸入自己 進行正式實驗前所取得的實驗帳號與密碼,當驗證通過後即登入系統進 行診斷,如圖 3-13 所示。

圖 3-12 系統流程圖

圖 3-13 系統登入頁面

當登入成功後,系統會導引進入診斷測驗說明頁,如圖 3-14 所示,

其包含了中英文的測驗說明,受測者在閱讀完網頁中提示的診斷測驗說 明時,即可按下下方的「開始測驗」。

圖 3-14 診斷測驗說明頁面

而在開始測驗後,系統會從資料庫中撈取診斷試題的題目,並將其 呈現於網頁中,如圖 3-15 所示,受測者根據題目之意思在下方的選項中 利用滑鼠點選正確的答案,接著按下下方的「下一題」即完成作答,前 往下一個診斷試題。

閱讀完測驗說明後,點選按 鈕進入測驗

圖 3-15 診斷測驗頁面

而當診斷測驗結束後,系統會將資料庫中受測者的答題情形傳至貝 氏網路程式中,貝氏網路程式則根據收到的資料進行診斷分析,以了解 在各個知識節點的概念上是否發生錯誤。因本研究所使用之診斷測驗採 用順序理論的試題結構進行設計,因為在適性化診斷測驗中,每位學生 的答題數不盡相同,透過系統的診斷辨識,在診斷學生具有某項知識概 念後,系統便會推論學生在具有該項知識概念後,其所對應的診斷試題 也都會答對,因此不必再花費時間讓學生作答系統已經認定具有該知識 概念之診斷試題,所以在成績的計算上,參考圖 3-16 的診斷測驗成績計

診斷測驗的題 目呈現視窗

受測者根據題目選 擇正確之選項

分公式算出成績後並記錄在資料庫中(黃珮瑜、施淑娟,2010)。

R = ROUND(𝑁 − 𝐶

𝑁 × 100,2)

圖 3-16 診斷測驗成績計分公式

在成績計分公式中,N 為診斷試題之題目數,C 則為受測者的答錯 題目數,R 為受測者在診斷測驗過後所獲得的總分,ROUND 則為將計 算出之成績四捨五入。成績的總分 R 為診斷試題之題目數 N 減去答錯題 目數後,除以診斷試題之題目數 N 再乘以 100,並將計算結果四捨五入 到小數點第 2 位。因本實驗研究之診斷總題數為 30,因此 N 皆固定為 30,C 則因各個受測者的錯誤題數而有所不同。

而當貝氏網路程式診斷完受測者的知識概念後,系統會將診斷結果 顯示在網頁上,如圖 3-17 所示,可以看到顯示紅色的節點代表該節點發 生錯誤概念,而藍色則代表該節點之概念正確,而在結果圖示旁也會顯 示受測者在此節點共錯了多少題,以便受測者在接下來進行診斷時,能 針對錯誤的地方專注在補救教學中。當受測者了解自己的錯誤概念為何 後,便可按下「進入補救教學」開始進入開放式課程補救教學進行補救 了。

圖 3-17 診斷測驗結果頁面

華語文適性化補救教學系統共可分為開放式課程之補救教學教材 以及知識節點小測驗等兩部分,在開放式課程補救教材中,如圖 3-18 所 示,受測者透過課程影片進行補救教學,補救教學的內容則依照教材分 析後的六個知識節點,每個節點皆有一段約五至十分鐘的課程影片供受 測者進行補救教學,假若受測者有發現不懂需要重複再觀看課程影片時,

可在影片下方拉動時間軸至想要的位置後重新觀看課程內容。

除了顯示知識結構中各 階層概念是否發生錯誤 之外,旁邊也會顯示在此 知識節點共答錯了多少

其中知識節點發生概念 錯誤將以

當診斷出知識節點發生 錯誤概念時,分布圖將以 紅色文字及底色呈現

當診斷出知識節點沒有 發生錯誤概念時,分布圖 將以藍色文字及底色呈

圖 3-18 開放式課程補救教學頁面

儘管開放式課程作為免費的線上資源供使用者自由使用並學習,但 僅僅只有課程影片內容進行學習,使用者可能會不曉得學習的重點在哪。

為了增加受測者對補救教學內容之了解和孰悉度,當受測者觀看完開放 式課程教材後,系統將導引至對應的知識節點小測驗,其類似課後的隨 堂測驗,會依據不同的開放式課程教材內容而顯示相對應的測驗題目,

因此受試者在觀看不同開放式課程補救教材後,測驗的題目也有所不同,

學生可以透過系統的 影音播放器觀看課程 影片,受測可控制下方 的控制選項,調整影片 內容到想看的地方觀

如圖 3-18 所示。而每個知識節點都會擁有三個測驗題目作為該節點的小

如圖 3-18 所示。而每個知識節點都會擁有三個測驗題目作為該節點的小