研究工具

第四節 第四節

第四節 研究工具 研究工具 研究工具 研究工具

本研究主要研究工具為自編華語文化測驗試題、線上適性測驗系統、相關 統計分析軟體、評估指標，說明如下：

壹 壹 壹

壹、 、 、自編華語文化 、 自編華語文化 自編華語文化能力 自編華語文化 能力 能力 能力測驗試題 測驗試題 測驗試題 測驗試題

本研究的華語文化能力測驗試題來源是由研究生及國立臺灣師範大學應用 華語文學系的學生出題，所編製的試題經過預試後信度得到 Cronbach’s α 值 為.849。預試後刪除不良試題後，將正式施測題目 65 題建置到電腦適性測驗系 統中，並且進行線上施測，Cronbach’s α 值為.848（試題參見附錄一、附錄二）。

貳 貳 貳

貳、 、 、線上測驗系統 、 線上測驗系統 線上測驗系統 線上測驗系統

本研究的「華語文化能力適性測驗系統」是由臺中教育大學教育測驗統計 研究所團隊所研發的，以進行本研究電腦化適性測驗的施測與成效評估。以下 分別以試題建置流程及線上施測流程兩部份說明。

一 一 一

一、 、 、試題建置流程 、 試題建置流程 試題建置流程 試題建置流程

本研究目的之一在於建置一套華語文化能力測驗系統，提供未來學習華語 文化上的評量方式，尤其透過電腦化適性測驗的方式可以讓測驗方式更方便，

以下分別說明此測驗平台的研究成果。

1、測驗說明

登入華語文化能力測驗系統之後，點選「測驗說明」，如圖 3.7 所示。「等 級」選擇 C1 級，「測驗名稱」選擇華語文化能力測驗，接著將已預錄好的指導 語說明之 mp3 格式語音檔上傳。

圖 3.7 編修測驗說明畫面

2、編修試題

登入華語文化能力測驗系統之後，點選「編修試題」進入新增試題畫面，

如圖 3.8 所示。「等級」選擇 C1 級，「第幾部分」選擇第一部份，接著將預試試 題每一題題目及每一題的選項個別轉成 JEPG 格式圖檔，依序上傳至「題目」、

「選項 1」、「選項 2」、「選項 3」、「選項 4」，並將正確答案輸入「正確答案」欄 內，「試題版型」則選擇「3.閱讀樣板」，以完成建立本測驗之試題內容。

圖 3.8 新增試題編修畫面

待試題全部上傳完成後，若發現有部分題目上傳錯誤，可在此畫面點選「編 修測驗」，以進行題目的細部修改。

3、編修試題參數

登入華語文化能力測驗系統之後，點選「編修試題參數」進入試題參數上傳 畫面，如圖 3.9 所示。「等級」選擇 C1 級，「第幾部分」選擇第一部份，並依照 範例檔之 Excel 2003 格式，將各試題之鑑別度 a、難度 b、猜測度 c 等參數上傳，

格式如圖 3.10。試題參數上傳完畢後，可點選「查詢試題參數」以檢視所上傳之 試題參數是否正確無誤，如圖 3.11。

圖 3.9 編修試題參數畫面

圖 3.10 試題參數上傳格式畫面

圖 3.11 查詢試題參數畫面

待測驗之所有題目、基本資料、試題參數上傳完成建立題庫後，受試者即 可上線接受測驗。施測流程說明如下。

二 二 二

二、 、 、線上施測流程 、 線上施測流程 線上施測流程 線上施測流程 1.登入系統

每位受試者會有自己的帳號、密碼以登入系統施測，如圖3.12所示。

圖 3.12 系統登入畫面

2.輸入基本資料

登入系統後，首先系統會請受試者輸入基本資料，有組別、班級、僑居地、

出生年月日、性別、父親教育程度、母親教育程度、在家常會「說」或「聽見」

中文交談、學習中文時間等項目，如圖3.13。

圖 3.13 基本資料輸入畫面

3.點選測驗類別

基本資料輸入完畢後，會進入如圖 3.14 的選單畫面，點選「選擇測驗」， 每位受試者會進入到選取測驗單元介面。

圖 3.14 選擇測驗畫面

4. 選擇測驗類別

華語文測驗除了本研究關注的文化試題外，仍有聽說讀寫的部份。此時每 位受試者要點選文化測驗部份，如圖3.15。

圖 3.15 選擇測驗類別

5. 提示語說明

在進行測驗前，系統會先進入「提示語說明」畫面，以圖示搭配語音的說明 方式向受試者說明本測驗的題目類型，題數，答案選項，答案個數，以及如何作 答等事項，待受試者了解後，再點選畫面最下方的「說明結束，考試開始」按鈕，

即可開始作答，如圖3.16所示。

圖 3.16 提示語說明畫面

6. 測驗介面

如圖3.17所示，於畫面的左上角可以看到目前測驗中的題數，題目畫面內容 分為題幹敘述與試題選項，當受試者選答完畢，點選適當答案後，再點選「下一 題」，即可繼續進行測驗。

測驗過程中，若受試者按網頁畫面的「上一頁」，系統並不會回到上一題，

網頁會顯示「網頁已過期」，系統會自動判定受試者已完成本測驗，後面未作答 部分系統則判定全部皆答錯；若是按網頁的「重新整理」，則系統會自動進入下 一題。此部分需於測驗前先向受試者說明，以讓受試者順利完成測驗。

圖 3.17 測驗介面畫面

7.作答查詢

測驗進行後，研究者登入後可點選「作答查詢」，以查詢受試者的作答情形，

並據此做各項統計分析，如圖3.18所示。

圖 3.18 受試者作答紀錄畫面

參 參 參

參、 、 、相關統計分析軟體 、 相關統計分析軟體 相關統計分析軟體 相關統計分析軟體 一

一 一

一、 、 、SPSS 統計分析軟體 、 統計分析軟體 統計分析軟體 統計分析軟體

本 研 究 使 用 的 統 計 分 析 軟 體 為 SPSS(Statistical Products and Services Solution)套裝軟體，用以分析預試試題、線上施測後的信度相關係數，以及相 關變項的 t 檢定。

二 二 二

二、 、 、 BILOG-MG 軟體 、 軟體 軟體 軟體

BILOG-MG 軟體可用以估計出試題的參數值，如難度、鑑別度、猜測度及 受 試 者 的 能 力 值 ， 也 可 提 供 測 驗 的 訊 息 量 、 信 度 指 數 與 測 驗 訊 息 曲 線 圖

(Zimowski, Muraki, Mislevy, & Bock, 2003)。 要應用於矩陣理論（Matrix Theory），線性代數（Linear Algebra）及數值分析

（Numerical Analysis）等課程。MATLAB 7 中涵蓋了許多新功能，可讓程式撰 寫、編碼、繪圖更有效率，同時視覺化、數學運算、資料擷取與效能上都大有

θi：第 i 個受試者施測全部試題後，所估計的能力值，因無真實能力值資料，

故使用_θi作為比較的基準。

θ^ˆi：第 i 個受試者施測部分試題後，所估計的能力值。

N：受試者總人數