第四章 研究方法
第三節 研究工具與材料
本研究所使用的工具與材料有三個，分別為線上「關鍵詞搜尋能力評量與回 饋系統」、「關鍵詞範例教學」與「網路搜尋能力測驗-前後測」，以下就各項研究 工具分別說明之：
一、「關鍵詞搜尋能力評量與回饋系統」
如第三章系統設計所述，故此不在詳細說明之。
二、「關鍵詞範例教學」
使用 prezi 簡報軟體製作的關鍵詞教學動態簡報，教學內容包含了關鍵詞範 例教學及關鍵詞搜尋能力評量與回饋系統的使用說明。關鍵詞教學部分有兩題範 例提供學生參考，分別為一般搜尋問題(可以直接從題目當中提取關鍵詞)及 wh-搜尋問題(關鍵詞無法直接從題目當中提取，須將疑問作轉換後，再提取成關鍵詞)。
下圖 4-2 為關鍵詞範例教學之截圖畫面。
62
圖 4-2 關鍵詞範例教學之截圖畫面
三、「網路搜尋能力測驗試題」
網路搜尋測驗的試題，可以分成兩部分。第一部分為前測與後測的搜尋題目，
第二部分為系統關鍵詞訓練過程中的搜尋題目。搜尋試題，參考國小自然科三大 版本(康軒、南一、翰林)之教科書的單元內容，整理如下表：
表 4-3 國小五六年級版本(康軒、南一、翰林)自然科教材目錄
康軒五上 南一五上 翰林五上
1.太陽的觀測 2.植物世界面面覷 3.空氣與燃燒 4.力與運動
1.太陽與四季
2.戴眼鏡為什麼可以矯正視力 3.植物世界
4.山河大地
1.太陽
2.各式各樣的生物 3.熱
4.水溶液
康軒五下 南一五下 翰林五下
1.美麗的星空 2.動物世界面面覷
1.我們來看星星 2.水溶液的性質
1.星星 2.空氣與燃燒
63
64
(一)、專家審核
網路搜尋試題經研究者參考各版本教科書、習作及評量自行設計後，皆經過 自然科及電腦科相關領域國小教師審核題目，將不符合時效性、語意不清的試題 淘汰，並提供修正意見，使題目能符合國小受試學生的閱讀及理解程度。
(二)、網路搜尋能力前、後測試題：
為了蒐集題目的困難度、鑑別度，試題事先經過預試。預試樣本為新北市某 國小五年級學生，共七個班級。刪除無法全程參與、特殊生及極端值人數後，總 樣本人數為 162 人。
本研究的試題難易度分析與鑑別度分析，參考「心理與教育測驗-測驗編制理 論與實務」(陳柏熹，2011)。表 4-4 為網路搜尋能力之試題困難度與鑑別度(完整 試題詳見附錄一)。
「試題難易度指標」：將受試者依該測驗總分區分成高分組(學者建議占群體 人數的 27%或是 1/3)與低分組(學者建議占群體人數的 27%或是 1/3)，再分別計算 高分組答對率(𝑃𝐻) 與低分組答對率(𝑃𝐿)，並取其平均值。公式如下：
P=
𝑃𝐻+𝑃𝐿2 一般來說，試題困難度的評判標準如下：
困難度 0.5 以下：困難題
困難度 0.5~0.75：中等困難題
困難度 0.75 以上：容易題
試題鑑別度是指題目能否有效區分不同能力高低者。「試題鑑別度指標」：以 高分組的答對率減去低分組的答對率，PH與PL分別代表高分組答對率與低分組答 對率。公式如下：
D=𝑃
𝐻−𝑃
𝐿65
一般來說，試題鑑別度的評判標準如下：
鑑別度 0.2 以下：不佳，很可能需要修改
鑑別度 0.2~0.4：尚可，但可能需要修改
鑑別度 0.4 以上：優良
表 4-4 網路搜尋能力之試題困難度與鑑別度
題目編碼 困難度 鑑別度 題目編碼 困難度 鑑別度 001 0.796 0.370 016 0.862 0.241 002 0.537 0.481 017 0.405 0.362 003 0.796 0.370 018 0.776 0.414 004 0.676 0.574 019 0.664 0.431 005 0.657 0.463 020 0.716 0.500 006 0.704 0.444 021 0.776 0.414 007 0.444 0.481 022 0.397 0.483 008 0.519 0.370 023 0.517 0.517 009 0.176 0.167 024 0.388 0.397 010 0.306 0.315 025 0.707 0.483 011 0.843 0.315 026 0.612 0.569 012 0.648 0.481 027 0.845 0.310 013 0.454 0.389 028 0.491 0.707 014 0.731 0.463 029 0.440 0.603 015 0.759 0.481 030 0.784 0.362
透過試題難易度及鑑別度分析，將困難度高於 0.75 與低於 0.25 的試題刪除，
並刪除鑑別度過低的試題，最後剩下的試題總數為 24 題。在前、後測試題的挑 選，以難易度相當的題目為原則，並將是否需做「疑問詞轉換」的題目平均分配，
避免前後測試題難易度差異過大，造成實驗的誤差。下表 4-5 為保留的 24 題網路 搜尋試題之信度摘要表。
66
67