第三章 研究設計與實施
第二節 研究方法與實施
國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
36
第二節 研究方法與實施
為達研究目的並回答研究問題，本研究擬採取文獻分析法、次級資料分析 法、訪談法及實驗法進行研究資料的蒐集。前述第一章第四節已簡述本研究的四 種研究方法，以下謹針對實驗法與訪談法，說明設計的細節與實施。
壹、 實驗法
實驗以本研究設計的「生涯發展推力成績通知單」作為操弄處遇（treatment）
（有關政策工具的設計，詳請參第六章），探討結合性向測驗與興趣測驗的成績 通知單，是否有助於提升個人在選擇升學校系與主修科系時，能更多考量個人的 興趣與性向。基於研究目的與實施的可行性，實驗係透過網路電子郵件（簡稱「電 郵」）與網路問卷實施，整體的實驗設計與實施流程如圖 3。
為確保實驗設計的可行性，本研究於 108 年 10 月 9 日實施認知訪談（cognitive interview），召募六位就讀政治大學大學部二年級以上同學，實際依照實驗步驟 進行操作，並逐題、逐字檢視內容與問卷，以有效探索受訪者如何解釋題目、偵 測實驗或答題中可能遭遇的困難及受訪者的認知歷程，確保受試者確實理解實驗 的操作及題目的意思。六位受試者主要為「方便樣本」，惟仍考慮其背景差異儘 可能多元，以探得廣泛的認知情形。認知訪談受訪者的基本資料如表 8。
表 8、實驗認知訪談受訪者的背景描述
系級 性別 就讀高中職及班級的屬性
公共行政系大四 女 公立高中普通課程，第一類組
公共行政系大二 男 公立高中普通課程，第三類轉一類組 風險管理系大三 女 五專，保險金融管理科
教育系大三 女 私立高中普通課程，第一類組
歐洲語文學系大三 女 公立高中普通課程，第三類轉一類組 資訊科學系大二 男 公立高中普通課程，第二類組
資料來源：本研究。
‧
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
38
一、 實驗參與者
考量資源的限制與可行性，本實驗以國立政治大學一年級（本國籍）學生為 實施對象。之所以選擇學生而非家長，主要原因在於家長的範圍較廣且不明確，
接觸管道通常也較發散，以學生為實驗對象較好操作；另選擇大學一年級學生而 非高中職學生的原因在於，較無實際影響個人真實升學選擇的倫理問題，且這些 學生才剛經驗過升學，背景較貼近且對於相關制度與運作仍較熟悉。至於選擇政 治大學的理由，根據該校教務處6公告之校務資料，計算 108 學年度第一學期大 一新生就讀前十名高中7的比率，達全體本國籍新生人數的32.80%（702 人 / 2,140 人），合理推測是適宜試驗「文憑主義」的場域。
至於參與者的召募，係由研究者將網路問卷連結併同研究說明以電子郵件寄 給各系辦公室助教，請其代為轉發給該系一年級學生，邀請參與實驗；另於臉書
「NCCU 政大學生交流版」張貼實驗參與者召募的公告與連結。另為鼓勵參與特 提供誘因：參與實驗者即可參與抽獎（30 名，每名 100 元超商禮券），全程完整 參與並完成實驗中所有任務者，可另獲得200 元超商禮券。
自2020 年 2 月 13 日起至 3 月 6 日共召募 95 名參與者，其中完整填答第一 份問卷者計87 名；至 4 月 10 日實驗結束止，完整參與全程實驗者計 76 名，其 系所分布與人數占比如表9。從表中可見，各系所參與並完成實驗的人數在該系 所大一新生人數的占比約為1%至 12%之間，占比不多且在各系所之間不盡一致，
另部分系所包括統計學系、財務管理學系、日本語文學系、韓國語文學系未有學 生參與。惟究實驗法而言，主要目的在檢證實驗操弄處遇（treatment）的效果，
相較於其他研究方法來說，代表性並非重點考量（邱皓政，2018），尤其在社會 科學研究的實務中通常很難真的做到隨機抽樣，往往更重要的是實驗分組後各組 之間樣本的隨機分派。故本研究實驗參與者雖無法代表母體，即整體政治大學大
6 網址：https://aca.nccu.edu.tw/zh/常用連結/統計資料
7 就讀前十名之高中包括：臺北市立中山女中、臺北市立第一女中、國立師大附中、高雄市立 高雄女中、臺北市立成功高中、桃園市立武陵高中、臺北市立建國高中、臺北市立臺中一中、
臺中市立臺中女中、高雄市立高雄高中。
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
學一年級新生的情況，但若實驗分組得宜，實驗結果仍具穩健性（robustness）。
表 9、實驗參與者的系所分布與人數占比情形
學系 大一新生人數 完成實驗人數
人數 占比
1 中國文學系 90 4 4.44%
2 歷史學系 48 1 2.08%
3 哲學系 57 2 3.51%
4 應用數學系 39 1 2.56%
5 心理系 45 3 6.67%
6 資訊科學系 49 3 6.12%
7 傳播學院大一大二不分系 195 6 3.08%
8 政治學系 49 2 4.08%
9 社會學系 55 4 7.27%
10 財政學系 84 2 2.38%
11 公共行政學系 50 6 12.00%
12 地政學系 119 1 0.84%
13 經濟學系 83 2 2.41%
14 民族學系 44 1 2.27%
15 金融學系 51 2 3.92%
16 國際經營與貿易學系 85 4 4.71%
17 會計學系 89 1 1.12%
18 企業管理學系 113 4 3.54%
19 資訊管理學系 80 1 1.25%
20 風險管理與保險學系 48 2 4.17%
21 英國語文學系 64 6 9.38%
22 阿拉伯語文學系 42 2 4.76%
23 斯拉夫語文學系 54 2 3.70%
24 土耳其語文學系 31 1 3.23%
25 歐洲語文學系 59 1 1.69%
26 法律學系 165 6 3.64%
27 外交學系 63 4 6.35%
28 教育學系 55 2 3.64%
資料來源：本研究。
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
40
二、 實驗期程：2020 年 3 月 8 日至 4 月 3 日期間。前測於 2 月 25 日至 3 月 6 日受試者招募時實施，資料清理與分組後，正式實驗於 3 月 8 日開始。實驗中 的每個任務的持續時間為一周：任務一（3 月 8 日至 14 日）、任務二（3 月 15 日至 21 日）、任務三（3 月 22 日至 28 日）、任務四（3 月 29 日至 4 月 3 日）。
三、 實驗的操弄處遇（treatment）：本研究所設計的行為經濟學政策工具：
生涯發展推力成績通知單。控制組學生取得傳統成績通知單（主要為分數及分數 的分布情形資訊），實驗組學生拿到「生涯發展推力成績通知單」（除了分數及分 數的分布情形，還加上個人性向與興趣測驗的資訊）。
四、 實施工具與實施程序
實驗主要透過網路進行，實施電子郵件與網路問卷。受試者被邀請參與一個
「角色模擬遊戲：爸媽為你好（for your own good）」的網路實驗，其在遊戲中 的角色為家長，被指派一名高中女學生作為其女兒，除了第一封研究網路實驗受 試者召募的電子郵件，其會在每周日晚上收到一封（總計四封）電子郵件，內容 陸續提供有關高中生女兒的基本資料，及其在校學習表現及學測的成績通知單等 資訊，每封電子郵件當中會提供一些資訊並交辦一些任務（主要為填寫網路問卷 或簡答問題），請其在當週五之前完成任務，最後請其為女兒建議選擇大學升學 的校系。交辦任務除了實驗本身資料蒐集的目的，也可避免網路問卷實驗中常被 詬病的問題，即難以確認參與者是否真的「參與」，例如確實閱讀了問卷中的資 訊或只是匆匆略過，這些「任務」正發揮了「注意力檢查」（attention check）或
「指示性操作檢查」（instructional manipulation checks）的功能（Jilke & Ryzin, 2017）。此種以模擬取代真實作業的方式，雖無法觀察到實際的行為，但較可行 且較無倫理上的爭議。五封電子郵件及網路問卷如附錄一，以下說明其內容與進 行方式。
（一） 電郵一
請各系辦公室助教協助轉發給該系大學部一年級學生（本國籍），目的為召 幕本研究的實驗受試者，內容主要為研究簡介、實驗說明及網路問卷。問卷內容
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
的編制，主要參考自既有之次級資料庫與研究，包括：臺灣高等教育整合資料庫 的大專生問卷、臺灣教育長期追蹤資料庫的家長及學生問卷、何英奇（2001）、
黃春木（2007）。問題題目包括基本資料、教育經驗與規劃（含關於高中（職）
生活、關於大學入學與人生規劃、關於家庭），以及教育見解等三大部分。其中 教育見解部分包括 20 題詢問對教育議題的看法，作為本研究文憑主義觀念與態 度前後測量表，內容包括對以文憑論人的看法（題項 6-1 至 6-6）、升學競爭的 教育觀（題項 6-7 至 6-13）、文憑的價值觀（題項 6-14 至 6-20）等。
（二） 電郵二（模擬遊戲資訊與任務一）
由研究者透過電子郵件寄給實驗的受試者，任務資訊為高中生女兒的角色資 訊，包括姓名、就讀學校及年級與類組、專長、經歷、性向與興趣等。任務內容 為請受試者詳細閱讀資料後，回答三個問題：針對子女教養的規劃、教育期望與 未來工作的期望，並請其敘明理由。
（三） 電郵三（模擬遊戲資訊與任務二）
由研究者透過電子郵件寄給實驗的受試者，任務資訊為高中生女兒的期中表 現成績通知單（實驗組為生涯發展推力成績通知單）。任務內容為請其詳細閱讀 提供資訊，並回答一個問題，詢問其對女兒學業表現與評價的看法和理由。
（四） 電郵四（模擬遊戲資訊與任務三）
由研究者透過電子郵件寄給實驗的受試者，任務資訊為高中生女兒的期中表 現成績通知單（實驗組為生涯發展推力成績通知單）。任務內容為請其詳細閱讀 提供資訊，並回答一個問題，詢問其對女兒學業表現與評價的看法和理由。
（五） 電郵五（模擬遊戲資訊與任務四）
由研究者透過電子郵件寄給實驗的受試者，任務資訊為高中生女兒的學測與 指考成績通知單（實驗組為生涯發展推力成績通知單）。任務內容為請其閱讀提 供資料，為女兒建議選填升大學校系的就讀志願，並完成網路問卷。問卷內容包 括對學校成績通知單的看法，以及文憑主義態度與觀念的後測。
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
42
五、 實驗變項的測量與分析方法
盤點本研究透過實驗法蒐集獲得的資料，如表 10 所示，主要包括個人在實 驗過程中歷次填復的網路問卷及開放式簡答問題，大部分為量化的數值資料，另 包括少部分質性的文字資料。針對量化資料的分析，將聚焦在探討本研究因應文 憑主義之行為經濟學政策工具的成效評估，以及影響其成效的因素探討。具體來
盤點本研究透過實驗法蒐集獲得的資料，如表 10 所示，主要包括個人在實 驗過程中歷次填復的網路問卷及開放式簡答問題，大部分為量化的數值資料，另 包括少部分質性的文字資料。針對量化資料的分析，將聚焦在探討本研究因應文 憑主義之行為經濟學政策工具的成效評估，以及影響其成效的因素探討。具體來