第五章 結論與建議
第二節 建議
本節將針對試題研發與施測過程中所遭遇到的問題,提出檢討與改進,以供 後續研究者參考。
壹、檢討與改進
一、本研究依據九年一貫英語聽力指標,所設計的「短文聽解辨圖」,施測 結果成績不如預期。深究原因,發現出在題目呈現方式不當:短文播放時,並沒 有將後續要問的問題以文字方式同步呈現在畫面上,造成學生認知負荷過大;不 單要了解內容、記住細節,還需聽懂問題才能做答。對程度中等以下的學生極為 不利。
二、未能善用電腦動畫融入題型,提高學生主動答題的誘因,實屬可惜。研
究者擔心動畫施測時,易因流量過大造成當機,增添施測的變數,因此,設計題 目時,有意避開動畫題。但隨者科技日新月異,後續的研究可將動畫題型納入題 庫,增加學生答題的誘因。
貳、未來研究方向
一、12 年國教已開始施行,建議未來研究者可以針對國中、高中不同的學習 階段,研發英語聽力線上測驗,整合 12 年一貫的英語聽力學習成效檢測;既可 提供學生上網自學練習,更可作為教學者及教育相關單位在英語聽力教學與評量 策略上的參考與調整。
二、本研究只針對聽力試題進行研發,建議未來研究者可整合聽力、口說、
閱讀及寫作試題,建置聽、說、讀、寫英語電腦化互動的線上評量系統,達到提 升英語全方位的學習與檢測機制。
九年一貫課綱強調教導學生「帶得走」的知識技能;十二年國教強調「適性 揚才」的教學方式。英語能力的提升,不但可以讓學生掌握「帶得走」的知識,
更可以讓學生擁有「走得出去」的技能。隨者「雲端學校、網路教室、自主學習」
的教育趨勢,建置英語線上學習評量系統,不但能提供學生個人化學習與評量的 管道,更可讓「把每一個孩子帶上來」的理念不再遙不可及。
參考文獻
中文部份
大學入學考試中心。高中英語聽力測驗。線上檢索日期:2014 年 2 月 25 日。取 自http://www.ceec.edu.tw/TELC/AboutTELC.aspx
王寶墉(1995)。現代測驗理論。臺北:精華書局。
王文中(2004)。Rasch 測量理論與其在教育和心理之應用。教育與心理研究,27 (4),637-694
王彩鸝(2009 年 12 月 17)。臺灣英語教育怎麼了?小時頂呱呱 高中差。聯合晚 報。取自 http://mag.udn.com/mag/edu/storypage.jsp?f_ART_ID=227110
王暄博(2013)。CEFR 基礎級之華語文聽力與閱讀理解能力測驗研發與電腦化 適性評量系統建置。國立臺中教育大學教育測驗統計研究所博士論文,未出 版,臺中市。
臺灣學生學習評量資料庫。線上檢索日期:2014 年 1 月 25 日。網址:
http://tasa.naer.edu.tw
臺灣托福資源中心(2014)。多益測驗網站。線上檢索日期:2014 年 1 月 25 日。
網址:http://www.toefl.com.tw/new-toefl-iBT.jsp
余民寧(2009)。試題反應理論 IRT 及其應用。臺北:心理出版社。
余民寧(2011)。教育測驗與評量。第三版。臺北:心理出版社。
李玉珍(2005)。多媒體英語檢測試題與傳統試題之分析比較。國立交通大學理 學院碩士論文。未出版,新竹市。
宋珮如(2011)。認知成分對 ASAP 英語聽力理解試題難度的預測。國立臺南大 學教育學系測驗統計研究所碩士論文,未出版,臺南縣。
吳慧珉、蘇少祖、趙佑軒(2009)。電腦化適性測驗題庫擴增研究。測驗統計年 刊,17,19-54。
林宜如(2003)。使用真實語料做為高中生英語聽力輔助教材之個案研究。國立 政治大學英國語文學系在職碩士班碩士論文,未出版,臺北縣。
林倍如(2013 年 2 月 1 日)。英語文國小聽讀測驗表現結果探究。國家教育研 究院電子報,57。取自:
http://epaper.naer.edu.tw/index.php?edm_no=57&content_no=1595
周玟妤(2014)。國中英語聽力電腦化測驗研發。亞洲大學資訊工程學系碩士論文,
未出版,臺中市。
洪碧霞、吳裕益、吳鐵雄、陳英豪(1992)。能力估計方法、題庫特質及終止標 準對 CAT 考生能力估計影響之研究(國科會專題研究計畫成果報告編號:
NSC81-0301-H024-03)。臺北:中華民國行政院。
美國教育測驗服務社(2014)。iBT 托福測驗試題說明。線上檢索日期: 2014年 01 月25日。網址:http://www.ets.org/Media/Tests/TOEFL/pdf/TOEFL_Tips.pdf 殷開雯(2012)。應用多媒體輔助英語學習之成效評估:以苗栗縣國中小英語學
習。育達商業科技大學資訊管理所碩士論文,未出版,苗栗縣。
教育部國民教育司(2014)。國民中小學九年一貫課程綱要。線上檢索日期:2014 年 1 月 25 日。網址:
http://140.111.34.54/EJE/content.aspx?site_content_sn=15326 郭生玉(1985)。心理與教育測驗。臺北市:精華書局。
郭伯臣、吳慧珉、陳俊華(2012)。試題反應理論在教育測驗上之應用。新竹縣 教育研究集刊,12,05-40。
黃本杲(2004)。班級適性化測驗系統之建置-以英語學習護照為例。國立中央大 學網路學習科技研究所碩士論文。未出版,桃園市。
陳柏熹(2006)。能力估計法對多向度電腦化適性測驗測量精準度的影響。教育 心理學報,38 (2),195-211。
陳安琪(2006)。國小電腦化英語聽力理解評量之發展。國立臺南大學測驗統計 研究所碩士論文,未出版,臺南市。
陳新豐(2007)。臺灣學位電腦化測驗研究的回顧與展望。教育研究與發展期刊,
3 (4),217-248。
許芳菊(2013年11月)。趨勢,全球教育大革命。天下雜誌,537,104-155。
張玉茹、楊智為(2009)。國小學生英語聽力電腦化測驗之編製與發展。測驗統 計年刊,17,1-22。
葉連祺、林淑萍(2003)。布魯姆認知領域教育目標分類修訂版之探討。教育研 究月刊,105,94-106。
曾建銘 (2009)。TASA 與其他國際評量之比較【專論】。研習資訊,26 (6),21-25。
游婉琪(2012 年 3 月 5 日)。菜英文 小學輸大陸 中學輸南韓。中時電子報。網 址:http://www.chinatimes.com/
語言測驗訓練中心(2013)。劍橋博思職場英語檢測。線上檢索日期:2014 年 1 月 21 日。網址:http://www.lttc.ntu.edu.tw/bulatsmain.htm
賓靜蓀 (2013 年 6 月)。跨國直擊美國教育現場。親子天下,46,150-208。
鄭月珠(2000)。圖像式英語聽力測驗對臺灣國中生的影響。國立彰化師範大學 英語學系碩士論文,未出版。
羅靜倫(2004)。測驗形式與文類對聽力理解與策略使用之效應。國立臺灣師範 大學英語學系碩士論文,未出版,臺北市。
英文部分
Anderson, A. & Lynch, T. (1988). Listening. New York: Oxford University Press.
Anderson, J. R. (1983). The architecture of cognition. Cambridge, MA: Harvard University Press.
Babcock, Ben and Weiss, David J. (2012) Termination Criteria in Computerized Adaptive Tests: Do Variable-Length CATs Provide Efficient and Effective Measurement? Journal of Computerized Adaptive Testing, Vol.1(1), 1-18 doi:10.7333/1212-0101001
Bloomfield, Amber & Wayland, Sarah C. (June 2010). What makes listening difficult?
Factors affecting second language comprehension. Retrieved from University of Maryland Center for Advanced study of Language website
http://www.casl.umd.edu/sites/default/files/ExecSumm.TTO%2081434%20Final
%20Tech%20Report%20E.Ex3_.pdf
Birnbaum, A. (1968). Some latent trait model and their use in inferring an examinee’s ability. In F. M. Lord and M. R. Novick, Statistical theories of mental test scores, 17-20. Reading, Mass: Addison-Wesley
Bock, R. D. & Mislevy, R. J. (1982). Adaptive EAP Estimation of Ability in a
Microcomputer Environment. Applied Psychological Measurement, 6, 431-444.
Brown, G. & Yule, G. (1983). Teaching the Spoken Language. Cambridge:
Cambridge University Press.
Brown, H. D. ( 2001).Teaching by Principles: An interactive approach to language pedagogy. (2nd ed.). New York: Longman
Brownell, J. (1996). Listening: Attitudes, principles, and skills. Boston: Allyn and Bacon.
Boyle, J. P.(1984). Factors Affecting Listening Comprehension. ELT, 38(1),34-38.
Buck, Gary (2001). Assessing Listening. U.K.: Cambridge University Press.
Call, M. E. (1985). Auditory short-term memory, listening comprehension, and the input hypothesis. TESOL Quarterly, 19(4), 765-781.
Carmines, E., and Zeller, R. ( 1979) Reliability and Validity Assessment. Sage Publications, Beverly Hills, California.
Chen, Yiching (2005). Barriers to acquiring listening strategies for EFL learners and their pedagogical implications. TESL-EJ 8:4
Chaudron, C. & Richard, J.C. (1986). The effect of discourse markers on the comprehension of lectures. Applied Linguistics, 7(2), 113-127.
Chastain, Kenneth (1976). Developing Second Language Skills: Theory to Practice.
Chicago: Rand McNally College Pub. Co.
Ebel, R. L., & Frisbie, D. A. (1991). Essentials of educational measurement (5th ed.).
Englewood Cliffs, NJ: Prentice-Hall.
Emo, Minhee (2010). Two Factors of L2 Listening. MJAL 2:4, 295-305.
Feyten, C. M. (1991). The Power of Listening Ability: An Overlooked Dimension in Language Acquisition. The Modern Language Journal 75, 173-180.
Gilakjani, Abbas Pourhossein & Ahmadi, Mohammad Reza. (2011). A Study of Factors Affecting EFL Learners' English Listening Comprehension and the Strategies for Improvement. Journal of Language Teaching and Research, 2 (5), 977-988. doi:10.4304/jltr.2.5.977-988
Gilbert, M. B. (1988). Listening in school: I know you can hear me—But are you listening? Journal of the International Listening Association, 2, 121-132.
Goh, Christine C.M. (2000). A Cognitive Perspective on Language Learner’s Listening Comprehension Problems. System, 28(1), 55-75.
Halliday, M. A. K. & Hasan, R. (1976). Cohesion in English. NY: Longman.
Lord. F. M. (1980). Applications of item response theory to practical testing problems.
Hillsdale, NJ: Erihaum.
Marsaid, Hertiki (2008). Assessing Listening. Retrieved from
http://www.slideshare.net/h3rt1k1/assessing-listening-presentation
Mendelsohn, D. J. (1994). Learning to listen: A strategy-based approach for the second language learner. San Diego: Dominie Press.
Nunan, D. (1998, January). Approaches to teaching listening in the language
classroom. Paper presented at the Korea TESOL Conference, Seoul. Retrieved from
http://www.koreatesol.org/sites/default/files/pdf_publications/KOTESOL-Procee ds1997web.pdf#page=5
O’Malley, J. M. & Chamot, A. U. (1990). Listening strategies in second language acquisition. Applied Linguistics, 10(4), 418-437.
Rost, M. (2002). Teaching and Researching Listening. London, UK: Longman.
Rubin, Joan. (1994). A Review of Second Language Listening Comprehension Research. The Modern Language Journal 78, 199 -221.
Rudner, Lawrence M.(1998) An On-line, Interactive, Computer Adaptive Testing Tutorial, 11/98. Retrieved from
http://echo.edres.org:8080/scripts/cat/catdemo.htm#reliab
Samejima, F. (1969). Estimation of latent ability using a response pattern of graded scores.Psychometrika monograph, No. 17.
Stocking, M. L. (1994). Three practical issues for modern adaptive testing item pools.
Educational Testing Service, Princeton, N. J.
Thompson, I. (1995). Testing listening comprehension. AATSEEL Newsletter, 37(5), 24-31.
Underwood, M. (1989). Teaching Listening. New York: Longman.
Vandergrift, L. (1999). Facilitating Second Language Listening Comprehension:
Acquiring Successful Strategies. ELT Journal 53, 168-176.
Weir, C. J. (1993). Understanding and designing language tests. London: Longman.
Wang, T., & Vispoel, W. P. (1998). Properties of ability estimation methods in computerized adaptive testing. Journal of Educational Measurement, 35(2), 109-135.
Wolff, Dieter. (1987). “Some Assumptions about Second Language Text Comprehension”. Studies in Second Language Acquisition. 9. 307-326
附錄 國小英語聽力線上測驗試題
(作答說明)
本測驗分八部分,全為三選一之選擇題,共 35 題,作答時間約 30 分鐘。作答說 明為中文,顯示在電腦螢幕上並由電腦耳機播出。
第一大題:聽辨字母
[說明]請聆聽一組字母兩次,再從所看到的選項中,選出正確的答案。
例:你會聽到 (a-z, a-z), 你會看到(1) I R (2) A Z (3)E Y 1. (f-t, f-t) (1) F B (2) F T (3) F P
2. (p-j, p-j) (1) P J (2) B G (3) D J 3. (n-u, n-u) (1) L U (2) M U (3) N U
第二大題: 聽辨語音
[說明]請將聽到的字母發音,拼讀出單字;再從所聽到的三個選項中,選出正確 的答案。單字的字母發音會重覆念兩次,選項只念一次。
例:你會聽到 (d-o-t, d-o-t),
你會聽到 (1) dot (2) but (3) pot
4. (b-u-g, b-u-g) (1) dug (2) bug (3) cub 5. (w-a-t-er, w-a-t-er) (1) what (2) waiter (3) water 6. (m-u-s-i-c, m-u-s-i-c) (1) nuke (2) music (3) milk 第三大題: A. 聽辨單字
[說明]請從看到的選項中,選出你聽到的單字。單字會重覆念兩次 例:你會聽到 (cap, cap),
你會看到 (1) map (2) cab (3)cap 7. (cute, cute) (1) mute (2) guts (3) cute
8. (family, family) (1) family (2) friendly (3) finally 9. (Tuesday, Tuesday) (1) Taipei (2) Tuesday (3) Thursday
B. 聽辨句中的單字
[說明] 請從看到的選項中,選出你聽到的句中單字。句子會重覆念兩次。
例:你會聽到 (It’s a cute dog. It’s a cute dog.) 你會看到 (1) cool (2) good (3)cute
10. Judy is a smart girl. (1) small (2) smell (3) smart
11. Kobe is a basketball player. (1) basketball (2) football (3)baseball 12. The beef noodles taste good. (1) feel (2) sound (3) taste 第四大題: 聽辨語調。
[說明]請依聽到的句子語調,判斷該句是問句、 直述句或否定句。句子會重覆念 兩次。
例:你會聽到 (What’s your name? What’s your name?) 你會看到 (1) 問句 (2) 直述句 (3) 否定句
13. Nancy doesn’t drink coffee. (1) 問句 (2) 直述句 (3) 否定句 14. It rains cats and dogs. (1) 問句 (2) 直述句 (3) 否定句 15. Who is that tall boy? (1) 問句 (2) 直述句 (3) 否定句 第五大題: 日常用語
[說明] 請在聽到句子後,選出適當的圖片。句子會重覆念兩次。
例:你會聽到 (It’s a cat. It’s a cat.)
你會看到 (1) (2) (3) 16. Open your book to page 23.
(1) (2) (3) 17. Hand in your homework, please.
(1) (2) (3)
18. The girl is talking on the phone.
(2) (3) (1)
第六大題: 基本問答
[說明]請仔細聆聽對話,再從聽到的三個選項中,點選正確的答案。整組問句及 答句會重覆念兩次。
例:你會聽到 How old are you?
(1) I’m fine. Thank you. (2) You’re welcome. (3) I’m 11.
19. Where are you from?
(1) I’m in the park. (2) I’m from China. (3) I’m going to the school.
20. Whose jacket is this?
(1) I like this jacket. (2) The jacket is old. (3) It’s her jacket.
21. How’s the weather today?
(1) It’s sunny. (2) It’s Sunday. (3) It’s sour.
第七大題: 生活對話
[說明]請仔細聆聽對話後,從看到的三個選項中,選出正確的答案。
整組問句會重覆念兩次。
22. A: How old are you, Sam? B: I am 10, and my sister is 14.
Q: How old is Sam’s sister?
(1) She’s 10. (2) She’s 4. (3) She’s 14.
23. A: Excuse me. How much is the cake? B: It’s $20.
Q: How much is it for two cakes?
(1) They’re $20. (2) They’re $30. (3) They’re $40.
24. A: Are you all right? B: No, I’m not. I have a headache.
Q: What’s wrong with the man?
(1) His hand hurts. (2) His head hurts. (3) He has a head.
25. A: Hurry up! The bus is coming.
B: Yeah! We’re going to see the baby panda.
Q: Where are they going?
(1) To the zoo. (2) To the park. (3) To the hospital.
26. A: How do you go to work? B: On foot.
Q: How does he go to work?
(1) He takes the bus to work. (2) He rides a bike to work.
(3) He walks to work.
27. A: I’m hungry. Let’s have some chips.
B: But mom says “No snacks before lunch.”
Q: What time is it?
(1) In the morning (2) In the afternoon (3) At night 第八大題: 韻文聽解
[說明]請聽辨簡易韻文後,從三個選項中,點選正確的答案。韻文會重覆念兩次。
[說明]請聽辨簡易韻文後,從三個選項中,點選正確的答案。韻文會重覆念兩次。