閱卷者之眼球運動與評分穩定度之研究：以地理科電腦螢幕閱卷為例

The Eye Movements and Scoring Stability of Test Evaluator Using Computer Moniters: An Example for Geography Assessment

李明燕
Ming-Yen Lee


所屬期刊： 第1卷第3期 「測驗與評量」
主編：玄奘大學
應用心理學系 林邦傑教授
系統編號： vol003_08
主題： 測驗與評量
出版年份： 2005
作者： 李明燕
作者(英文)： Ming-Yen Lee
論文名稱： 閱卷者之眼球運動與評分穩定度之研究：以地理科電腦螢幕閱卷為例
論文名稱(英文)： The Eye Movements and Scoring Stability of Test Evaluator Using Computer Moniters: An Example for Geography Assessment
共同作者：
最高學歷： PH.D.
校院名稱： 台灣師範大學
系所名稱： 地理所
語文別： 中文
論文頁數： 36
中文關鍵字： 電腦螢幕閱卷; 眼球運動; 評分穩定性
英文關鍵字： Computer monitor scoring; eye movement; scoring stability
服務單位： 彰化師範大學地理系
稿件字數： 12500
作者專長： 地理教育
投稿日期： 2005/09/22
論文下載： pdf檔案icon
摘要(中文)： 當試卷無法全面利用電腦自動評分時，另一種閱卷方式是將考生答案卷掃描為影像檔，閱卷者透過網路在電腦螢幕前閱卷。為瞭解閱卷者在電腦螢幕閱卷的眼球運動及評分的穩定定，本研究以眼動儀搜集閱卷者眼球運動的資料，以紙筆閱卷、電腦螢幕閱卷(無眼動儀)及電腦螢幕閱卷(戴眼動儀)三種閱卷工具搜集閱卷者的評分資料。實驗結果發現，在眼球運動方面，年齡較高且平日較少電腦之閱卷者的眨眼次數較多，且在更換試題之際眨眼次數明顯增多，眼動個數亦以年齡組最高者較多，不過各年齡閱卷者在各題的凝視時間都相當短促，而在換大題之際明顯增加；在評分穩定性方面，則發現受到答案形式及評分指標影響，代碼型答案的評分穩定性最高，專有名詞評分穩定性次之，作圖評分穩定性最低。
摘要(英文)： When a test cannot be scored automatically by the computer, one substitution is to scan the answer sheets and have evaluators read the image files through the computer network. In order to understand evaluators’ eye movements and scoring stability, the evaluators’ eye movements were monitored while scoring paper-and-pencil items, and while scoring computer items with or without an eye tracker.
The results showed that the evaluators with less computer experience, and those among the older age groups exhibited more frequent eye blinking, especially while the items were being changed. The oldest age group had the highest eye movement activity. All three types of scoring showed very short gazing times on small items, and longer gazing time when shifting to larger items. Criteria for evaluation, and the format of answers played critical roles in determining scoring stability. Stability was highest for coding items, followed by items dealing with specialized terms, and the lowest stability when scoring mapping.
參考文獻： 中國教育考試網，網上閱卷系統，2005年8月28日取自 http://www.neea.edu.cn/ksxxh/wsyj.htm
王思宏，眼睛疲勞，財團法人尹書田紀念醫院書田泌尿科眼科診所。2005年8月28日取自http://www.shutien.org.tw/s009_034.htm
王秋原、李明燕（2002），地理科電腦螢幕閱卷研討會專題報告，大學入學考試中心。
王瑜昆，網上閱卷：尋求最大公正！中國教育報，2001年7月11日，取自http://www.jyb.com.cn/gb/2001/07/11/zy/5-zszk/1.htm
李明燕（1993），八十二學年度及歷年聯考地理科試題分析，大學入學考試中心。
林房儹（1996），藉由眼球運動探討視覺搜尋型態與視覺疲勞之研究，國立台灣工業技術學院技術研究所工業管理學程博士論文。
計世網，高考開鑼 金蝶中間件支稱網上閱卷系統，2005年6月8日，取自http://www.ccw.com.cn/news2/mfr/htm2005/20050608_11OGD.htm
張春興（1981），大學聯考與偏倚學風，聯合報，1981年9月28日。
陳明德（1997），螢幕文字/背景色彩組合與相關作業特性對視覺績效與視覺疲勞影響之研究，國立台灣工業技術學院管理技術研究所碩士論文。
華洋（1999），電腦輔助人工閱卷實驗計劃，大學入學考試中心。
詹永舟（1998），瞳位追蹤應用於眼控系統及眼球動態量測儀器之製作與分析，逢甲大學自動控制工程學系碩士論文。2005年8月28日取自http://ace136.auto.fcu.edu.tw/eyetrack/paper2/2-11-5.htm
石獅日報，福建高考網上閱卷展開，2003年6月23日，取自http://www.ssrb.com.cn/big5/content/2003-06/22/content_40746.htm
藍偉碩（1997），應用眼球運動參數衡量心智負荷，國立台灣工業技術學院管理技術研究所工業管理學程碩士論文。
Chung, Gregory k. w. k.; O’Neil, Harold F,. Jr. (1997), Methodological Approaches to Online Scoring of Essays (CSE Technical Report 461), National Center for Research on Evaluation, Standards, and Student Testing. (ERIC Document Resume ED 418101)
Fouladi, Rachel T.; McCarthy, Christopher J.; Moller, Naomi P. (2001), Paper-and-pencil or online? Evaluating coping and attachment measures, The Annual Convertion of the American Psychological Association, San Francisco. (ERIC Document Resume ED 456386)
Natal, Ｄottie (1998), On-line Assessment: What, Why, How, Technology in Education Conference, Santa Clara Convention Center, California. (ERIC Document Resume ED 419552)
Solano-Flores, Guillermo; Raymond, Bruce; & Schneider, Steven A. (1997）Computer-assisted Portfolio Scoring: Can Technology Enhance the Process of Scoring Portfolios?, The Annual Meeting of the American Educational Research Association in Chicago IL (ERIC Document Resume ED 411310)
Vantage Laboratories, 2005年8月28日，取自 http://www.vantage.com/