从积极心理学视角探究大规模外语测试中作文评分员的情绪体验

《Sage Open》:Investigating the Emotional Experiences of Essay Raters in Large-Scale Foreign Language Tests from the Perspective of Positive Psychology

【字体: 大 中 小 】 时间:2026年10月22日 来源:Sage Open 2

编辑推荐:

  评分是大规模语言测试中一项关键但情感上要求苛刻的任务,因为评分员的情感体验可能影响评分质量、评分员福祉以及测试结果的公平性。尽管以往研究已认识到评分员认知过程在评分实践中的作用,但其情绪体验仍未得到充分探索,尤其是在大规模外语写作情境中。为填补这一空白,本研究

  
评分是大规模语言测试中一项关键但情感上要求苛刻的任务,因为评分员的情感体验可能影响评分质量、评分员福祉以及测试结果的公平性。尽管以往研究已认识到评分员认知过程在评分实践中的作用,但其情绪体验仍未得到充分探索,尤其是在大规模外语写作情境中。为填补这一空白,本研究借鉴积极心理学(Positive Psychology, PP),采用多方法质性设计,整合了叙事框架与回溯性访谈。研究对象为100名大学英语考试(College English Test, CET)作文评分员,其中研究人员有目的地选取了8人进行后续访谈。本研究旨在系统调查评分过程中评分员的情绪体验,并比较新手与经验丰富评分员所使用的情绪调节策略。研究发现,评分员体验到一系列复杂的情绪,包括正负效价(valence)和不同水平的唤醒度(arousal)。他们通过结合情绪导向型、能力导向型、情境导向型和评价导向型策略来调节这些情绪。值得注意的是,新手与经验丰富评分员在策略使用上表现出不同的模式。这些发现加深了对高风险二语(L2)评估中评分员情绪的理论理解,并为大规模测试项目中的评分员培训和质量保证提供了实践启示。

论文解读文章

一、研究背景与问题提出

在大规模语言测试中,作文评分是一项关键任务,其本质是基于评分量表和个人经验对考生表现做出价值判断的决策过程。然而,这一过程易受多种因素干扰,评分员本身即是产生评分变异的主要来源之一。以往关于评分员的研究虽涵盖了评分量表使用、评分员背景差异及培训效果等方面,却未能系统关注评分员的情绪体验。
情绪被视为决策行为的主要驱动力。积极情绪可增强认知灵活性和创造力,而消极情绪则常引发更严谨、系统的分析。在中国,大规模外语考试(如大学英语考试CET)普遍采用集中式会议评分,具有周期长、考生数量大的特点。例如,广东CET阅卷中心单次评卷工作量可持续约九天。在认知负荷和社交互动的双重压力下,评分员极易产生情绪波动,这可能与策略使用变化和评分变异性相关联。因此,与其简单地筛选情绪稳定的评分员,提升其情绪自我觉察和自我调节能力更为关键。
针对上述研究空白,本研究以积极心理学(Positive Psychology, PP)为总体视角,以中国CET为典型案例,探讨大规模外语测试中评分员的情绪波动。PP强调情绪的动态性与相对性,主张在真实情境中同时考察积极与消极情绪。为使这一宏观取向更具操作性,研究进一步引入控制-价值理论(Control-Value Theory, CVT),该理论具体阐述了情绪如何源于个体对控制和价值的评价,以及情绪如何被调节,从而为本研究识别和解读评分员的情绪体验提供了分析类别。

二、研究内容、结论与意义

本研究采用质性研究设计,通过两阶段顺序程序收集数据。第一阶段,参与者完成一份改编自Xin和Derakhshan(2025)的叙事框架问卷,涵盖个人背景、评分过程中的情绪体验及参与未来评分的意愿。第二阶段,进行半结构化访谈,深入探讨评分员的情绪体验、情绪调节策略使用情况及塑造这些情感过程的背景因素。
研究得出以下主要结论:首先,CET作文评分员在评分过程中体验到多种情绪,包括成就情绪、认知情绪和社会情绪三类,其中成就情绪种类最多、频率最高。其次,评分员采用了情绪导向型、能力导向型、评价导向型和情境导向型四类情绪调节策略,未观察到注意力导向型策略。第三,新手与经验丰富评分员在情绪调节策略的使用上存在显著差异:新手评分员倾向于使用情绪导向型和能力导向型策略,部分还使用了情境导向型策略,但无人使用评价导向型策略;而所有经验丰富评分员均使用了情绪导向型、评价导向型和能力导向型策略,无人使用情境导向型策略。
本研究的意义在于:将PP和CVT研究从学习者和教师扩展至此前未被考察的专业人群——语言测试评分员,检验了这些情绪框架在课堂环境之外的普适性;丰富了现有的评分员认知模型,揭示评分不仅是认知活动,更是由评分员评价所塑造的情感实践;通过比较新手与经验丰富评分员的情绪调节策略,识别了调节方式如何随专业经验发展,深化了对评分员专长、职业身份与情绪调节在高风险评估中相互作用的理解。

三、关键技术方法

本研究采用了以下主要技术方法:
  1. 1.
    叙事框架法:改编自Xin和Derakhshan(2025)的开放式引导问卷,包含四个第一人称项目,覆盖个人信息与评分经历、评分过程中的情绪体验、参与未来评分的意愿三个主题,用于从100名CET作文评分员(来自2025年7月广东CET阅卷中心)中高效收集初始情绪数据。
  2. 2.
    半结构化访谈:在叙事框架之后,从100名受访者中依据情绪丰富性和多样性标准,经两阶段筛选最终选取8名评分员(含4名新手、4名经验丰富者)进行约30分钟的录音访谈,以深入探讨情绪事件和调节策略。
  3. 3.
    主题编码分析:基于Pekrun(2024)的情绪与情绪调节策略分类体系,对从叙事框架和转录访谈中识别的260个意义单元进行独立编码,并通过协商共识解决约8%的编码分歧,辅以成员核查确保解释的信度和效度。

四、研究结果

评分员在评分过程中的情绪体验
结果显示,CET评分员体验到三类情绪:
  • •
    成就情绪:共7种,出现158次(占66.39%)。其中喜悦(58次,24.37%)和焦虑(51次,21.43%)最为常见。喜悦可能源于同伴互动,焦虑则与评分任务本身相关。焦虑程度在新手与经验丰富评分员间存在差异:新手评分员因缺乏经验,面对机构管理约束、学生模板化写作和高工作负荷更容易触发或加剧焦虑;经验丰富评分员虽也报告初期遭遇焦虑,但随着评分经验积累和对评分量表的深入理解,焦虑逐渐缓解。
  • •
    认知情绪:共4种,出现45次(占18.91%)。其中好奇心(15次,6.30%)比例最高。作为一种积极高唤醒情绪,好奇心促使评分员积极应对评分挑战、吸收新技能和视角、增强元认知意识,并从探索多样化学生作答中获得成就感。经验丰富评分员的好奇心表现为一种更精炼的选择性智力兴趣。
  • •
    社会情绪:共3种,出现35次(占14.70%)。许多评分员对模板化作文表达了愤怒(13次,5.46%),认为其掩盖了学生的真实语言能力并影响评分准确性。大多数评分员还对评分员培训表达了感激(12次,5.04%)和认可(10次,4.20%),认为培训有助于更准确地理解评分量表。新手和经验丰富评分员对培训的表述反映了不同方面:新手强调培训帮助建立信心和准备实际评分任务;经验丰富者则强调培训对维持评分质量的持续必要性以及作为校准和同行交流平台的价值。
新手与经验丰富评分员在消极情绪调节策略上的差异
分析揭示了四类情绪调节策略:
  • •
    情绪导向型策略:直接调节情绪本身,如休息放松。所有新手和经验丰富评分员均使用了此策略。
  • •
    能力导向型策略:提升决定评分员主动能动性的评分能力,如主动与主管沟通反馈、分析基准论文。所有新手和经验丰富评分员均使用了此策略。
  • •
    评价导向型策略:调整引发特定成就情绪的主观控制感和价值评价。所有经验丰富评分员均使用了此策略,但无新手评分员使用。例如,Cindy描述了她对评分工作的价值评价随就业状态变化而发生转变;William则将其重新定义为对学术界的贡献。
  • •
    情境导向型策略:回避易引发消极情绪的情境。仅两名新手评分员(Amy和Jason)使用了此策略,无经验丰富评分员使用。
注意力导向型策略未被观察到,研究者认为这可能归因于任务生态:评分员的消极情绪并非源于离散的可识别外部触发因素,而是在持续的认知投入中逐渐累积,缺乏可供策略性部署的清晰注意目标。

五、讨论与结论总结

讨论部分总结
研究者将发现置于理论框架中进行了解读。关于情绪体验,成就情绪占比最大,表明评分员主要通过专业能力和绩效标准来解读评分任务。焦虑可通过CVT理解为低控制感与对潜在评分错误的高负面价值评价的结合。喜悦反映高控制感与对评分活动的正面价值评价,其社交维度与同伴互动相关,表明协作氛围是积极情绪的重要资源。好奇心的体验说明认知情绪在评估情境中发挥作用——学生作文中的多样性和意外性创造了信息不协调,激发评分员更深层次的文本参与。社会情绪揭示了评分员情绪体验的深层制度性特征:对模板化作文的愤怒反映了评分员对公平准确评估目标的受阻感知;对培训和监控机制的感激与认可以及焦虑与羞愧的双重影响表明,制度环境通过认知和情感两条途径塑造评分行为。
关于情绪调节策略差异,新手评分员主要依赖情绪导向和能力导向策略,这可通过CVT理解为在即时情感反应层面或通过技能发展增强控制感来管理情绪。无新手使用评价导向策略,这种最复杂形式的情绪调节预设了经验和元认知意识。部分新手使用情境导向策略(如回避)反而限制了情绪成长和技能发展的机会。相比之下,经验丰富评分员独特地使用评价导向策略,反映了他们与情绪体验关系的质的转变——他们似乎重构了对评分任务意义和价值的基本评价,这可通过职业身份形成理论来理解:通过长期参与评分活动和制度规约,经验丰富评分员已将评分角色融入其核心身份,从而能够通过身份一致的重评来调节情绪。
研究结论翻译
本研究采用质性研究设计,探究了CET作文评分员的情绪体验。通过将积极心理学(PP)的理论视角应用于CET评分员情绪研究,本研究将情绪研究的范围从一般外语教育领域拓展至语言评估领域,从而为该领域提供了新颖的理论视角。此外,通过将控制-价值理论(CVT)与评分的社会认知模型相结合,本研究系统考察了评分过程中评分员的情绪体验及其相应的调节策略。这一整合框架不仅验证了基于CVT的一般情绪分类学在评分员群体中的适用性,而且促进了心理情绪理论与语言评估实践之间有意义的跨学科对话。
除理论贡献外,本研究对评分实践,特别是评分员培训和质量保证领域,具有若干实践启示。第一,研究结果表明,情绪意识培训可以有意义地融入现有评分员培训项目中。第二,压力管理技巧可嵌入评分员的常规支持系统中。第三,反思活动可根据评分员的经验水平进行定制:新手评分员可从引导式反思日志中受益;经验丰富评分员则可参与同伴反思会议,分享管理情绪需求的策略。
相关新闻
生物通微信公众号
微信
新浪微博

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号