综述:下一代虚拟消费者感官与行为科学:虚拟现实眼动追踪的演变角色——一个图形视角

《Acta Psychologica》:Next-generation virtual consumer sensory and behaviour science: The evolving role of virtual reality eye-tracking—A graphical perspective

【字体: 大 中 小 】 时间:2026年03月28日 来源:Acta Psychologica 3.8

编辑推荐:

  人类-食品交互(HFI)研究日益依赖于精确的感官测量。然而,传统方法往往难以将视觉影响从多感官整合中分离出来,也难以在受控条件下重现情境丰富的饮食相关条件。随着数字感官科学(DSS)的出现,虚拟现实(VR)和眼动追踪(ET)越来越多地被用于研究感官和行为反应。

  
人类-食品交互(HFI)研究日益依赖于精确的感官测量。然而,传统方法往往难以将视觉影响从多感官整合中分离出来,也难以在受控条件下重现情境丰富的饮食相关条件。随着数字感官科学(DSS)的出现,虚拟现实(VR)和眼动追踪(ET)越来越多地被用于研究感官和行为反应。VR并非作为进食的替代品,而是可以被视为一种感知-认知模拟工具,允许操纵视觉和情境线索,以测试与注意、期望、决策和食欲相关过程相关的假设。本综述介绍了一个基于神经美食学(Neurogastronomy)和多感官整合(Multisensory Integration)的理论框架。在此视角下,虚拟用餐体验被理解为参与风味构建相关认知过程的感知模拟。神经美食学提出,风味是由多模态输入构建的“神经图像”。因此,VR可用于隔离这一过程中的视觉成分,帮助研究即使在没有化学味觉的情况下,“视觉风味”如何塑造期望和欲望。整合VR和ET为研究食品相关研究中的视觉注意和情境调节提供了一种结构化的方法论方法,包括仅靠传统测试难以解决的问题。未来方向包括经过仔细验证的临床应用,例如用于饮食障碍的线索暴露范式,以及将VR与ET结合用于行为理论测试。尽管标准化、多感官限制和网络病(cybersickness)等挑战仍然存在,但这些技术为未来关于饮食认知现实的研究提供了一个有前景的方向。
1. Introduction

传统感官分析方法在生态效度方面存在固有局限性,具体体现在逼真度(测试环境的真实感)和真实性(测试对真实行为的预测准确性)上。实验室测试虽提供严格实验控制,但常创造“情境真空”,剥离了日常生活中调节食欲和食物选择的环境线索,如社交氛围、光照和背景噪声。因此,孤立感官测试间获得的数据可能无法捕捉驱动自然进食行为的复杂多感官整合,导致实验室发现与实际消费者行为之间的差距。研究人员强调,需区分测试的物理位置和参与者体验的心理情境:虚拟现实(VR)情境生成虽仍是实验室过程,但将实验控制焦点从物理环境转向感知模拟,允许研究人员操纵“感知”现实而不牺牲标准化,同时理解“虚拟”情境是独特的认知模拟而非现实的完美替代品。数字感官科学(DSS)整合了先进技术以扩展感官分析,在受控条件下增加情境和视觉真实感,利用生物特征工具如眼动追踪(ET)和VR来捕捉实时消费者反应和注意的过程级指标。ET监测视觉注意和注视模式,提供个体如何与食物刺激互动的洞察;VR创建沉浸式“虚拟用餐体验”,定义为高保真感知模拟,旨在操纵与饮食决策相关的视觉和环境线索。通过系统变化视觉和情境线索,VR允许研究人员研究环境情境如何调节食物感知,即使化学感觉反馈有限或保持不变,其功能是感知-认知模拟而非进食的再现。DSS还包含其他生物特征测量,如皮电反应(GSR)、面部表情分析、脑电图(EEG)和心率监测,用于评估对食物的生理和情绪反应,并补充自我报告测量。整合人工智能和机器学习可能进一步支持感官数据分析,但预测性声明需谨慎评估。通过结合感官分析与DSS技术,研究人员可能能够在更具情境丰富性的环境中考察消费者决策,并支持产品开发的早期假设生成,但该方法改善真实行为预测的程度取决于研究设计和对适当非虚拟基准的验证。

1.1. The theoretical limitation in sensory science

VR和ET在感官科学中的采用不仅由技术可用性驱动,还源于对传统感官测试预测能力的持续担忧。食品感知中的“情境效应”表明食物的享乐价值与其消费环境密切相关。传统感官测试间旨在消除偏差,却可能无意中引入“隔离情境”,削弱情绪反应并改变决策策略。同时,VR诱导一种“双重现实”状态,用户认知上参与虚拟世界,同时在生理上锚定在物理实验室。这创建了一种独特的感知-认知模拟,大脑必须调和部分不匹配的感官输入。理解这种认知负荷对于解释VR内的ET数据至关重要,因为注视行为可能既反映与食物相关的处理,也反映维持虚拟模拟所需的努力。

2. Technologies shaping sensory testing: VR and ET

眼动追踪和虚拟现实是感官科学中的强大工具,增强了对食物感知和消费者行为的研究。ET追踪眼动以测量参与者关注食物特定方面的位置和持续时间,依赖于眼-心假设,假设视觉注视反映认知处理和注意分配。在食物背景下,这些指标揭示“注意偏向”——高热量或可口食物比中性刺激更快捕获视觉注意并维持更久。指标包括注视(持续凝视)和注视点(追踪运动位置),使研究人员了解什么最先吸引注意(如颜色、质地或包装)。热力图可视化注视强度和焦点分布,兴趣区(AOI)突出引起消费者关注的特定刺激成分。可穿戴眼动仪允许真实世界应用,而头戴式显示设备(HMD)增强沉浸式环境中的ET。这些测量可为产品开发、传播设计和基于注意与决策过程的理论驱动研究提供信息。VR将参与者沉浸于计算机生成的环境中,可模拟与食物相关的体验。在此上下文中,VR应被理解为“感知-认知模拟”工具,而非进食的字面替代;它不复制消化过程,而是模拟进食的前置条件:选择、渴望和预期唾液分泌。通过控制视觉输入,VR允许研究人员操纵食物的“神经图像”,测试视觉预期如何影响后续风味感知。VR通过允许在受控条件下操纵变量(如餐食情境、份量和食物呈现)来支持感官研究。临场感(在虚拟环境中的心理感觉)可能增加感知真实感,而交互性允许参与者动态与食物刺激互动。沉浸水平可影响用户对食物线索的响应,因此应作为相关设计参数在解释感知和行为结果时予以考虑。将ET与VR结合创建了一个用于研究人类-食品交互(HFI)的有用框架:允许在沉浸式环境中追踪注视模式,揭示视觉注意如何根据食物呈现、用餐情境和用户参与而变化。通过分析VR环境中的注视和注视点,可确定食物摆放、照明和周围环境如何影响感知和选择。从ET数据生成的热力图突出VR场景中参与者最关注的区域。通过引入视觉和情境线索同时维持实验室控制,该方法可能改善某些任务相对于传统隔间的情境和视觉真实感,但其与真实世界进食行为的关系需要明确实证验证。此外,可整合其他生物特征工具如皮电反应和心率监测以评估生理反应,支持消费者响应的多维分析。

3. Theoretical frameworks on neurogastronomy and multisensory integration in VR

为充分在感官科学中利用VR和ET,需超越描述性应用,将这些方法立足于既定心理学理论。两个框架对解释VR媒介的食物互动尤其相关:神经美食学(Neurogastronomy)和多感官整合(Multisensory Integration)。神经美食学提出风味不仅是食物的化学属性,而是大脑创建的“神经图像”,由味觉、嗅觉、触觉和视觉的输入绑定构建。在此框架下,VR可选择性地操纵该神经网络的视觉和情境节点。即使没有化学刺激,VR中的高保真视觉线索也可能参与与风味评估相关的期望和奖赏过程,这一模式强调了视觉在人类食物选择中的重要性,使VR成为研究“视觉饥饿”(由视觉触发的进食欲望)的有用工具。多感官整合理论解释大脑如何组合不同感官信号以形成连贯体验,关键原则是“视觉主导”或科拉维塔效应(Colavita effect),即视觉输入在冲突时往往覆盖其他感官。在虚拟用餐场景中,强烈的视觉线索可部分补偿某些用户减少的嗅觉输入,帮助维持感知合理性而不完全复制真实用餐。研究人员可通过有意制造不匹配(如改变VR中饮料的颜色)来测试消费者在判断风味质量时多大程度上依赖视觉而非期望。

4. Key components of VR integrated ET in sensory testing

VR系统与交互设计(VR System & Interaction Design)关注硬件和软件整合以创建沉浸式感官体验。头戴式显示设备(HMD)提供虚拟环境,混合现实(MR)相机融合真实与数字元素以增强真实感。眼动追踪相机捕获注视行为,追踪参与者关注食物刺激的位置和时长。附加工具如运动传感器、皮电反应(GSR)设备和面部表情读取器监测生理和情绪反应。游戏引擎如Unreal Engine和Unity可实现逼真的虚拟食物模拟,确保受控且动态的环境。注视与感官数据收集(Gaze & Sensory Data Collection)涉及追踪注视指标,如注视持续时间、扫视和瞳孔扩张,以评估消费者注意。行为数据,包括花费在食物特定属性(如颜色、质地或形状)上的时间,提供感知和决策的洞察。感官分析方法,如恰好正确(JAR)量表、勾选所有适用项(CATA)和快速属性测试(RATA),帮助评估虚拟环境中的味道、香气和质地。虚拟感官环境与味觉样本(Virtual Sensory Environment & Taste Samples)通过操纵餐食情境、份量和呈现风格在受控VR环境中模拟真实世界食物互动。包含真实味觉样本可能通过提供物理与虚拟元素混合的体验来增加情境真实感,但其对生态效度(在真实行为意义上)的贡献仍需实证验证。

5. Advancements in sensory testing and applications of VR and ET in HFI research

VR和ET的整合使感官测试和人类-食品交互(HFI)研究中的方法论发展成为可能。一个重要方向是沉浸式感官平台的开发,允许研究人员在虚拟环境中组合多种感官输入(如视觉、声音、触觉,有时包括嗅觉)。VR可模拟不同食物类型和餐食情境,而ET追踪视觉注意,支持分析感官和情境元素如何交互影响感知。这些沉浸式环境提供了操纵食物外观和用餐氛围等因素的灵活性,允许更详细地考察消费者在不同条件下的响应。这些平台可能实现视觉和化学感觉线索的解耦,这在物理环境中难以实现;例如,研究人员可呈现高热量餐食的视觉刺激同时提供低热量替代品的嗅觉或味觉反馈,从而有针对性地研究跨模态对应和视觉主导在风味感知中的作用。另一个进展是实时数据分析,允许在参与者与虚拟食物场景互动时立即收集数据。ET提供关于注意力焦点和时长的洞察,而VR可复制餐食情境和呈现风格。实时反馈使研究人员能够研究感官体验的展开过程,减少对回溯回忆的依赖。即时收集对不同食物刺激响应的能力支持更过程导向的研究设计。消费者行为研究从VR和ET整合中受益匪浅,这些技术允许模拟食物相关情境并观察视觉呈现、食物吸引力及情境因素如何影响消费者决策和感知。VR可创建高度受控的环境,系统操纵食物大小、颜色和形状等变量,特别适用于考察视觉吸引力或食物美学如何影响味道期望和整体评价。ET帮助研究人员精确定位食物哪些方面(如颜色或质地)捕获参与者注意,以及这些特征如何影响选择或拒绝特定食物的决策。在产品开发中,VR和ET越来越多地用于在上市前测试食品和包装设计。通过虚拟环境模拟产品体验,研究人员和制造商可评估消费者在受控条件下对新食品或包装设计的感知,尽管关于下游市场结果的声明需单独验证。研究人员还可探索不同食物呈现、包装设计或份量如何影响消费者偏好和购买意愿。此外,VR和ET可贡献于对食物情绪反应的评估。情绪在食物选择中起重要作用,因为人们常选择与积极情感相关的食物。通过将VR模拟与ET配对,研究人员可实时考察对食物刺激的情绪反应如何展开,有助于澄清不同食物体验如何与积极或消极情感关联,以及这些反应与食物选择的关系。VR和ET的整合也可能与食欲调节和临床导向研究相关。基于VR的线索暴露疗法(VR-CET)已被研究作为在受控环境中暴露患者于食物相关触发手段的方法,在某些情境下对暴食症状和食物相关焦虑具有潜在益处。眼动追踪可通过量化注意偏向(包括与渴望和回避相关的注视模式)增加有用的过程级层。例如,神经性厌食症患者常表现出对高热量食物的回避注视行为,而暴食障碍患者可能表现出延长注视(注意捕获)。

6. Research gaps & future directions with VR and ET in sensory testing

尽管VR和ET具有可观潜力,但它们受制于内在结构约束,这些约束应被视为方法学参数而不仅仅是技术限制。最显著的是当前VR技术固有的“多感官不协调”(Multisensory Dissonance):VR的视觉主导在触觉和嗅觉反馈缺失或不一致时可能造成脱节,导致临场感中断或食品感知的“恐怖谷”效应。一个主要局限性是缺乏标准化方法学,不同研究使用不同方案设计虚拟环境、校准ET系统和分析注视数据,这种变异性降低了可比性并限制了结果的可重复性。此外,硬件和软件整合挑战持续存在,不同VR和ET设备在精度、分辨率和校准要求上存在差异,影响数据一致性。参与者不适,特别是运动病(网络病,cybersickness),代表一种生理约束,可能显著影响感官数据。恶心已知会抑制胃节律并抑制食欲,因此即使是轻度网络病也可能混淆食物渴望研究中的解释,需要仔细筛选和缩短暴露时间,这又可能限制较长虚拟用餐模拟对真实世界行为的近似程度。实际约束依然存在:VR和ET技术的高成本可能限制可及性并阻碍大规模研究;数据复杂性造成困难,分析注视指标、生物特征响应和行为模式需要先进计算工具、透明流程和跨学科专业知识。未来研究将受益于从纯观察性研究转向假设驱动设计,明确利用VR和ET的功能。有前景的方向包括:(1)进一步标准化数字份量和照明协议以改善可比性和数据互操作性;(2)继续评估VR-CET结合眼动追踪在饮食障碍研究中识别并可能修正注意偏向的应用;(3)行为理论测试,利用VR作为实验平台用于如助推等框架,例如考察虚拟自助餐中的环境变化如何与注意和更健康选择关联。融合真实食物与虚拟环境的增强虚拟性(AV)整合可能改善某些方面的情境真实感,并需在与生态效度相关方面进行系统验证。机器学习与AI驱动分析可能支持自动化数据处理、模式检测和预测建模,但预测性声明应基于仔细的模型评估。触觉反馈的发展也可能扩展虚拟感官测试中质地相关操作的范围。

7. Conclusion

虚拟现实(VR)和眼动追踪(ET)的整合为在受控但情境丰富的环境中研究人类-食品交互(HFI)提供了有用的方法组合。当被视为感知-认知模拟工具而非真实进食的替代品时,VR可用于操纵与食品相关注意、期望和决策相关的视觉和环境线索。眼动追踪增加了过程级测量,有助于将注视动态与这些构念联系起来。同时,当前实施仍受限于不完整的多感官输入、网络病、硬件异质性、校准要求及有限的方法学标准化。因此,关于生态效度和预测准确性的声明应视为需要明确验证的实证问题。未来工作可能受益于更大的方法学协调、混合方法如增强虚拟性(AV),以及仔细评估临床导向范式,其中VR可提供安全且可控的刺激呈现。总体而言,本综述支持将关注点从视VR和ET为技术附加项转向将其用作基于心理学的工具箱,用于研究食品相关体验如何由注意和多感官线索塑造。
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号