《Organised Sound》:Touching audiovisuality through texture: Embodiment and immersion
编辑推荐:
本研究探究视频音乐(videomusic)与视听表演中的多感官聆听、生态方法论与具身性(embodiment)。研究扎根于实践导向型研究、自传式民族志(autoethnography)与现象学,探讨声音、影像、身体与主体间性遭遇在空间、场所与环境三元组中的交互
本研究探究视频音乐(videomusic)与视听表演中的多感官聆听、生态方法论与具身性(embodiment)。研究扎根于实践导向型研究、自传式民族志(autoethnography)与现象学,探讨声音、影像、身体与主体间性遭遇在空间、场所与环境三元组中的交互如何制约跨模态感知(transmodal perception)。研究辨识 ],
识别出场域音响(scenophony)、情感(affect)与想象作为沉浸的构成性向量,凸显物理场所与虚拟环境之间的可渗透性——在此类环境中感觉边界趋于消解。同步整合(synchresis)被分析为视听跨模态性的首要机制,而居 habitation过程则促成技术装置(dispositif)向栖居场所的转化。质感(texture)被确立为组织感官体验的基础性作曲原则,研究通过对Nuées(2016)的分析,论证这些动态机制如何通过感知偏离(perceptual deviation)与运动中的跨模态质感得以运作。本研究将视听创作界定为一种生态实践,其塑造过程依赖于流动性、主体间性与情境化的空间栖居模式。
本研究以视频音乐与视听表演为研究对象,聚焦于多感官聆听、生态美学与具身性等核心议题,旨在回应声音、影像、身体及空间之间的结构性与物质性交互如何催生跨模态感知,以及触觉颗粒度与空间存在感如何作为构成性向量促成视听作品中的沉浸体验。
在理论背景层面,研究继承并拓展了梅洛-庞蒂(Maurice Merleau-Ponty)的现象学传统,将身体视为主动的、原初的经验场所。研究人员指出,在视听艺术中,感知者将声音的颗粒度或光的闪烁体验为物理感觉,此种过程跨越多种感官,使媒介融合为单一实体。在此基础上, immersion(沉浸)被理解为一种情境化现象:感知者与作品之间的感觉边界与注意力边界趋于消解,此种状态是对声景环境作出的具身性物理反应,将感知者锚定于当下时刻。研究进一步辨析了空间(space)、场所(place)与环境(environment)三个概念:空间被界定为抽象的、物理的或几何的延展,即装置的技术与建筑性布局;当空间被注入人类经验、在场感与情感意义时,便转化为场所;环境则被视为动态的、关系性的整体,是振动、媒介与身体持续交织的网络,而非孤立对象的被动容器。
在方法论层面,本研究采用实践导向与自传式民族志方法,扎根于现象学反思、视听分析与特定场所(site-specific)实践。特定场所在此主要指户外场所中的创作过程。研究人员借鉴了瓦尔米尼(Vannini)的启发式与非表征性视角,以及杜威(Dewey)的实用主义美学,将艺术视为经验探究,知识从情境化行动中生成。研究强调艺术创作作为具身探究与启发式探索的场域,知识从创作经验中产生,涵盖排练、空间调适、观察、聆听会话、田野录音与影像素材采集等环节。研究人员将质感置于创作过程的核心,用以界定声音与视觉材料之间的关系,并 structuring注意力的模式。
在聆听实践的理论建构方面,研究提出聆听应被理解为一种关系性的、多感官的创造性实践,是栖居于空间的一种形式。此种生态 attentiveness 同时涉及自我、他者与周围环境,借鉴了瓜塔里(Guattari)的"三种生态学"与索洛莫斯(Makis Solomos)关于声音生态学的论述。索洛莫斯强调"不存在声音,只存在声音环境(sound milieus)",声音应被理解为一个关系网络:与其他声音、周围空间、聆听主体相关联。研究人员进一步援引了巴尔班蒂(Roberto Barbanti)关于声音与听者之间"本体论共存"(ontological co-existence)的概念,以及吉布森(James J. Gibson)的视觉感知理论,反对将大脑视为信息处理系统的计算模型,主张刺激并非待处理的对象。研究还联系了多感官感知与跨模态对应(crossmodal correspondences)的研究,主张感官模态在 lived experience 中动态交互,而非作为孤立通道运作。
在身体性与沉浸的分析部分,研究人员引入罗莎(Hartmut Rosa)的"共鸣"(resonance)概念,描述主体与世界之间同时受到影响并作出回应的关系性。研究指出,沉浸依赖于具身性作为感觉接收的首要场所,而身体自我需要沉浸性的感觉场域以激活其关系潜能。沉浸主要是一种对特定媒介化情境的接受性姿态,源于感知者先前的情感状态与身体条件,而非单纯由外部刺激或技术装置决定。研究援引了米歇尔·希翁(Michel Chion)的"视听契约"(audiovisual contract)概念,将其描述为一种象征性协议:感知者同意将声音与影像作为单一、统一的整体来 apprehend,即便这与现实世界并不对应。研究以舞池文化为例,说明声音扩散、节奏同步、投射影像与集体能量如何创造共享空间,使真实与虚拟之间的边界变得不稳定。
关于质感作为跨模态属性的讨论构成了研究的核心理论贡献。研究人员从词源学角度追溯了 texture(质感/纹理)源自拉丁语 textura(编织、交织)与 texere(编织、建构、相互连接),主张质感是一种连接声音、视觉、空间与触觉经验的跨模态属性。声音颗粒度可对应视觉颗粒度,密集的光谱饱和度可唤起视觉不透明度,而平滑的 drone 则可关联单色视觉场域或缓慢连续运动。研究强调身体是声音质感传播的容器,振动直接通过生物组织与感觉结构被感知。视觉刺激即便缺乏直接振动,仍能通过视觉质感触发触觉想象与本体感觉记忆。研究援引了塞奇维克(Eve Kosofsky Sedgwick)关于质感与感觉之间深刻亲密性的论述,认为当视听作品多感官地 engage 身体时,这种亲密性成为沉浸的催化剂。
研究以视频音乐作品 Nuées(《群云/鸟群》,2016)作为分析案例,深入探讨了感知偏离与运动中的跨模态质感。该作品于2017年在墨西哥音乐与声音艺术研究中心(CMMAS)的一次音乐会呈现经验尤为深刻地塑造了研究人员对沉浸的理解:演出场所一侧有大窗户,窗外日落时分可见飞鸟,与作品的视觉色调形成呼应,构成屏幕的视觉延伸;同时,窗外的鸟鸣、翅膀拍击声与环境噪音混入声音扩散系统,提供了近处、远处乃至更远处的深度声场感知,模糊了作品与世界的边界。这一经验体现了沉浸可通过相对简单的条件培育而成:关键在于保持对既有之物的 attentiveness,放弃刚性控制,适应场所的特殊性。在构图层面,该作品围绕两个主导质感层展开:颗粒状的翅膀拍击质感(由手套摩擦旋转自行车轮的录音创建)与雨质感(采自草地、森林地面、屋顶与外部金属屋顶的田野录音)。这些层次相互变形,从稀疏的翅膀拍击向密集堆积逐渐转化为雨声。行为同步整合(behavioural synchresis)从始至终 structuring 作品,影像从孤立鸟类转向密集群集。低频强化了这种渐进 intensification,生成不稳定的身体预期感。由近至远的变化被放大,通过与伊达·托尼纳托(Ida Toninato)合作的大混响空间中低音萨克斯风录音实现——麦克风的放置位置包括直接置于乐器之上以及远处空间中。声音能量与视觉运动密切互动,形成多种联觉关系(synchretic relationships),产生影像振动或对声音作出物理反应的 impression。重复、碎片化、突然对比与场景转换强化了这些对应关系。作品分为两个反复出现的主场景:天鹅试图起飞但失败,以及飞行的鸟群似乎在逃离。研究人员指出,尽管作品保持开放的解释空间,但其暗示了自由、欲望、恐惧与抵抗等主题。尽管《群云》借助视频音乐 discourse 有意 foreground 此叙事,但其目标仍在于培育跨感官模态的 ambiguity,而非追求图解式同步。
在结论部分,研究人员明确提出质感作为连接声音、影像、空间与触觉经验的跨模态结构,论证具身性与沉浸无法被还原为固定的作曲方法或技术公式,而应被理解为一种心智的、社会的与环境的 disposition,扎根于对世界的 attentiveness 与开放性。沉浸涉及 intensified 的感官 engagement 形式,其中身体与各种环境、氛围、主体间关系、媒介关系及媒介化空间相协调。在此意义上,沉浸式视听工作涉及一种生态性感知模式,关联于 care 的伦理视角与情境化的空间栖居方式。研究人员强调,对具身性与沉浸的通达始于多感官聆听与 lived experience,而视听创作将其 transposes 为共享的公共情境,邀请他人成为 present 与 engaged。《群云》的分析表明这些动态如何在实践中运作,'utilising' 感知偏离与运动中的跨模态质感。研究指出,艺术作品远非静态结果,而是一种知识生产模式,提供了一种检验感官经验的重要 inquiry 形式——其现象学、启发式与自传式民族志维度为考察视听经验如何在身体、环境与注意力模式的关系中运作提供了 grounded methods。研究认为,此框架直接重新概念化了媒介关系,论证了跨媒介性(intermediality)如何在实践中运作,将声音、影像与物理空间统一为单一的、可渗透的感官环境。研究人员提出,未来研究可通过纳入受众导向的感知研究、空间音频环境、虚拟与混合现实系统以及更多场景声景学(scenophonic)作曲形式来拓展这些反思,并强调音乐学家、视频音乐学者与实验电影理论家有必要将类似的分析框架应用于当代 productions。