非模态(amodal)音频-激光合成:以活力情感(vitality affects)与Phosphene为基础的跨媒介作曲框架

《Organised Sound》:Amodal approaches to audio-laser synthesis

【字体: 大 中 小 】 时间:2026年10月01日 来源:Organised Sound 0.5

编辑推荐:

  音频-激光合成(audio-laser synthesis)——其中音频速率电压同时驱动激光投影并产生声音——为跨媒介作曲(intermedial composition)提供了一种独特范式:在此实践中,问题不在于如何连接两个媒介流,而在于如何用被转导为声音与

  
音频-激光合成(audio-laser synthesis)——其中音频速率电压同时驱动激光投影并产生声音——为跨媒介作曲(intermedial composition)提供了一种独特范式:在此实践中,问题不在于如何连接两个媒介流,而在于如何用被转导为声音与光的源信号进行作曲,且不优先任何一方。作为回应,本文调动情感理论(affect theory)与心理学家Daniel Stern的发展性“活力情感”(vitality affects),将其作为该媒介的作曲框架。通过对音频-激光合成技术美学(techno-aesthetics)的综述以及研究人员的基于实践的研究——包括设计并演奏音频-激光合成器Phosphene——研究人员发展了分析-作曲策略,这些策略将非模态调制(amodal modulation)置于领域特定美学之前。
非模态音频-激光合成:技术美学、活力情感与Phosphene作曲方法

研究背景与问题。视觉音乐话语目前由跨模态联觉(cross-modal synaesthesia)表达主导,其中一种感官模态接收的数据被转码并由另一模态接收。此类对“翻译”的依赖隐含维持图像与声音的分离,限制视听“耦合”(coupling)与同步性(synchresis)。音频-激光合成(audio-laser synthesis)指音频速率电压同时驱动激光并声化的实践,属于信号基媒介(signal-based media)传统,其中视频与音频可被视为可互换电压。现有术语如“vector synthesis”偏重图形输出,“audio-controlled lasers”保持声音优先,均描述不充分。因此研究人员提出以情感理论(affect theory)与Daniel Stern的发展性“活力情感”(vitality affects)为框架,发展非模态(amodal)分析与作曲策略,以解决统一信号架构中感知统一与信号统一的匹配问题,并避免领域特定美学优先。研究人员综述信号基媒介技术美学,定义音频-激光合成的技术条件,设计并演奏自定义音频-激光合成器Phosphene,开发分析方法。结论是,非模态调制优先于领域特定美学,音频-激光合成可作为真正跨媒介领域,其中调制的动觉强度成为单一审美遭遇。其意义在于为信号基媒介中的视听同步性提供技术范式与美学范式,并将技术限制重新置于核心美学关切。

关键技术与方法。研究人员以实践为基础,结合技术美学分析与艺术实践。设计并演奏Phosphene,一种定制虚拟模块化激光合成器,含40余个专为音频-激光合成设计的模块;所有模块为双声(duophonic),匹配激光投影仪XY配置,并以相位器(phasor)为中心。主相位器作为唯一时间真值源,提供0–10 V斜坡,使形式、调制与同步程序化派生,确保严格周期性与相位锁定。通过单/多激光投影、RGB色彩生成、扩散与感知阈值实验,发展分析-作曲策略。无样本队列来源。

研究结果。
1. Introduction(引言):通过术语辨析,研究人员提出“音频-激光合成”以描述音频速率电压同时驱动激光并声化的实践,认为该术语优于偏重图形的“vector synthesis”与保持声音优先的“audio-controlled lasers”,强调整合作曲方法与非模态调制,而非“看到声音”等中介过程。
1.1 Amodal synaesthesia and vitality affects(非模态联觉与活力情感):通过理论分析Daniel Stern与Brian Massumi,得出非模态联觉先于感官分化,婴儿可将声音与光事件感知为统一体验;活力情感以涌动、消退、爆发、急冲等动态动觉术语描述“感受形式”。Ganzfeld实验表明纯视觉可表现为纯动觉。该框架为视觉音乐分析提供基础。
1.2 Vitality affects as a compositional framework, synchresis and source bonding(活力情感作为作曲框架、同步性与源绑定):通过将活力情感用于技术美学与分析词汇,研究人员以调制而非感官现象发展美学;借鉴Gilles Deleuze的“信号质材料”(signaletic material)与Denis Smalley的频谱形态学(spectromorphology),提出音频-激光合成的“源绑定”三元内在–外在链接;技术限制成为核心美学关切,分析框架不替代技术调谐。
2. Techno-aesthetics of audio-laser synthesis(音频-激光合成的技术美学):通过Gilbert Simondon的技术美学,沿机械、扩散到感知的轨迹映射该媒介,认为审美可用于优化系统,线性轨迹仅为启发式,实际经验是递归过程。
2.1 Signal-based media(信号基媒介):通过文献与媒介考古,得出信号基媒介将电信号作为主要“艺术制作材料”,模拟视频本体论为运动,图像是“wherewhen”,即成为而非存在;对“死”媒介的重新激活可批判并扩展现代技术美学。
2.2 Audio-laser synthesis(音频-激光合成):通过技术分析,得出该实践基于书法矢量投影,具有五信号架构(X、Y、R、G、B),颜色与空间坐标同为结构参数;激光与音频均为大气媒介,扩散根本。其定义特征不是激光或音频单独美学,而是跨媒介融合创造的气氛。
2.3 Transduction and coupling(转导与耦合):通过分析转导限制,得出高频转导差异和结构不对称限制同步性;耦合不是同步分离流,而是维持固有统一以对抗硬件不对称与感官限制。音频-激光作曲最好理解为通过信号中介的三元过程,不追求严格对等。
2.4 Radiance(辐射):通过分析色彩生成与大气扩散,得出RGB输入可接受连续波形,颜色可作为音频速率信号声化;将颜色折叠入“辐射”,涵盖颜色、亮度与体积扩散。亮度先于特定感知,辐射统一异质元素并耦合声音与光,扩散既是特征也是挑战。
2.5 Projection(投射):通过感知阈值分析,得出亮度与幅度引发内脏具身反应;投射承认个体感知在构建叙事与形式中的角色。听觉可分辨2–3 ms间隙,视觉固定约需100 ms,激光束以音频速率追踪,使视觉生理上无法解析轨迹而融合为稳定图像;该差异将光效应艺术(op-art)的感知阈值扩展到多模态与非模态框架。
3. Audio-laser composition: methods and challenges(音频-激光作曲:方法与挑战):通过研究人员实践,设计Phosphene,虚拟模块化激光合成器,40余模块,双声,相位器中心,主相位器0–10 V斜坡,确保周期性与相位锁定。
3.1 Amodal compositional framework(非模态作曲框架):通过实践,作曲策略调谐非模态行为,活力情感以无主语现在分词表达;来源倾向描述周期信号的内在行为倾向,调制将其转化为活力情感,目标是匹配信号统一与感知统一。比较闭眼听、遮耳看与统一体验,若信号在一模态中引人而在另一模态惰性,则调整倾向或调制。
3.2 Colour(颜色):通过色彩映射策略,避免跨模态联觉的任意翻译,将颜色作为调制的结构表达;策略包括相位派生颜色、位置派生颜色、调制派生颜色,可组合使用。颜色作为辐射组成部分,由信号内部张力驱动,使压缩等行为同时表现为几何收缩、频谱增亮与色彩向单色集中。
3.3 Temporal zones(时间区域):通过作曲发现持续区、形态区与体积区。持续区以稳定和时长为特征,与持续无人机耦合,可产生冥想与恍惚;形态区以连续流变为特征,声音音色(timbre)与视觉形状关联明显;体积区以脉冲与空间纹理为特征,从图形退向光声爆发,转向节奏逻辑。区域间转换是中心挑战。
3.4 Multi-laser composition(多激光作曲):通过Third State、Smoke Screen与Akoniton等作品,多投影仪可分层为复调实体,时间偏移与轻微失谐形成空间对位,类似卡农;独立声部产生发展张力;相互依赖通过吸引与排斥力将整个音频-激光场作为涌现有机体。目标是以动觉强度饱和感觉,抵抗解析。
4. Conclusion(结论):文章提出非模态联觉作为音频-激光合成的作曲框架,通过技术美学分析与艺术实践方法论。作为信号基媒介子集,该领域提供极限案例,媒介分离仅存在于感知中。挑战在于使感知统一匹配信号统一,凸显作曲家在构建活力情感中的主动作用。该框架提供分析词汇与实践方法论,将音频-激光合成定位为真正跨媒介领域,其中调制本身的动觉强度成为单一审美遭遇。结论翻译:本文提出了非模态联觉作为音频-激光合成的作曲框架,通过对该艺术形式的技术美学分析(第2节),并概述了研究人员自身从艺术实践中涌现的一些作曲方法论与技术(第3节)。作为信号基媒介的子集,该领域为视听实践提供了一个极限案例,其中媒介分离仅存在于感知中。这带来的挑战——使感知统一匹配信号统一——凸显了作曲家在构建活力情感中的主动作用。此处提出的作曲框架为该工作提供了分析词汇与实践方法论,将音频-激光合成定位为真正的跨媒介领域,其中调制本身的动觉强度成为单一的审美遭遇。
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号