《Organised Sound》:Telling life stories through algorithms embedded in compositional processes
编辑推荐:
本文中,研究人员考察了如何将算法嵌入器乐与电声作曲实践(instrumental and electroacoustic compositional practices),以在音乐材料与结构中组织取自音乐之外(extra-musical)环境与宇宙语境的数值数
本文中,研究人员考察了如何将算法嵌入器乐与电声作曲实践(instrumental and electroacoustic compositional practices),以在音乐材料与结构中组织取自音乐之外(extra-musical)环境与宇宙语境的数值数据。研究人员探索音乐与周遭环境之间的此类物质-符号(material-semiotic)交换,以对 Ursula Le Guin 所提示的生命故事之物质进行声音重构,这些故事挑战人类中心主义叙事。以听觉方式讲述生命故事的目标,既在于探索 Baradian 新物质主义女性主义对技术的部署,也在于鼓励如 Donna Haraway 所提出的关于人类与其环境之间关系的形式、原因和效果的对话与反思。通过将环境与天文数据整合进音乐材料与结构、实时声音处理(real-time sound processing)、八声道空间化(octophonic spatialisation)和生成式交互(generative interactions),本文所创作并讨论的作品揭示了植物物种在地球上的迁移、星系形成、鸟类飞行的物理动力学以及海洋污染的声学纹理(sonic textures),创造不同媒介之间有意义的交汇,以考察在超媒体(hypermedial)环境中发展的声音实践如何叙述非人类(more-than-human)过程。
研究背景与问题:论文以 Ursula Le Guin 的 carrier bag theory of fiction、Donna Haraway 的 more tentacular life story 与 Barad 的新物质主义(new materialism,强调物质能动性与物质-话语实践的理论取向)为线索,讨论如何通过嵌入作曲过程的算法,把来自音乐之外(extra-musical)的环境与宇宙数值数据组织进音乐材料与结构。Le Guin 的 carrier bag 拒绝英雄式、征服式工具使用,主张叙事作为容器;Haraway 要求更触手状、非二元的生命故事;Barad 将重构(reconfiguration)理解为重做物质-话语装置。Havelková 提出超媒体(hypermedial,指声音与图像等媒介批判性重组而非简单并置)设置,并把声音比作交换机,改变图像意义。作者的问题在于:如何以声音讲述生命故事并挑战人类中心主义叙事,同时避免把新物质主义理论中的共振、振动隐喻用于新自由主义和生物政治资本主义,也避免把声化(sonification,将音乐系统之外的数据映射为声音)简化为数据依赖、客观、系统、可复现的过程。因此,研究人员将实践称为重构过程(reconfiguration processes),强调 Baradian 新物质主义方法论,而非数据依赖的可复现声化。
研究人员创作并讨论四部作品:Landslide、Virtual Galaxy Simulation、Volo degli Uccelli 与 The Listening Canvas。其结论是,通过环境与天文数据、实时声音处理、八声道空间化与生成式交互,声音实践可在超媒体环境中重构非人类过程,讲述植物迁移、星系形成、鸟类飞行与海洋污染等生命故事。重要意义在于,将算法嵌入音乐实践以颠覆传统生态叙事,鼓励对生态事项的意识和批判反思,并推进声音创造的环境可供性。
关键技术方法:将音乐外数值数据嵌入算法作曲。Landslide 用玉米粒、松果/针叶和岩石经接触麦克风(contact microphones)实时处理,以七个节奏细胞、拉丁方(Latin square,每行每列各元素出现一次的方阵)和 7×7 幻方(magic square)生成节律排列。Virtual Galaxy Simulation 采用 ASURA 星系形成模拟,选 29 帧,用 AstroImageJ 光谱分析,坐标映射为 Hz 与微音体系,形成六音列和旋转数组,结合 Lachenmann 声音类型与八声道电子。Volo degli Uccelli 以 da Vinci 鸟飞草图的 A-B-C-D-E-F-G-M-N-P 十字母构建十音级系列,用拉丁方、转位和节奏序列。The Listening Canvas 用压电换能器(piezo transducers)捕获触摸/发声,实时移调、音频到 MIDI(Musical Instrument Digital Interface)和合成,再经换能器扩散。数据来源:ASURA 模拟、da Vinci 草图、环境/宇宙数据;无临床样本队列。
研究结果:
植物物种的非交流艺术(Vegetal species’ non-communicative art):Landslide(2023)针对植物物种在南、北半球的迁移、松树造林、坡地耕作导致的滑坡与种子迁移等故事。作品让玉米粒、松果和针叶、岩石在打击乐器上发声,接触麦克风捕获并实时滤波、升降音高,摄像机俯视投影突出植物与矿物材料及演奏者双手。叙事分七个连续阶段,算法上创建七个节奏细胞,构成渐进系列,并使用拉丁方与 7×7 幻方生成组合。结论是,不以破译植物语言为目标,而以植物和矿物材料的物质性发声,声学重构植物迁移与土壤侵蚀,突出植物、岩石生命及人类影响,体现新物质主义自然-文化实践和超媒体手段。
半途遇见宇宙之声(Meeting the sound of the universe halfway):Virtual Galaxy Simulation(2023/24)为合奏、八声道电子与视频投影而作,基于 ASURA 星系形成模拟。研究人员选取 29 帧,用 AstroImageJ 光谱分析,将坐标值视为 Hz,映射到微音体系,选取六个六音列,并作旋转数组。形式分三部分,对应粒子运动模式,使用 Lachenmann 第二、第四、第三声音类型;电子部分用呼吸声、猫的呼噜声与乐器录音经频谱修改,八声道空间化与图像同步。结论是,挑战科幻电影音乐式天文数据传播,重构宇宙数据,邀请听众适应非人类时间体验。
鸟类的动能文学(Bird’s kinetic literature):Volo degli Uccelli(2024/25)为管弦乐而作,受 Le Guin 企鹅语言芭蕾与 da Vinci 鸟飞草图启发。乐器映射鸟体:右翼弦乐、左翼木管、躯干尾头铜管、风迹打击。字母 A-B-C-D-E-F-G-M-N-P 形成十音级系列,经拉丁方旋转、转位和节奏拉丁方组织。音乐叙事涉及上升、对风变化的动能响应与下降。结论是,声化鸟飞轨迹,讲述动物生命,解读非人类运动为意义痕迹。
聆听海洋废物(Listening to sea waste):The Listening Canvas(2024)为 NIME 2024 声音装置。帆布展示回收材料,泡沫片悬挂在渔网内;观众以手、植物茎叶触摸或对帆布发声,压电换能器捕获,实时升 27 半音、音频转 MIDI,最多在 20 毫秒窗口内 4 次,再下移 13 与 7 半音触发合成,并转回频率经换能器扩散。作品关联 David Tudor 的 Rainforest IV、Barad 对超声/回声的讨论及 Leonora Carrington 的 The Hearing Trumpet。结论是,挑战水为自然、废物为文化的二元,促进实验声音制作与主动聆听;作品不声称直接与地球对话,并引用 Haraway 关于 Gaia 与 stay with the trouble 的观点。
讨论部分总结:算法在本文各作品中被嵌入作曲过程。前三部作品重访计算机出现前已发展的算法作曲方法,如二十世纪作曲家采用的序列策略;音乐软件开发者可借此发展支持序列策略算法作曲的工具,以类似方式回应环境关切。最后一部作品通过实时数字处理和交互式 MIDI 接口,贡献了具有生态意识的算法声音处理方法,展示 DIY 交互接口让观众参与声音制作与生态反思的潜力。本文实践建立音乐理论与数学方程之间的关系,以将音乐外语境中的数值数据组织进音乐材料与结构;音乐与周围环境的物质-符号交换以 Baradian 意义对图像进行声音重构,参与超媒体过程,其中声音颠覆视觉意义生产,讲述值得讲述的故事。通过环境与天文数据重构、实时声音处理、八声道空间化和生成式交互,作品揭示植物物种迁移、星系创造、鸟类飞行物理动力学与海洋污染的声学纹理,创造媒介交汇,以解明超媒体环境中创造意义的声音实践如何解读非人类过程。其作曲过程有助于发展将算法嵌入音乐实践的方法,颠覆生态问题传统叙事,鼓励意识和批判反思;音乐与声音实践者可进一步在作曲和表演实践中发展这些方法,推进声音创造的环境可供性。
研究结论翻译:在本文讨论的作品中,算法被嵌入作曲过程。前三个作品重访了应用计算机出现之前已发展的计算过程的算法作曲方法,例如二十世纪作曲家采用的序列策略。对进一步建立音乐理论与数学方程之间关系持续感兴趣的音乐软件开发者,可以借助这一贡献来开发支持序列策略中算法作曲的工具,作曲家可以探索这些工具,以类似本文所述实践的方式回应环境关切。最后一个作品通过实时数字处理和交互式 MIDI 接口的构建,贡献了一种具有生态意识的算法声音处理方法;这些技术发展于 20 世纪 60 年代,此后一直被作曲家探索。所发展的方法展示了 DIY 交互式接口在让观众参与声音制作和生态反思方面的潜力。本文讨论的实践提供了一种建立音乐理论与数学方程之间关系的方法,目标是将音乐外语境中的数值数据组织进音乐材料与结构中。这种音乐与周围环境之间的物质-符号交换以 Baradian 意义对图像进行声音重构,参与超媒体过程,其中声音颠覆视觉意义生产,旨在讲述值得讲述的故事,正如 Haraway 在反思 Le Guin 时提出的那样,这些故事鼓励就人类与环境之间关系的形式、原因和效果进行亟需的对话与反思。通过环境与天文数据的重构、实时声音处理、八声道空间化和生成式交互,所讨论的作品揭示了植物物种在地球上的迁移、星系的创造、鸟类飞行的物理动力学以及海洋污染的声学纹理,创造不同媒介之间有意义的交汇,以解明在超媒体环境中创造意义的声音实践如何解读非人类过程。本文讨论的作曲过程有助于发展将算法嵌入音乐实践的方法,目标是颠覆围绕生态问题的传统叙事,并鼓励对生态事项的意识和批判反思。音乐与声音实践者可以在关注该目标的作曲和表演实践中进一步参与和发展这些方法,推进声音创造的环境可供性。