音乐科技0772023·4在音乐科技领域,越来越多技术的交叉使交互音乐创作有了更多的可能性。这些可能性既体现在多元化的交互音乐类型上,也体现在创新的设计理念和丰富的艺术表现力上。托德·温克勒(ToddWinkler)在《互动音乐作曲:Max的使用技巧和理念》一书中曾描述交互音乐系统的组成部分为“人为或乐器输入—计算机聆听和分析—计算机解释—计算机创作—声音的生成和输出”①。其中,人为或乐器输入与创作理念或者人类表演紧密相关,而末尾端的输出则代表了计算机对输入的响应结果。机器听觉技术在交互音乐系统中发挥了人机之间音频信息转换和分析的功能,对于计算机响应人为输入的结果至关重要。机器听觉也称作计算机听觉,是一个基于音频信号处理和机器学习对数字化声音与音乐的内容进①ToddWinkler,ComposingInteractiveMusic:TechniquesandIdeasUsingMax(Cambridge:MITPress,2001),pp.6-7.②李伟、李硕:《理解数字声音——基于一般音频/环境声的计算机听觉综述》,《复旦学报(自然科学版)》2019年第3期,第269~313页。行理解和分析的学科②,基于实时机器听觉的互动策略需要根据人机听觉的不同特性进行针对性设计,而这些策略设计也代表和承载了作品创作的核心理念。一、三个不同维度音频描述符的针对性在机器听觉中,音频描述符可以对音频特征进行不同维度的描述,包括物理维度描述符、感知维度描述符和认知维度描述符。无论是哪个维度的描述符,其存在的目的都是用于描述提取的音频特征或在提取特征之后对音频内容进行进一步分析。物理维度的描述符是描述声音信号特征的基础,它可以被用于所有关于声音物理信号的领域;而感知维度描述符和认知维度描述符则是在物理维度基础上进一步进行整合和拓展的描述交互音乐中基于实时机器听觉的互动策略研究INTERACTIONSTRATEGIESBASEDONREAL-TIMEMACHINELISTENINGININTERACTIVEMUSIC摘要:人的自身经验及大脑潜意识等因素会直接影响人对声音内容的理解,机器听觉则代表从机器的角度分析和理解接收到的声音内容,基于实时机器听觉的交互音乐创作需要同时从人类与机器两个角度进行双向考虑,不仅需要构思完整的互动行为,如何策划互动表演和如何符合互动的审美等也是作曲家或艺术家需要考虑的因素。通过多个案例,从不同维度分析基于实时机器听觉的互动策略设计,以探讨不同互动策略下音乐表现的特征与意义。关键词:交互音乐;实时机器听觉;互动策略中图分类号:J639文献标识码:A文章编号:...