交互音乐系统:传感、映射与可演奏性
约 14 分钟
交互音乐把动作、触摸、生理或环境信号映射为声音。传感器越多不等于更有表现力;关键是延迟、稳定、可学习的映射,以及表演者能否预期动作结果并形成技巧。
输入校准
记录传感器范围、噪声、漂移和采样率。不同表演者身体尺度不同,需个体校准或自适应范围;越界和断线进入明确默认状态。
映射层
直接一对一映射易理解但表现有限,多对多映射丰富却难学习。把动作分成连续控制、离散触发和模式切换,减少意外耦合。
延迟与抖动
总延迟包括采样、网络、分析、音频缓冲和发声。平均低延迟若抖动大仍难演奏;报告分布与最坏值,不只均值。
反馈
视觉、触觉和声音反馈让表演者知道系统状态。模式切换若无提示,会产生“同一动作突然不同声音”的不可控感。
失败设计
网络断开、传感器卡值和CPU过载时保持安全音量、可手动接管并记录错误。现场系统应支持降级,不让一个花哨模块拖垮全场。
排练时记录动作到声音的延迟分布、误触率和模式切换次数。若用户总靠看屏幕才能控制,说明声音或触觉反馈不足。可访问性测试应包含不同动作范围与经验水平,而不只测试作者自己。
项目:做一个两输入三参数乐器,邀请新用户练10分钟,记录其学习曲线、错误和映射修改。
小纸条
交互音乐系统为何不能只追求传感器数量和映射复杂度?