不靠听觉合奏:把振动、触摸和视觉当作音乐材料的即兴装置
Audionce 针对聋人与听人共同即兴时听觉门槛过高的问题,选择把物理扬声器阵列与点云虚拟镜面放在同一交互场中,用身体移动与触摸扬声器驱动声音与视觉,最强证据是聋人设计者与听人可协同完成结构化即兴而不被察觉听力差异,主要代价是振动难以分辨音高与音量等细粒度差异且依赖持续学习与视觉补偿。
Audionce 针对聋人与听人共同即兴时听觉门槛过高的问题,选择把物理扬声器阵列与点云虚拟镜面放在同一交互场中,用身体移动与触摸扬声器驱动声音与视觉,最强证据是聋人设计者与听人可协同完成结构化即兴而不被察觉听力差异,主要代价是振动难以分辨音高与音量等细粒度差异且依赖持续学习与视觉补偿。
针对没有调音师的小场地演出调音问题,SoLAR 用参考录音学理想混音并给出吉他音量建议,仿真显示硬编码策略能把增益误差收敛到参考附近,代价是仅验证了吉他音量且现场只做了两人试用。
该文把基于模式的现场编码做成二维解谜游戏的核心操作,用代码、声音与角色移动三种同步表征支架化时机、重复与分层,5 人单次 45-60 分钟试玩显示组织更 deliberate,但无对照与可推广性声明。
该研究以骨传导耳机私密层加穹顶扬声器共享层加现场声源的三层现场为问题,用四部新作与作曲家自述对照出频带分工与层间关系策略,最强证据是录音仓储已公开可核对,代价是电平与注意力极易饱和且结论仍是作曲家报告而非大样本验证。
针对几何直拖难以产生平滑非线性双元音轨迹的问题,论文用二维弹簧-质量-阻尼器把键盘输入映射为作用力再耦合 Pink Trombone 合成, pilot 显示曲线轨迹的弯曲能量由 1191.1 降到 211.6 而直线定位精度基本相当,代价是样本仅为作者且未做统计检验。
针对身体打击乐需要压电传感器稳定安装又需要服装柔软贴身的矛盾,该研究用消费级三维打印柔性聚氨酯基板加背部嵌入式处理的方法制作马甲与手套,并在 2025 年两场公开演出中验证了可穿戴演奏的稳定性,其代价是以定性使用验证代替受控定量评估且声学映射完全开放给艺术家二次完成。
该文把毛笔旋转速度作为外部控制层,用距离积分触发主旋律、用阈值开关控制和声层,调用公开 Notochord 模型生成多轨 MIDI 并经 Ableton Live 发声,以一次约五分钟的水写布现场演示验证可演性,代价是只用陀螺仪而缺压力与长结构建模。
CamJam 针对零基础协同演奏问题选择纯摄像头加循环约束的四模块乐队结构,在 36 人轮换实验中弦乐模块直观性最高而协作评分偏低,代价是连续映射可预测性不足与面部追踪的不适感。
论文追问电子萨克布特到底是什么,用档案与实物逆向复原其阻塞振荡器、分频器、鉴频器与压控放大的信号与控制链,显示它由计算、收音机与电子风琴三条技术血统拼合,并由国家研究委员会技工、绘图、秘书与通信网络共同制成,但代价是缺乏完整图纸使第一台合成器之说难以确证。
Con Moto 针对舞蹈即兴中音乐连贯与低延迟难兼得的问题,用推理时掩码转向加 Max/MSP 与 Ableton 后渲染的双层控制连接身体与模型,并在约 70 人现场十分钟双人演出与 6 人问卷中显示可切换乐器与伙伴感知,其代价是实时多乐器密度受限且末段需离线生成。
该研究让 61 名 11 至 13 岁中学生在约 1 小时内用纯乐高做可演奏声学打击乐器,用三档说明书做支架对照,以 51 件留存乐器和 30 件细审样本显示摇奏类占 72.73% 而中观与微观层大量偏离图纸,代价是结构与声学权衡只能靠现场试错解决且无正式创造力量表评分。
论文把 Pharo 集成开发环境变成不停机的现场作曲工作站,用 Coypu 做节奏旋律型调度与事件分发、用 Phausto 内嵌 Faust 编译器做本地合成,并报告了固定十六分音符网格、五类演奏器与 70% 库覆盖等条件与代价。
该系统用 Muse S Athena 头环采集脑电频段经 Mind Monitor 以 OSC 送入 Csound,以采样保持加 SATB 查表把生理抖动驯成稳定和声并用 MIDI 键盘做移调与乐句控制,在双人互换脑电的现场二重奏中验证了可演奏性,代价是放弃连续调制精度且未做定量听感与延迟测量。
该研究以 2001 至 2025 年 104 篇 NIME 论文为语料做归纳主题综述,发现创新集中于按键连续触感而布局仍被西方十二平均律钢琴形主导,并以跨文化多稳态与非西方乐理键盘为出路,但代价是分类依赖文本自述且未触及实物手感验证。
该研究用古筝、二胡、唢呐、堂鼓四种乐器的自录样本做前 8 个泛音的分轨重组与心电驱动的视听交互,在百余人次的非正式展览观察中看到熟悉又陌生的文化联想,代价是只有定性观察而无可控评估与生理推断力。
针对 3 英尺胶合板表演面上接触式传声的各向异性与极小时延难题,该工作用四通道接触麦克风加短时频谱回归直接预测笔尖坐标,最强证据是 ResNet50 在全数据上平均 L1 误差 0.191 优于轻量 Transformer 的 0.225,代价是对板 orientation 与装配变化敏感且 R1/R3 误差显著升高。
针对盲人和低视力音乐制作人难以使用可视化环绕声混音插件的问题,该研究用 bHaptics TactSuit X40 背心把声音方位映射为腰部振动并以左右箭头键移动声源,5 名制作人的探索性任务与访谈报告了定位信心提升和认知负荷下降,但对齐精度与分辨率仍需改进且未提供定量定位误差。
两位演奏者用自选小数据集分别训练神经音频合成与语料库合成乐器并同台即兴,现象学回看法显示能动性分散在策展、架构与实时协商之中,代价是系统美学冲突时必须停奏、重配或回到档案重做。
该装置用双特雷门手势驱动水下水听器产生湍流并以此激励只在太澳与香港仔海岸环境录音约 thirty hours 上训练的 RAVE 模型,代价是约 90-250 milliseconds 的可感知延迟与激进手势对神经信号的掩蔽,只在水面平静时才让历史以时间包络形式短暂可闻。
Ehecatl 把 Voladores 仪式的 Quincunx 空间逻辑做成可演奏的映射,用磁罗盘方位交叉淡化四个加法振荡器、用风车气流同时控制幅度与滤波、用倾斜与触键做精细修饰,原型已实现独立发声与开源复现,但方位对比度与结构稳定性仍待加强。