ICASSP 2026 - 音乐混合
共 1 篇论文
| 排名 | 论文 | 评分 | 分档 |
|---|---|---|---|
| 🥇 | Ailive Mixer: A Deep Learning Based Zero Latency Automatic M | 7.0分 | 前25% |
📋 论文详情
🥇 Ailive Mixer: A Deep Learning Based Zero Latency Automatic Music Mixer for Live Music Performances
✅ 7.0/10 | 前25% | #音乐混合 | #深度学习 | #实时处理 #串音消除
👥 作者与机构
- 第一作者：Devansh Zurale（Shure Incorporated）
- 通讯作者：未说明
- 作者列表：Devansh Zurale（Shure Incorporated）、Iris Lorente（Shure Incorporated）、Michael Lester（Shure Incorporated）、Alex Mitchell（Shure Incorporated）
💡 毒舌点评
亮点：该工作首次将端到端深度学习应用于实时音乐混合，并通过“多速率处理”和“预测未来帧”的策略巧妙绕过了模型延迟问题，工程思路清晰。短板：尽管实验声称“零延迟”，但评估完全依赖主观听音测试且样本量小，缺乏如频谱图一致性、增益曲线平滑度等客观量化分析，使得“显著优于基线”的结论说服力打了折扣。
📌 核心摘要
这篇论文提出了一种名为AiLive Mixer（ALM）的深度学习系统，用于解决现场音乐表演中自动混音面临的两大核心挑战：乐器间的声学串音和严格的零延迟要求。其方法核心是采用多速率（Multi-Rate）处理架构，将需要大时域上下文的VGGish音频嵌入模块（975ms帧）与需要快速响应的特征提取（50ms帧）解耦，并引入零延迟训练策略（模型预测下一帧的增益参数）。与已有方法（如DMC）相比，ALM的创新在于增加了RMS条件化、用于学习通道间关系的Transformer编码器、用于学习时序上下文的GRU模块，并专门设计用于处理训练时的模拟串音数据。实验基于主观听音测试（15名参与者，8段现场录音），结果显示多速率模型ALM-MR在感知评分上显著优于单速率模型（ALM-SR）、改进版DMC（DMC-B-0L）、原版DMC（DMC-OG）以及原始混音（RAW），且能更稳定地避免增益突变和削波。该研究的实际意义在于为智能现场扩声、直播等应用提供了自动化混音的可行框架。主要局限性在于仅预测了声道增益这一单一混音参数，且验证集规模较小，缺乏客观评估指标。