论文速递

📄 Spatial Power Estimation via Riemannian Covariance Matching #空间音频 #声源定位 #信号处理 #波束成形 #黎曼几何 ✅ 6.5/10 | 前25% | #声源定位 | #信号处理 | #空间音频 #波束成形 | arxiv 学术质量 7.0/8 | 影响力 0.5/2 | 可复现性 0.0/1 | 置信度 高 👥 作者与机构 第一作者：Or Cohen（以色列理工学院 Andrew and Erna Viterbi 电气与计算机工程系） 通讯作者：Or Cohen（以色列理工学院 Andrew and Erna Viterbi 电气与计算机工程系） 作者列表：Or Cohen（以色列理工学院 Andrew and Erna Viterbi 电气与计算机工程系）、Alon Amar（以色列理工学院 Andrew and Erna Viterbi 电气与计算机工程系）、Ronen Talmon（以色列理工学院 Andrew and Erna Viterbi 电气与计算机工程系） 💡 毒舌点评 论文为欧氏和黎曼协方差匹配准则建立了清晰的渐近等价性与鲁棒性理论联系，这是一个扎实的理论贡献。提出的SERCOM算法在计算效率上具有明确优势。然而，实验对比局限于与SPICE、SAMV等同框架经典方法的比较，缺乏与近年来性能更优或范式不同的稀疏恢复、深度学习方法的对比，严重削弱了结论的时效性和对方法“先进性”的定位。此外，所有实验均为仿真，未提供真实数据验证，且未开源代码，可复现性为零。 ...

📄 STRUM: A Spectral Transcription and Rhythm Understanding Model for End-to-End Generation of Playable Rhythm-Game Charts #音乐转录 #游戏音频 #音乐源分离 #混合方法 📝 5.5/10 | 前25% | #音乐转录 | #混合方法 | #游戏音频 #音乐源分离 | arxiv 学术质量 5.5/8 | 影响力 1.2/2 | 可复现性 0.9/1 | 置信度 高 👥 作者与机构 第一作者：Joshua Opria（Independent Researcher） 通讯作者：Joshua Opria（Independent Researcher） 作者列表：Joshua Opria（Independent Researcher） 💡 毒舌点评 这是一份扎实、开源、完全可用的社区工具，其工程完整性和对评估科学性的坦诚态度值得称赞；但作为一篇NeurIPS/ICML/ICLR级别的论文，其核心贡献是多阶段流水线的集成与工程化，缺乏提出新的模型架构或算法理论洞见，在学术创新性上显得单薄。更像是一份优秀的技术报告而非开创性研究。 📌 核心摘要 解决的问题：手动为节奏游戏（如Clone Hero/YARG）创作乐谱耗时巨大，是社区内容创作的主要瓶颈。STRUM旨在将原始音频自动转化为可直接游玩的多乐器游戏谱面，无需依赖任何先验元数据（如节拍、调性）。 方法核心：这是一个多阶段混合系统。首先使用htdemucs_6s进行音源分离，然后针对鼓、吉他/贝斯、人声、键盘五种乐器设计独立的转录链。鼓部分采用两阶段CRNN起始点检测器、六模型集成分类器及一系列后处理修正器（包括鼓stem仲裁器、Phase-3多类别校正器、嗵鼓精细化CNN和五条启发式规则）；吉他/贝斯使用起始点检测加pYIN音高跟踪；人声使用Whisper对齐；键盘使用频谱分析。 新在哪里：论文的核心创新在于方法论和评估框架，而非核心算法。其提出并实践了“操作包络”评估协议：明确定义了系统性能所依赖的输入音频质量标准（中值鼓stem RMS ≥ 0.018），并据此构建了标准化的评估基准（从65首候选中筛选出30首）。此外，论文对社区真值数据本身的质量缺陷进行了量化分析（仅89%的鼓事件落在±100ms内），为评估设定了理论上限，这对后续研究有重要警示意义。 主要实验结果：在自建的29首歌“包络内”基准测试中（±100ms容差，含±200ms全局偏移校正），鼓起始点F1为0.838，贝斯0.694，吉他0.651，人声0.539。消融实验证明鼓管道中三个组件（鼓stem仲裁器、Phase-3校正器、踩镲/叮叮镲冲突否决）有统计显著贡献。论文同时发现社区谱面真值与音频实际起始点存在显著时间偏差，仅89%的鼓事件落在±100ms内，这为性能设定了理论上限。 乐器 F1 精度 召回率 真值事件数 鼓 0.838 0.823 0.854 40,248 贝斯 0.694 0.658 0.734 18,598 吉他 0.651 0.745 0.578 27,742 人声 0.539 0.632 0.470 10,147 （表格内容直接来自论文Table 1） 5. 实际意义：为节奏游戏玩家和谱面作者提供了一个高效的创作辅助工具（已封装为Octave桌面应用），能显著降低谱面制作门槛，加速社区内容产出。 6. 主要局限性：系统性能受限于输入音频质量（37%的候选歌曲被“操作包络”过滤）；人声和吉他/贝斯的音符级准确率有待提升；评估基准规模较小且可能无法覆盖所有音乐风格；系统最终输出的可玩性（如吉他谱面的指法布局合理性）未被量化评估。 ...

📄 The Deepfakes We Missed: We Built Detectors for a Threat That Didn’t Arrive #深度伪造检测 #音频深度伪造检测 #基准测试 #评测协议 #内容审核 #立场论文 #文献计量 ✅ 6.5/10 | 前50% | #深度伪造检测 | #基准测试 | #音频深度伪造检测 #评测协议 | arxiv 学术质量 7.0/8 | 影响力 1.5/2 | 可复现性 0.5/1 | 置信度 高 👥 作者与机构 第一作者：Shaina Raza（Vector Institute for Artificial Intelligence, Toronto, Canada; 多伦多城市大学） 通讯作者：论文未明确标注通讯作者。 作者列表：Shaina Raza（Vector Institute for Artificial Intelligence, Toronto, Canada；多伦多城市大学） 💡 毒舌点评 这篇立场论文以文献计量为刃，精准解剖了深度伪造检测领域近十年的“错位”症候群。其核心价值不在于技术突破，而在于以无可辩驳的实证数据揭示了研究议程与社会危害之间的巨大鸿沟，并尖锐地指出这种错位已成为部署有效防御的主要瓶颈。然而，其“威胁未以预测形式到来”的核心论断在力度上稍显不足，且对“威慑论”的反驳主要依赖间接证据。论文的警示意义远大于其提供的技术解决方案。 📌 核心摘要 问题：本文指出，自2017年以来，深度伪造检测研究一直围绕一个继承自2017-2019年、以“公众人物换脸/说话头视频”（T1）为主的威胁模型，但该威胁模型预测的大规模政治灾难并未在2024年全球选举周期中如期出现。与此同时，非自愿亲密图像（NCII）、语音克隆诈骗等实际危害已大规模爆发，研究重心与实际危害分布存在严重错位。 方法核心：本文是一篇立场论文，其核心方法是一个四阶段分析框架：(1) 威胁模型考古，追溯当前研究主流威胁模型的起源；(2) 实证错位分析，通过文献计量（438篇论文）和危害数据综合（来自IC3， IWF等），量化研究努力与实际危害的分布差异；(3) 机制诊断，分析基准继承、数据伦理不对称、显著性驱动关注等导致错位持续的原因；(4) 提出三个面向被忽视危害类别的具体技术研究议程。 创新点：提出了清晰的五类威胁分类法（T1-T5），并通过大规模实证分析系统性地量化了领域内资源与社会危害之间的错位。超越现象描述，深入诊断了维持这种错位的结构性原因，并勾勒了针对现实危害的研究路线图。 主要结果： 研究分布：在389篇检测方法论文中，71.0%（276篇）针对T1（公众人物视频），28.5%（111篇）针对T3（音频），而T2（1篇）、T4（0篇）、T5（1篇）几乎为零。 危害趋势：IWF评估的AI生成CSAM视频在2024-2025年间增长260倍（从13个到3,443个）；IC3报告的合成媒体相关投诉呈数量级增长。相比之下，2024年全球选举周期中未有记录证明合成政治视频根本性地改变了选举结果，相关事件多由人类而非ML系统识别。 错位加剧：在对数刻度下，T1论文数量呈线性增长，而危害指标呈指数增长，差距在持续扩大。 实际意义：论文明确呼吁ML社区、会议、资助机构和平台将研究议程重新平衡，投向危害真实增长的领域（如实时语音克隆检测、隐私保护的NCII检测、消息层防御），并提出了具体的行动建议。 主要局限性：论文明确承认其文献语料库可能低估了安全、HCI等领域的工作；危害数据依赖公开报告，存在漏报偏差；对论文和基准的分类涉及主观判断；且无法通过反事实分析证明现有研究未对政治deepfake产生威慑。 🔗 开源详情 代码：论文提及在补充材料中包含了用于构建438篇论文语料库的收集脚本和关键词列表（见附录A），但未提供具体的代码仓库链接（如GitHub）。这与“has_code: 是”的机器摘要判断一致。 模型权重：论文未提出新模型，故无模型权重。 数据集：论文引用了多个用于研究和基准测试的公开数据集（如FaceForensics++, Celeb-DF, DFDC等，见附录C Table 2），但并未提供新的数据集。 Demo：未提及。 复现材料：论文详细描述了其文献收集、分类的方法论（附录A, B），并表示在补充材料中包含了收集脚本和关键词规则。这为复现其核心文献分析提供了基础。危害数据综合部分属于定性研究，复现性较低。 论文中引用的开源项目：论文作为一篇立场论文，主要引用学术研究和数据集作为论据。文中提到的实体如StopNCII.org、IWF、IC3是报告和处理危害的组织或数据库，而非供研究者使用的开源软件项目。 🏗️ 方法概述和架构 本文是一篇立场与观点论文（Position Paper），其核心方法并非提出一个新的检测模型，而是通过一套系统性的分析框架来论证其核心主张。该框架旨在诊断研究与危害的错位并提出新的研究方向，具体流程与架构如下： ...

📄 The SMC Blind Spot: A Failure Mode Analysis of State-of-the-Art Beat Tracking #节拍跟踪 #音乐信息检索 #模型评估 ✅ 7.4/10 | 前35% | #节拍跟踪 | #模型评估 | #音乐信息检索 | arxiv 学术质量 6.5 （综合学术质量：创新性+技术严谨性+实验充分性+清晰度的加权得分，范围0-8）/8 | 影响力 1.4 （影响力与重要性：领域推动价值、后续工作潜力、与读者相关性，范围0-2）/2 | 可复现性 0.5 （可复现性：开源完整度、训练细节、超参数充分度，范围0-1）/1 | 置信度 高 👥 作者与机构 第一作者：Jaehoon Ahn（论文中未明确说明所属机构） 通讯作者：论文中未明确说明 作者列表：Jaehoon Ahn（未说明）、Tae Gum Hwang（未说明）、Moon-Ryul Jung（未说明） 注：论文作者列表未提供所属机构信息。从arXiv链接（2605.12287v1）的URL格式推测可能为预印本，但具体机构未在论文文本中明确说明。 💡 毒舌点评 本文对节拍跟踪模型在SMC数据集上的失败进行了系统性的诊断分析，核心贡献在于清晰地区分了前端激活函数与后端DBN的各自责任，并通过控制变量实验量化了它们的相对影响。其最大价值在于为领域指出了两个明确的改进瓶颈（激活质量与速度先验的僵化），然而，这份深入的病理报告止步于“诊断”，未能提出或验证任何具体的“治疗”方案（如新模型或算法），且其评估范围局限于三个“神经网络+DBN”的经典范式系统，对近年来兴起的端到端方法缺乏考察，这在一定程度上限制了结论对“state-of-the-art”的全面覆盖。 📌 核心摘要 这篇论文旨在诊断最先进的节拍跟踪模型为何在专门构建的SMC数据集上性能停滞不前。作者评估了三个主流系统（Beat This, Beat Transformer, madmom TCN），并对SMC数据集的23个难度标签归纳为四个维度（弱节拍线索、速度不稳定、节拍模糊、结构难度）。论文的核心发现是：主要瓶颈并非激活缺失，而是模型在复杂音乐上产生了“自信但错误”的激活峰值，例如将钢琴起音、吉他声等非节拍事件错误识别为节拍。通过巧妙的隔离实验，作者发现：1）使用真实高斯脉冲作为激活输入，F-measure可从0.585提升至0.924，证明激活函数是主要瓶颈（贡献约85%性能差距）；2）为每个轨道优化DBN的连续性参数λ，F-measure可从默认的0.592提升至0.642，超越原始峰值检测（0.627），表明固定参数DBN存在根本矛盾；3）使用真实速度约束DBN可使节拍连贯性（CMLt）从0.514提升至0.700，但F-measure几乎不变，证明节拍定位与连贯性是两个独立问题。实际意义在于为改进节拍跟踪提供了明确路径：需多样化训练数据以改善激活质量，并用自适应参数的DBN替代固定参数DBN。局限性在于这是分析诊断工作，未提出新模型，且其结论主要基于对SMC数据集的分析。 🔗 开源详情 代码：论文中未提及诊断分析代码的链接。 模型权重：论文中未提及。 数据集：论文中提及并使用了SMC数据集，但未提供直接下载链接。引用了数据集的原始论文 [18]，通常可从该文献中获取相关信息。 Demo：论文中未提及。 复现材料：论文中提及了部分评估设置和超参数，如： 评估使用 mir_eval.beat.evaluate 函数。 Beat This采用了8折交叉验证设置。 DBN实验参数：min_bpm=30， max_bpm=215，并扫描了 transition_lambda 参数（1到500）。 Beat Transformer的评估细节：帧率43.07 FPS，评估全轨道。 论文中引用的开源项目： madmom: 用于音乐信息检索的Python库。论文中使用了其DBN实现和TCNBeatProcessor模型。链接：未提供。 mir_eval: 用于评估音频指标的Python库。链接：未提供。 🏗️ 方法概述和架构 本文并非提出一个端到端的新模型，而是建立了一套用于诊断现有节拍跟踪系统瓶颈的分析框架和实验流程。整体流程是一个多阶段的评估与剖析过程，旨在将系统最终输出（节拍序列）的失败归因到具体的组件或训练数据特性上。 ...

📄 Too Good to Be True: A Study on Modern Automatic Speech Recognition for the Evaluation of Speech Enhancement #语音增强 #模型评估 #语音识别 #基准测试 ✅ 6.6/10 | 前50% | #语音增强 | #模型评估 | #语音识别 #基准测试 | arxiv 学术质量 6.2/8 | 影响力 0.7/2 | 可复现性 0.8/1 | 置信度 高 👥 作者与机构 第一作者：Danilo de Oliveira (University of Hamburg, Signal Processing Group) 通讯作者：未明确说明（论文中未提供明确的通讯作者标识） 作者列表：Danilo de Oliveira (University of Hamburg, Signal Processing Group)、Tal Peer (University of Hamburg, Signal Processing Group)、Timo Gerkmann (University of Hamburg, Signal Processing Group) 💡 毒舌点评 本文像一面精准的棱镜，折射出使用现代ASR评估语音增强时存在的“评估偏移”现象：强大的ASR模型（特别是基于大规模数据训练的Transducer和Attention模型）因噪声鲁棒性和语言先验，其WER指标已无法敏感地区分不同SE系统在声学伪影上的细微差异，甚至可能误导系统排名。然而，这篇系统性的实证研究更像是一个严谨的“症状报告”，它清晰地诊断了问题（WER作为指标的失效、流水线敏感性），并量化了症状（与人类排名的相关性、排名差异），但并未开出有效的“处方”（如何修正指标或提出新范式）。其贡献在于警示和基础性分析，而非解决方案的革新。 ...

📄 Towards Fine-Grained Multi-Dimensional Speech Understanding: Data Pipeline, Benchmark, and Model #语音理解 #渐进式课程学习 #基准测试 #数据集 #多语言 前25% | #语音理解 | #渐进式课程学习 | #基准测试 #数据集 | arxiv 学术质量 6.0/8 | 影响力 1.6/2 | 可复现性 0.7/1 | 置信度 高 👥 作者与机构 第一作者：Guojian Li（论文未明确标注，按列表顺序推断） 通讯作者：未说明（论文仅标注“*Corresponding authors”，但未指明具体作者） 作者列表：Guojian Li, Zhixian Zhao, Zhennan Lin, Jingbin Hu, Qirui Zhan, Yuang Cao, Pengyuan Xie, Chuan Xie, Jie Liu, Qiang Zhang, Zhonghua Fu, Lei Xie。 所有作者所属机构：未在论文中提供。 💡 毒舌点评 这篇工作的核心价值在于其“三位一体”的系统性贡献——试图为“细粒度多维语音理解”这一新兴方向同时定义问题、提供评测工具和提出模型方案���其构建的FMSU-Bench基准，特别是引入“语义陷阱”干扰项，对评估模型是否真正“听声”而非“读文”具有重要启发意义。然而，整套方案的基石——数据生产流水线，严重依赖黑箱商业模型（Gemini 2.5 Pro）进行核心标注，这使得后续所有工作的数据源都建立在一个不可控、可能引入系统性偏差且难以复现的基础上。本质上，这更像是一次利用强大工具进行的数据工程和系统集成，而非提出新的感知原理。此外，模型在部分关键微细声学任务（如音高）上性能的显著下降，暴露了当前方法在触及问题本质上的不足。 ...

📄 UniPath: Adaptive Coordination of Understanding and Generation for Unified Multimodal Reasoning ✅ 7.3/10 | 前25% | #多模态推理 | #协调策略 | arxiv 学术质量 6.6/8 | 影响力 0.8/2 | 可复现性 0.8/1 | 置信度 高 👥 作者与机构 第一作者：Hayes Bai (William & Mary) 通讯作者：Jindong Wang (William & Mary) 作者列表：Hayes Bai (William & Mary), Yinyi Luo (Carnegie Mellon University), Wenwen Wang (Carnegie Mellon University), Qingsong Wen (Squirrel Ai Learning), Jindong Wang (William & Mary) 💡 毒舌点评 论文对统一多模态模型（UMM）中“理解与生成如何协调”这一关键问题提出了一个新颖且系统的解决框架。其核心洞察——不同任务需要不同的协调路径（路径多样性）——极具启发性，实验设计也初步支撑了这一观点。然而，作为整个系统“大脑”的路径规划器（Planner）性能与最优选择（Oracle）之间存在巨大差距（如MMMU上54.11 vs 72.00），这直接限制了方法所能带来的上限收益，使得“自适应”的核心承诺大打折扣。此外，方法的有效性在很大程度上依赖于查询表单校准这一启发式后处理步骤，这在一定程度上削弱了其“可学习”系统的纯粹性。 ...

📄 What makes a word hard to learn? Modeling L1 influence on English vocabulary difficulty #词汇难度预测 #梯度提升决策树 #多语言 #数据集 📝 5.0/10 | 前50% | #词汇难度预测 | #梯度提升决策树 | #多语言 #数据集 | arxiv 学术质量 5.5/8 | 影响力 1.5/2 | 可复现性 0.8/1 | 置信度 高 👥 作者与机构 第一作者：Jonas Mayer Martins (University of Göttingen, Germany) 通讯作者：Lisa Beinborn (University of Göttingen, Germany) 作者列表：Jonas Mayer Martins (University of Göttingen, Germany), Zhuojing Huang (University of Göttingen, Germany), Aaricia Herygers (University of Göttingen, Germany), Lisa Beinborn (University of Göttingen, Germany) 💡 毒舌点评 论文巧妙地将语言迁移理论融入可解释的机器学习框架，清晰地揭示了不同母语背景学习者学习英语词汇时的“难度地图”差异，具有直接的教育应用潜力。然而，其核心迁移特征——字符n-gram相似度——是一个极其粗糙的代理指标，完全忽略了语义、语音和词源层面的迁移，这使得对“迁移”机制的建模深度和结论的普适性大打折扣。 ...

语音/音乐/音频论文速递 2026-05-13 共分析 22 篇论文 ⚡ 今日概览 📥 抓取 22 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #声源定位 2篇 ██ #音频编码 2篇 ██ #语音识别 2篇 ██ #多模态检索 1篇 █ #深度伪造检测 1篇 █ #音视频 1篇 █ #基准测试 1篇 █ #多模态推理 1篇 █ 📊 论文评分排行榜（21 篇，按分数降序） 排名 论文 评分 分档 主任务 🥇 jina-embeddings-v5-omni: Text-Geometry-Preserving Multi 7.5分 前25% #多模态检索 🥈 Adaptive Diagonal Loading using Krylov Subspaces for Ro 7.0分 前25% #声源定位 🥉 Spatial Power Estimation via Riemannian Covariance Matc 7.0分 前25% #声源定位 4. The Deepfakes We Missed: We Built Detectors for a Threa 7.0分 前50% #深度伪造检测 5. OmniRefine: Alignment-Aware Cooperative Compression for 7.0分 前25% #音视频 6. Exploring Token-Space Manipulation in Latent Audio Toke 6.7分 前25% #音频编码 7. MMTB: Evaluating Terminal Agents on Multimedia-File Tas 6.7分 前25% #基准测试 8. UniPath: Adaptive Coordination of Understanding and Gen 6.6分 前25% #多模态推理 9. The SMC Blind Spot: A Failure Mode Analysis of State-of 6.5分 前35% #节拍跟踪 10. Too Good to Be True: A Study on Modern Automatic Speech 6.2分 前50% #语音增强 11. Towards Fine-Grained Multi-Dimensional Speech Understan 6.0分 前25% #语音理解 12. A Semi-Supervised Framework for Speech Confidence Detec 6.0分 前50% #语音自信度检测 13. AffectCodec: Emotion-Preserving Neural Speech Codec for 5.8分 前25% #音频编码 14. STRUM: A Spectral Transcription and Rhythm Understandin 5.5分 前25% #音乐转录 15. Chunkwise Aligners for Streaming Speech Recognition 5.5分 前50% #语音识别 16. Poly-SVC: Polyphony-Aware Singing Voice Conversion with 5.5分 前50% #歌唱语音转换 17. What makes a word hard to learn? Modeling L1 influence 5.5分 前50% #词汇难度预测 18. Mind the Pause: Disfluency-Aware Objective Tuning for M 5.5分 前25% #语音编辑 19. OmniNFT: Modality-wise Omni Diffusion Reinforcement for 5.5分 前25% #音视频生成 20. Mechanistic Interpretability of ASR models using Sparse 5.0分 前60% #语音识别 21. Boosting Omni-Modal Language Models: Staged Post-Traini 5.0分 前50% #多模态模型评估 22 AuDirector: A Self-Reflective Closed-Loop Framework for N/A - - 📋 论文列表 🥇 jina-embeddings-v5-omni: Text-Geometry-Preserving Multimodal Embeddings via Frozen-Tower Composition ✅ 7.5/10 | 前25% | #多模态检索 | #迁移学习 | #多模态模型 #模型评估 | arxiv ...

📄 A Cold Diffusion Approach for Percussive Dereverberation #音频修复 #扩散模型 #音频增强 #打击乐 ✅ 6.2/10 | 前35% | #音频修复 | #扩散模型 | #音频增强 #打击乐 | arxiv 学术质量 6.2/8 | 影响力 0.7/2 | 可复现性 0.6/1 | 置信度 高 👥 作者与机构 第一作者：Dimos Makris（未说明机构） 通讯作者：未说明 作者列表：Dimos Makris（未说明机构），András Barják（未说明机构），Maximos Kaliakatsos-Papakostas（未说明机构） 💡 毒舌点评 本文首次将冷扩散框架应用于打击乐去混响这一垂直但重要的任务，并贴心地设计了一套瞬态感知的评估指标，填补了领域空白，实验显示其性能显著优于将语音模型生搬硬套的基线。然而，文中声称的“首次”虽未提供系统文献综述，但属于常见的声明方式。核心问题在于对比实验的公平性：最佳模型（UNet Δ-norm）仅用16步迭代就“吊打”了用30步和50步的基线。这种推理步数不匹配的对比，使得关于效率和性能的结论需要更多实验（如步数匹配对比、计算成本分析）来支撑。 📌 核心摘要 问题：现有音频去混响研究几乎都针对语音，而打击乐（鼓组）由于其快速瞬态和密集时域结构，其去混响面临独特挑战，且缺乏专门的学习型解决方案。 方法核心：提出一个冷扩散框架，将混响建模为一个确定性退化过程（将干声与湿声按特定时间表混合），并学习其逆过程。研究了两种反向过程参数化：直接预测下一状态（Direct）和预测归一化残差（Δ-normalized，速度风格），并分别用UNet和扩散Transformer（DiT）实现。 新意：首次尝试将学习型方案（冷扩散）应用于打击乐的盲去混响任务；通过确定性退化过程和迭代恢复来避免传统扩散模型的随机性；专门设计了一套针对打击乐的客观评估指标（如瞬态-尾部能量比TTER，起始点F值提升ONFi）。 实验结果：在内部测试集和完全外部的测试集上，所提方法（尤其是Cold UNet Δ-norm）在信号和感知指标上均显著优于强基线SGMSE+和CDiffuSE。例如，在外部测试集上，Cold UNet Δ-norm达到7.52 dB的SI-SDRi，而SGMSE+仅为2.01 dB，CDiffuSE接近0 dB。关键数据见下表。 表1：内部测试集核心指标对比 模型 mSTFTmag↓ ESR↓ SI-SDRi↑ ENV↑ TTER↓ SGMSE+ 0.12 1.35 4.06 0.62 5.90 CDiffuSE 0.12 1.37 2.77 0.59 6.03 Cold UNet Δ-norm 0.08 0.79 11.09 0.92 2.07 实际意义：为音乐制作中收紧鼓组混音、适应不同声学环境提供了新的自动化工具，潜力在于扩展到处理更复杂的人工混响效果。 局限性：数据集构建依赖手动筛选干声，规模（~38小时）和多样性受限；实验基线仅限两个源自语音的扩散模型，缺乏传统信号处理或其他音乐增强基线的对比；对生产环境中的复杂人工混响（非物理房间混响）的处理能力未验证。 🔗 开源详情 代码：https://github.com/dimakr169/drums_dereverb 模型权重：论文中未提及单独的模型权重下载链接（如HuggingFace/ModelScope）。代码仓库可能包含训练好的模型，但论文未明确说明。 数据集： MUSDB18-HQ：论文使用其鼓轨。论文未提供直接链接，但这是一个公开的音乐源分离数据集，可从其官方主页（https://sigsep.github.io/datasets/musdb.html）获取。 Groove MIDI Dataset (GMD)：论文使用其渲染的电子鼓表演。论文未提供直接链接，可从其官方发布页面（https://magenta.tensorflow.org/datasets/groove）获取。 作者整理的数据集：由上述数据集的干声片段与合成/真实RIR卷积生成，共约38小时。论文指出该数据集“available upon request”（可申请获取）。 OpenAIR 数据库：用于获取真实的房间脉冲响应（RIRs）。论文未提供直接链接，但这是一个公开的RIR数据库，网址为 https://www.openairlib.net/。 Demo：论文中未提及在线演示链接（Demo）。仅说明音频示例可在代码仓库中找到。 复现材料：论文详细提供了训练配置信息（包括优化器Adam、学习率10^{-4}、EMA衰减0.995、训练/验证/测试集划分80%/10%/10%、STFT参数等）。但未提及是否提供预训练模型检查点、完整的训练脚本或详细的复现指南。这些可能包含在代码仓库中。 论文中引用的开源项目： audiomentations：用于数据增强。链接：https://github.com/iver56/audiomentations pyroomacoustics：用于合成人工RIRs。链接：https://github.com/LCAV/pyroomacoustics librosa：用于在评估指标中检测音符起始点（onsets）。链接：https://librosa.org/ ACE Challenge Workshop 数据：用于域外评估的测试集RIRs。链接：https://zenodo.org/records/6257551 MoisesDB：用于构建域外测试集。论文未提供直接链接，但这是一个公开的音乐源分离数据集，网址为 https://moises.ai/developer/。 Waves Clarity VX Dereverb：作为商业插件被提及作为对比，非开源项目。链接：https://www.waves.com/plugins/clarity-vx-dereverb 🏗️ 方法概述和架构 本系统是一个端到端的音频增强框架，旨在将立体声鼓组的混响信号（湿声）恢复为无混响信号（干声）。其核心流程为：输入的混响音频被转换为复数谱图表示，然后通过一个学习到的反向冷扩散过程进行迭代去混响，最终输出恢复的干音频谱图，并逆变换回时域波形。 ...