语音增强

📄 Paediatric-HGNN: A Hybrid Heterogeneous Graph Neural Network for Detecting Disfluency in Children's Speech via Multiscale Acoustic Fusion #语音合成 #语音增强 #图神经网络 #多模态模型 #数据增强 6.5/10 | 创新 1/2 | 严谨 1.2/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 0.2/1.5 | 复现 0.5/0.5 | 工程 0.8/1.5 ✅ 6.5/10 | 后50% | #语音合成 | #图神经网络 | #语音增强 #多模态模型 | arxiv 👥 作者与机构 Rashini Liyanarachchi, Rachael Mackay, Alison Short, Aditya Joshi, Erik Meijering 1 University of New South Wales (UNSW), Sydney, Australia 2 Western Sydney University, Sydney, Australia 3 Resourced Music Therapy, Sydney, Australia ...

📄 BiEAR: A Human Auditory-Inspired Adaptive Binaural Front-end for Multi-Speaker Localisation and Distance Estimation #声源定位 #多任务学习 #语音增强 8.5/10 | 创新 8/2 | 严谨 7/1.5 | 实验 8/1.5 | 清晰 8/1 | 影响 7/1.5 | 开源 2/1.5 | 复现 8/0.5 | 工程 7/1.5 🔥 8.5/10 | 前25% | #声源定位 | #多任务学习 | #语音增强 | arxiv 👥 作者与机构 作者：Hanyu Meng, Eliathamby Ambikairajah, Vidhyasaharan Sethu, Qiquan Zhang, Haizhou Li 机构：1 The University of New South Wales, Sydney, Australia; 2 Tongyi Speech Lab, Alibaba Group, Hangzhou, China; 3 School of Artificial Intelligence, The Chinese University of Hong Kong, Shenzhen, China ...

📄 SEAM: Shortcut-Aware Real-Time Detection of Scripted vs. Spontaneous Speech for Interview Guardrails #自监督学习 #语音增强 7.5/10 | 创新 1/2 | 严谨 1/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 1/1.5 | 开源 0.5/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 ✅ 7.5/10 | 前25% | #语音增强 | #自监督学习 | arxiv 👥 作者与机构 作者: Vsevolod (V.) Kovalev, Pranay Manocha 机构: 1 Symbal AI, USA; 2 Princeton University 💡 毒舌点评 这篇论文做了一个非常“工程正确”但“学术创新性一般”的工作。它正确地指出了语音分类任务中普遍存在的“捷径学习”问题，并给出了一套相当详尽的、教科书式的解决方案（预处理、采样、数据增强）。其主要价值在于将这些解决方案系统性地打包并应用于一个特定的、有实用价值的场景（面试守卫），并通过消融实验有力地证明了捷径的存在。然而，其“创新”更多体现在“组合”与“应用”上，而非提出一个全新的概念或算法。例如，“来源感知采样”本质上是数据加载时的约束，而非模型或损失函数的创新。此外，核心评估集（外部面试数据集）的未公开，极大地削弱了其结果的可信度和可复现性——这就像宣称自己的药对某种疑难杂症有效，却只提供在自己专属病房里的临床试验数据。论文的结论（鲁棒性比骨干网络更重要）虽然正确，但已不算新颖。总体而言，这是一篇扎实的工程报告，但若以顶级会议（如NeurIPS）的创新性标准衡量，则显得不够“性感”。 📌 核心摘要 本文针对实时面试场景中检测脚本化与自发性语音时容易学习数据集中伪特征（捷径）的问题，提出了SEAM框架。该框架通过统一波形预处理、来源感知采样、非语音噪声库增强等一系列捷径感知的数据设计方法，配合轻量化的DistilHuBERT模型，旨在提升模型在目标领域（面试音频）上的鲁棒性。实验表明，完整SEAM模型在外部未见面试数据集上达到\(0.971 \\pm 0.004\) ROC-AUC。消融实验证实，移除捷径预防组件虽然能提升内部测试集表现，但会严重损害外部泛化能力，证明了模型确实学习了捷径。最终模型经INT4量化后仅41.8 MB，满足实时部署的延迟与内存约束。 ...

📄 DBHN-Net: Dual-Branch Hybrid Neural Network For Low-Complexity Monaural Speech Enhancement #语音增强 5.4/10 | 创新 1.3/2 | 严谨 1/1.5 | 实验 0.8/1.5 | 清晰 0.7/1 | 影响 0.5/1.5 | 开源 0/1.5 | 复现 0.5/0.5 | 工程 0.6/1.5 📝 5.4/10 | 前25% | #语音增强 | #语音增强 | arxiv 👥 作者与机构 论文通讯作者为Enrui Liu和Xuelong Li。作者及机构如下： Cunhang Fan, Enrui Liu, Jian Zhou, Zhao Lv：安徽大学计算机科学与技术学院（州电信息获取与保护技术国家重点实验室）。 Jing Zhou, Jian Kang, Jie Li：中国电信人工智能科技（北京）有限公司。 Andong Li：中国科学院大学声学研究所。 Xuelong Li：中国电信人工智能研究院（TeleAI）。 💡 毒舌点评 这篇论文的核心思想——用ANN分支的性能来“拯救”SNN分支因脉冲二值化导致的信息损失，同时借助SNN降低功耗——逻辑清晰且实用价值明确。实验对比了众多基线，数据集选择和指标评估都较为全面，工作量扎实。然而，作为一篇目标顶会的论文，其严谨性存在明显短板。最令人诟病的是技术细节描述的粗糙和部分公式的明显错误，例如TF-Cross Attention Fusion模块的最终输出公式(37)存在笔误，将FCA函数重复相加，这不应出现在投稿版本中。论文在阐述设计动机时，对ANN与SNN各自瓶颈的理论剖析深度不足，更像是一种“组合式创新”而非“机理式创新”。实验部分虽然广泛，但缺失了模型参数量这一关键对比指标，使得其“低复杂度”的宣称不完整。总体而言，这是一项有效且具有工程吸引力的应用研究，但若以顶会的理论深度和写作严谨性标准衡量，尚显不足。 ...

📄 SB-RF: Schrödinger Bridge Rectified Flow for One-Step Robust Speech Enhancement #语音增强 #生成模型 #鲁棒性 7.6/10 | 创新 1.4/2 | 严谨 1.3/1.5 | 实验 1.3/1.5 | 清晰 0.9/1 | 影响 1.1/1.5 | 开源 0/1.5 | 复现 0.5/0.5 | 工程 1.1/1.5 ✅ 7.6/10 | 前25% | #语音增强 | #生成模型 | #鲁棒性 | arxiv 👥 作者与机构 Caixia Lu, Xueyang Lv, Penglong Hu, Jiaming Xu (Xiaomi Corporation) 💡 毒舌点评 这篇工作技术整合思路清晰，实验设置也比较扎实（特别是低SNR鲁棒性测试）。然而，其“创新”的本质是“组合”而非“发明”，将已有的SB理论与RF目标结合，理论深度有限。所谓“先验知识引入”更像是一种启发式的正则化，而非严格的理论推导或数学证明。作者声称的“one-step”优势在Track B的5步和10步结果中显得有些尴尬——增加步数并未显著提升性能，这究竟是“一步就够”的证明，还是模型对多步采样不友好的暗示？此外，论文完全未提供代码，对于一篇声称“工程/实践价值”的工作，这是严重的减分项。评审意见需要更尖锐地指出这些整合性工作的天花板。 📌 核心摘要 本文提出SB-RF，一个结合薛定谔桥理论和整流流的单步语音增强生成框架。核心思想是将语音增强建模为一个从噪声分布到干净分布的熵正则化最优传输问题。通过在整流流训练中引入由薛定谔桥推导出的、具有数据自适应均值和方差的扰动信号，取代标准整流流的确定性线性插值。该框架利用整流流的速度匹配目标，迫使学习到的轨迹逼近最优传输测地线（即恒定速度的直线），从而在保持单步生成高效率的同时，提升对复杂噪声和多模态后验分布的鲁棒性。实验表明，在VoiceBank-DEMAND基准和自建的低信噪比测试集上，SB-RF以1步推理均取得了生成模型中的最优性能。 🔗 开源详情 代码：论文中未提供代码链接。 模型权重：论文中未提及模型权重链接。 数据集： 标准设置：使用 VoiceBank-DEMAND 数据集（VB-DMD），论文中未提及具体获取链接。 低信噪比鲁棒性设置： 训练数据：WenetSpeech4TTS (Premium subset) 和 DNS-4。论文中未提供具体获取链接。 训练噪声：DNS-4 和 MUSAN。论文中未提供具体获取链接。 评估数据：从 AISHELL-1 和 LibriSpeech 中随机选取的语音，以及来自 WHAM! 的噪声片段。论文中未提供具体获取链接。 Demo：论文中未提及。 复现材料：论文提供了详细的实验设置（包括STFT参数：窗口大小510，跳数128，输入维度 \(F=256, K=256\)；幅度变换参数 \(\alpha=0.5, \beta=0.33\)；时间边界 \(\epsilon=0.03, T=0.97\)）、模型架构（NCSN++， 65.6M参数）、关键超参数（损失权重 \(\lambda_1=33, \lambda_2=3\)， 学习率 \(0.0001\)， 优化器Adam， 批量大小16/GPU）和训练环境（8 NVIDIA RTX A800 GPUs），这些信息可用于复现。 论文中引用的开源项目： MP-SENet [lu2023mp] SGMSE+ [richter2023speech] BBED [schneider2023reducing] SB-VE [jukic2024schrodinger] CFM [lee2025flowse] LARF [larf2024] COSE [compose2024] NCSN++ [richter2023speech] （注：论文仅引用了这些项目名称和文献标识符，未在文中提供其具体的代码仓库或项目主页链接。） 🏗️ 方法概述和架构 SB-RF的方法架构可以分解为三个层层递进的部分：从标准整流流（RF）的局限出发，引入布朗桥随机性（BB-RF）作为中间步骤，最终整合薛定谔桥（SB）理论（SB-RF）以实现数据自适应的传输路径。 ...

📄 Feasibility of Time-Domain DNN-Based Speech Enhancement on Embedded FPGA for Hearing Aid #语音增强 #助听器 7.2/10 | 创新 1.2/2 | 严谨 1.1/1.5 | 实验 1.4/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 0.4/1.5 | 复现 0.4/0.5 | 工程 0.9/1.5 ✅ 7.2/10 | 前50% | #语音增强 | #助听器 | arxiv 👥 作者与机构 Feyisayo Olalere, Umut Altin, Kiki van der Heijden, Marcel van Gerven 机构：Radboud University, Donders Institute for Brain, Cognition, and Behaviour, The Netherlands；Columbia University, USA. ...

📄 The Differentiable Auditory Loop (DAL): An ML Framework for Hyper-Personalized Hearing Aids #语音增强 #信号处理基础 7.1/10 | 创新 1.5/2 | 严谨 1/1.5 | 实验 0.8/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 0.9/1.5 | 复现 0.5/0.5 | 工程 0.6/1.5 ✅ 7.1/10 | 前50% | #语音增强 | #信号处理基础 | arxiv 👥 作者与机构 Alejandro Ballesta Rosen, Jason Mikiel-Hunter, Julian Maclaren, Jack Collins, Richard F. Lyon, Simon Carlile. 机构：Google Research Australia 和 Macquarie University. ...

📄 A Comparison of Generative and Discriminative Methods for Speech Enhancement: Robustness, Complexity, and Hallucination #语音增强 #生成对抗网络 #扩散模型 #生成模型 8.3/10 | 创新 1.5/2 | 严谨 1.4/1.5 | 实验 1.3/1.5 | 清晰 1/1 | 影响 1.3/1.5 | 开源 0.3/1.5 | 复现 0.5/0.5 | 工程 1/1.5 🔥 8.3/10 | 前25% | #语音增强 | #生成对抗网络 | #扩散模型 #生成模型 | arxiv 👥 作者与机构 论文作者单位为德国弗劳恩霍夫通信研究所（Fraunhofer IIS）与弗里德里希-亚历山大大学埃尔朗根-纽伦堡分校（FAU）的联合机构。作者未在提供的文本中列出。 💡 毒舌点评 这篇论文本质上是一份“赛马报告”。它不发明新马，而是把市面上几种著名的马（判别式、GAN、扩散、流匹配、一致性模型）拉到同一赛道（低/高信噪比条件，匹配/失配数据），用一套相对公平的规则（统一骨干网络NCSN++，多维度指标）比了一圈。优点是比得够全、够系统，尤其是把计算复杂度（GMACs）和幻觉（WER/CER）这两个工程上的痛点拿到了台面上，这对工业界选型有直接参考价值。但它也有点“水”：所有模型都基于NCSN++这一种骨干网络进行比较，虽然保证了公平性，却也严重限制了结论的普适性——不同的生成模型（如基于U-Net的）性能可能有天壤之别。更致命的是，全文未开源任何代码或模型，对于一篇标榜“比较”和“实践指导”的论文，这简直是“只许州官放火”，让其他人无法复现和验证其结论，也失去了作为基准的最大价值。审稿人对此绝不客气。 📌 核心摘要 本研究对生成式（扩散模型、条件流匹配、一致性模型、GAN）与判别式深度学习方法在语音增强降噪任务中的表现进行了全面的实证比较。研究在多种场景（高/低信噪比、匹配/失配训练条件）下展开，并系统评估了性能、模型复杂度（GMACs、参数量）及生成式方法特有的幻觉特性（WER、CER、LPS）。核心结论如下：1）在低信噪比场景下，GAN方法在多数客观指标（尤其是PESQ、FwSegSNR）上显著优于判别式和扩散式方法；2）扩散式方法因其迭代生成过程导致计算复杂度远高于单步推理的方法（如判别式、GAN），而性能增益通常不足以抵消其高昂成本；3）GAN方法的训练收敛速度和数据效率优于扩散式方法；4）生成式方法在中等信噪比下幻觉有限，但在极低信噪比（低于-7dB）下会产生显著幻觉和虚假频谱内容。论文为研究者和实践者在语音增强方法选型上提供了基于实证的权衡依据。 🔗 开源详情 代码：论文中未提及代码链接 模型权重：论文中未提及 数据集：论文主要使用“Interspeech 2020 DNS Challenge dataset”作为训练和评估数据集，提供了获取链接：https://dns4public.github.io/dns4public/ 。低SNR评估数据集引用自 [shetu2025leveraging]。 Demo：论文中未提及 复现材料：论文中未提供具体的训练配置、检查点或附录等复现材料。 论文中引用的开源项目： Whisper (base) ASR system: 用于评估幻觉效应。链接为：https://github.com/openai/whisper JiWER toolkit: 用于计算WER和CER。链接为：https://github.com/jitsu/jiwer Interspeech 2020 DNS Challenge dataset: 论文核心使用的数据集。链接为：https://dns4public.github.io/dns4public/ SGMSE+：论文中作为扩散模型代表之一。其原始论文链接为：https://arxiv.org/abs/2208.05843，代码仓库链接未提及。 BBED：论文中作为扩散模型代表之一。其原始论文链接为：https://arxiv.org/abs/2309.11124，代码仓库链接未提及。 GALDSE：论文中作为扩散模型代表之一。其原始论文链接为：https://arxiv.org/abs/2405.05565，代码仓库链接未提及。 FlowSE：论文中作为条件流匹配模型代表。其原始论文链接为：https://arxiv.org/abs/2410.01561，代码仓库链接未提及。 SEBridge：论文中作为一致性模型代表。其原始论文链接为：https://arxiv.org/abs/2310.16812，代码仓库链接未提及。 NoCoGAN / DisCoGAN：论文中作为GAN模型代表。其原始论文链接为：https://arxiv.org/abs/2501.17348，代码仓库链接未提及。 CMGAN：论文中作为GAN模型代表。其原始论文链接为：https://arxiv.org/abs/2206.12884，代码仓库链接未提及。 DCCRN：论文中作为判别式模型代表。其原始论文链接为：https://arxiv.org/abs/2008.00264，代码仓库链接未提及。 GCRN：论文中作为判别式模型代表。其原始论文链接为：https://arxiv.org/abs/1811.02771，代码仓库链接未提及。 NCSN++：论文中用作多种方法（扩散、GAN、判别式）的骨干网络。其原始论文链接为：https://arxiv.org/abs/2011.13456，代码仓库链接未提及。 🏗️ 方法概述和架构 本文的核心是进行一项大规模实证研究，其“方法”指的是论文为实现比较目标而设计的实验框架和流程，而非提出一种新的模型架构。具体架构和流程如下： ...

📄 Exploiting Noise Inseparability for Weakly-Supervised Discriminative Speech Denoising Using Noisy Targets #语音增强 8.5/10 | 创新 1.5/2 | 严谨 1/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 1.5/1.5 | 开源 0.5/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 🔥 8.5/10 | 前50% | #语音增强 | #语音增强 | arxiv 👥 作者与机构 作者：Matthew Maciejewski， Samuele Cornell 机构：论文中未明确说明作者所属机构，仅标注研究领域类别为 eess.AS。 💡 毒舌点评 这篇论文的核心思想——把“噪声分不开”这个公认缺陷变成“可以抵消”的优势——确实有点意思，算是个“废物利用”的巧妙构思。作者显然对NyTT的痛点理解很深，理论推导也做得不错。但问题在于，那个核心的数学假设（\(\langle n_1, n_2 \rangle \approx 0\)）在现实的复杂声学环境里真的那么铁板钉钉吗？论文对此语焉不详。实验部分，特别是在CHiME-3上的混合训练结果是亮点，但报告得不够扎实，缺少方差分析，让人怀疑数字的稳定性。而且，方法的计算开销增加了多少？这在论文里完全是个谜。总的来说，是个有想法但打磨不够的半成品，离顶会标准还有距离。 📌 核心摘要 本文针对弱监督语音去噪中，使用带噪语音作为训练目标（NyTT）导致模型学习到次优解（包含残余噪声）的问题，提出了差异噪声滤波（DNF）方法。作者首先从理论上分析了NyTT的优化目标，推导出模型会学习到包含固定比例混合噪声的估计。受此启发，DNF训练一个双输出网络，分别估计带噪语音和噪声，并通过设计一致的损失函数，使得两个估计中的残余噪声分量具有相同的缩放比例。在推理时，通过简单的减法操作，噪声分量被抵消，从而得到更干净的语音。该框架的关键优势在于，其训练目标与全监督训练兼容，使得可以混合使用带噪目标数据和合成干净数据进行训练，提升了模型在真实噪声环境下的泛化能力。在WHAM!和CHiME-3数据集上的实验证明了该方法的有效性。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：论文中未提及模型权重链接。 数据集：论文使用了以下公开数据集： WHAM! 数据集：获取链接：https://whamr.cs.washington.edu/ CHiME-3 数据集：获取链接：http://sp.ee.tsinghua.edu.cn/enmhub/Data/CHiME3/download.html Demo：论文中未提及在线演示链接。 复现材料：论文在3.1节提供了详细的模型架构（4-block TF-GridNet）和STFT参数，但未提供训练脚本、配置文件或预训练检查点。 论文中引用的开源项目： TF-GridNet：论文使用的模型架构。链接：https://arxiv.org/abs/2209.03952 OWSM v3.1：用于转录和计算WER的模型。链接：https://huggingface.co/espnet/espnet_owsm_v3.1 VERSA toolkit：用于计算DNSMOS, UTMOS和WER的评估工具包。链接：https://github.com/Sarayan-MSU/VERSA 🏗️ 方法概述和架构 本文提出的差异噪声滤波（DNF）框架，其核心架构如图1所示，旨在解决传统带噪目标训练（NyTT）的理论次优解问题。该架构主要包含一个双输出的神经网络和特定的损失函数设计。 ...

📄 Advancing Electrolaryngeal Speech Enhancement Through Speech-Text Representation Learning #语音增强 #多模态模型 #低资源 #数据增强 7.1/10 | 创新 1.5/2 | 严谨 1.1/1.5 | 实验 1.4/1.5 | 清晰 1/1 | 影响 1/1.5 | 开源 0.2/1.5 | 复现 0.5/0.5 | 工程 0.4/1.5 ✅ 7.1/10 | 前50% | #语音增强 | #数据增强 | #多模态模型 #低资源 | arxiv 👥 作者与机构 Ding Ma, Jinyi Mi, Fengji Li, Lester Phillip Violeta, Jiajun He, Wenchin Huang, Kazuhiro Kobayashi, Tomoki Toda. 主要机构：名古屋大学 (Nagoya University) 信息科学研究生院及信息技术中心，北京航空航天大学 (Beihang University) 生物与医学工程学院，TARVO, Inc.。通讯作者为 Ding Ma。 ...