语音增强

📄 Frontend Token Enhancement for Token-Based Speech Recognition #语音识别 #自监督学习 #语音增强 #鲁棒性 🔥 8.0/10 | 前25% | #语音识别 | #自监督学习 | #语音增强 #鲁棒性 学术质量 6.5/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 高 👥 作者与机构 第一作者：未说明（论文标题页作者列表为并列） 通讯作者：未说明（论文中未明确标注） 作者列表：Takanori Ashihara（NTT, Inc., Japan）、Shota Horiguchi（NTT, Inc., Japan）、Kohei Matsuura（NTT, Inc., Japan）、Tsubasa Ochiai（NTT, Inc., Japan）、Marc Delcroix（NTT, Inc., Japan） 💡 毒舌点评 这篇论文的最大亮点是系统性思维和干净有效的实验设计，像做了一个清晰的“前端增强方法菜单”，让读者一目了然各类方法的优劣，而Wave-to-Token方案以简洁取胜，效果甚至优于更复杂的流程。不足之处在于其验证舞台仅限于CHiME-4这一个“标准考场”，对于更广泛噪声类型（如非平稳噪声、混响）和更大规模数据集的表现未可知，且“开源复现”的承诺缺席，对于想直接拿来用的工程师来说不够友好。 🔗 开源详情 代码：论文中未提及代码仓库链接。 模型权重：未提及。 数据集：使用公开的CHiME-4数据集，未提及自己创建或发布新数据集。 Demo：未提供在线演示。 复现材料：论文描述了详细的模型架构、训练设置（如遵循ESPnet配置、具体超参数）和实验细节，为复现提供了较好的文本指导，但未提供检查点或完整脚本。 论文中引用的开源项目：依赖 ESPnet 进行实验设置，使用预训练的 WavLM Large 模型作为SSL骨干。 总结：论文中未提及明确的开源计划（如代码仓库发布）。 📌 核心摘要 要解决的问题：基于自监督学习（SSL）离散语音单元（Token）的语音识别系统（Token ASR）在噪声环境下性能会严重下降，其噪声鲁棒性尚未得到充分研究。具体来说，从噪声语音中提取的语义Token会偏离干净Token，导致识别错误。 方法核心：本文提出并系统比较了四种模块化的前端增强方法，旨在从噪声语音中恢复或直接估计干净的Token。这四种方法根据输入/输出域划分：波形到波形（W2W-E，传统语音增强）、Token到Token（T2T-E）、SSL连续特征到Token（V2T-E）、以及波形到Token（W2T-E）。所有前端模型独立于ASR后端训练。 与已有方法相比新在哪里：此前工作主要关注连续ASR（基于FBANK或SSL特征）的前端增强，或仅针对Token生成本身提出抗扰动方法。本文是首次系统评估并设计适用于Token ASR的前端增强框架，特别是引入了新颖的V2T-E和W2T-E方法。 主要实验结果：在CHiME-4数据集上的实验表明： W2T-E方法表现最佳，在大多数噪声场景下取得了最低的词错误率（WER），例如在et simu上WER为8.2%，优于基线WavLM连续ASR（11.0%）和最佳W2W-E（TF-GridNet）增强的Token ASR（15.1%）。 W2T-E方法也显著降低了Token级别的单元编辑距离（UED），在et simu上为29.2，优于所有其他前端。 UED与WER并不总是一致相关，说明Token序列的准确性不完全等同于最终ASR性能。 W2T-E前端具有良好的模块化特性，即使更换为CTC-only的ASR后端，性能提升依然显著。 与CHiME-4上已知的SOTA系统IRIS（使用联合优化）相比，本文的Token ASR + W2T-E取得了可比的结果（et real WER 4.0% vs. 3.9%），但Token ASR在序列长度上更具效率（BPE压缩后长度减少约68%）。 实际意义：证明了通过一个简单、高效的前端增强模块（W2T-E），可以大幅提升Token ASR在噪声环境下的实用性，同时保持其计算效率优势。这为构建更鲁棒、高效的端到端语音处理系统提供了新思路。 主要局限性：实验仅在CHiME-4（单一类型的背景噪声）上进行，泛化能力有待验证；未开源代码和模型权重，复现性受限；论文中未讨论前端增强对模型延迟、计算开销的详细影响分析。 🏗️ 模型架构 论文核心是探讨四种前端增强模型如何与固定的Token ASR后端配合工作。整体流程如图1所示（请见下文描述，原文URL在提供的材料中未包含，因此无法插入图片链接，��下为基于图注的文字描述）。 ...

📄 Gdiffuse: Diffusion-Based Speech Enhancement with Noise Model Guidance #语音增强 #扩散模型 #领域适应 #鲁棒性 ✅ 7.0/10 | 前25% | #语音增强 | #扩散模型 | #领域适应 #鲁棒性 学术质量 7.0/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 中 👥 作者与机构 第一作者：Efrayim Yanir（特拉维夫大学） 通讯作者：未说明 作者列表：Efrayim Yanir（特拉维夫大学）、David Burshtein（特拉维夫大学）、Sharon Gannot（巴伊兰大学） 💡 毒舌点评 论文巧妙地将一个庞大的语音生成扩散模型“冻结”起来，仅用一个172参数的噪声模型通过测试时训练进行“遥控”，实现了对新噪声的灵活适应，这个“四两拨千斤”的思路确实新颖。然而，论文声称“噪声统计在训练和推理间保持稳定”是核心假设，但仅用20秒噪声片段训练就断言其统计特性稳定可靠，这个前提在复杂多变的现实声学环境中显得有些理想化，可能成为其实用性的阿喀琉斯之踵。 🔗 开源详情 代码：论文中未提及代码仓库链接。 模型权重：论文中未提及公开的预训练权重链接。文中提到使用UnDiff项目预训练的DiffWave，但未给出其具体获取方式。 数据集：训练和测试使用了LibriSpeech（公开）和BBC Sound Effects Archive（公开）。但论文未提供其处理后的具体数据划分或下载脚本。 Demo：论文提供了一个示例网站链接：https://ephiephi.github.io/GDiffuSE-examples.github.io，可能包含音频示例。 复现材料：论文描述了噪声模型的具体架构（WaveNet风格CNN，参数细节）、指导调度公式（11）及超参数（γ, λ_max），以及训练轮数的大致范围，提供了一定的复现基础。但优化器学习率、噪声样本的具体处理方式等细节未充分说明。 引用的开源项目：提到了UnDiff [15]（用于获取预训练DiffWave）和WaveNet [20]（噪声模型架构的灵感来源）。 开源计划：论文中未提及明确的后续开源计划。 📌 核心摘要 问题：传统判别式语音增强模型在匹配条件下表现好，但面对未见过的噪声类型时泛化能力差，易产生伪影。现有的生成式（特别是基于扩散的）语音增强方法虽然性能优越，但往往需要为每种预期噪声专门训练庞大的模型，适应性差且成本高。 方法核心：提出GDiffuSE，一个基于去噪扩散概率模型（DDPM）的语音增强框架。其核心是利用一个极轻量（172参数）的噪声模型，在测试时通过少量目标噪声样本进行快速训练。在扩散模型的反向生成过程中，利用该噪声模型的似然函数梯度作为“指导信号”，引导一个预训练的、冻结的语音生成扩散模型（DiffWave）生成干净语音。 新意：与现有方法（如直接条件扩散或需重训大模型）不同，GDiffuSE首次将DDPM引导机制与测试时训练相结合，并专门针对语音增强设计了噪声模型指导策略。它解耦了通用语音先验学习和特定噪声适应，使系统能快速适应新噪声。 实验：在LibriSpeech干净语音与BBC音效库噪声混合的数据上进行评估。结果表明，在失配噪声条件下（特别是高频噪声），GDiffuSE在PESQ和SI-SDR指标上持续优于基线方法SGMSE（在WSJ0和TIMIT上训练）和CDiffuSE。例如，在5dB SNR下针对高频噪声，GDiffuSE的SI-SDR为11.25±3.21，而sgmseWSJ0为9.43±2.64，CDiffuSE为3.66±3.23。频谱图也显示其抑制噪声更有效。 实际意义：提供了一种快速、低成本地将强大语音生成模型适应到新噪声环境的可能方案，降低了先进语音增强技术的部署门槛。 主要局限性：核心假设——训练噪声样本与推理时噪声统计一致——在现实中可能不总是成立；实验对比基线相对有限；未充分探讨当噪声统计发生显著变化时模型的失效模式；训练噪声片段（20秒）的充分性有待更全面验证。 🏗️ 模型架构 GDiffuSE系统包含两个主要组件，在训练和推理阶段协同工作，如图1所示。 ...

📄 Generalizability of Predictive and Generative Speech Enhancement Models to Pathological Speakers #语音增强 #迁移学习 #扩散模型 #鲁棒性 #数据集 ✅ 7.0/10 | 前50% | #语音增强 | #迁移学习 | #扩散模型 #鲁棒性 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 高 👥 作者与机构 第一作者：Mingchi Hou（Idiap Research Institute, Switzerland; École Polytechnique Fédérale de Lausanne, Switzerland） 通讯作者：未说明 作者列表：Mingchi Hou（Idiap Research Institute, Switzerland; École Polytechnique Fédérale de Lausanne, Switzerland）、Ante Jukić（NVIDIA, USA）、Ina Kodrasi（Idiap Research Institute, Switzerland） 💡 毒舌点评 这篇论文填补了SOTA语音增强模型在病理语音上性能评估的关键空白，是领域内一个��实且必要的“体检报告”。但其短板在于结论的深度略显不足——在发现“病理语音特性导致性能下降”和“迁移微调优于其他方案”这些相对符合直觉的结论后，未能进一步挖掘病理类型的异质性或提出更针对性的适配机制，更像是一份扎实的基准测试报告而非一篇有深度的方法论文。 ...

📄 H-nnPBFDAF: Hierarchical Neural Network Partitioned Block Frequency Domain Adaptive Filter with Novel Block Activation Probability #语音增强 #信号处理 #时频分析 #实时处理 #低资源 ✅ 7.5/10 | 前25% | #语音增强 | #信号处理 | #时频分析 #实时处理 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 高 👥 作者与机构 第一作者：Jitao Ma（浙江大华技术股份有限公司）（论文标注为共同第一贡献） 通讯作者：Ruidong Fang（浙江大华技术股份有限公司） 作者列表：Jitao Ma（浙江大华技术股份有限公司），Jingbiao Huang（浙江大华技术股份有限公司），Ruidong Fang（浙江大华技术股份有限公司），Jucai Lin（浙江大华技术股份有限公司），Han Xue（浙江大华技术股份有限公司），Yapeng Mao（浙江大华技术股份有限公司），Jun Yin（浙江大华技术股份有限公司） 💡 毒舌点评 本文亮点在于提出了“块激活概率”这一巧妙机制，用一个紧凑的神经网络同时解决了传统自适应滤波器步长选择和滤波器长度固定两大痛点，且计算开销极低。然而，纯线性框架可能在处理设备扬声器严重非线性失真时存在天花板，而论文中的对比实验（如与Deep Adaptive AEC的比较）也显示在复杂场景下其性能仍不及更重的混合方法，且代码未开源限制了复现价值。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：未提及公开权重。 数据集：论文中使用的LibriSpeech、DNS Challenge、SLR28、Aachen Impulse Response、AEC Challenge数据集均为公开可获取的。 Demo：未提及在线演示。 复现材料：论文提供了模型架构概述、关键公式和部分训练数据设置，但缺乏详细的训练超参数（优化器、学习率、batch size等）、训练硬件信息以及最终模型的具体配置，复现难度较高。 论文中引用的开源项目： 数据集：LibriSpeech [17], DNS Challenge [18], SLR28 [19], Aachen Impulse Response [20], AEC Challenge Dataset [21]。 工具：AECMOS评估工具包 [23]。 对比方法：公开的NKF Demo [12]， Deep Adaptive AEC [10]。 开源计划：论文中未提及开源计划。 📌 核心摘要 问题：在低成本消费设备上部署声学回声消除（AEC）时，传统自适应滤波器（如PBFDAF）面临步长选择困难、滤波器长度需手动固定以适应不同回声路径、以及现有神经网络混合方法计算成本过高的挑战。 方法核心：提出神经网络分块频域自适应滤波器（nnPBFDAF）。核心是一个轻量神经网络，它同时估计频域步长向量（用于替代固定步长）和块激活概率向量（每个分块一个概率值）。块激活概率向量的和可用于间接控制有效滤波器长度，实现自动适应。进一步提出两阶段层次结构（H-nnPBFDAF），第一阶段估计的回声作为第二阶段的参考信号，以提升鲁棒性。 创新点：a) 将神经网络步长估计与PBFDAF深度融合；b) 引入块激活概率向量，首次解决了固定分块数PBFDAF无法自适应不同回声路径长度的难题；c) 设计两阶段级联架构（H-nnPBFDAF），以粗到精的方式提升回声估计精度。 实验结果：在三个测试集上进行评估。如表1所示，在模拟短回声路径（Subset 1）上，H-nnPBFDAF的PESQ为3.12，ERLE为34.57 dB，优于传统PBFDKF（PESQ 2.93, ERLE 25.77 dB）。在AEC Challenge盲测集（Subset 2）上，H-nnPBFDAF在双讲回声评价（DT-E）得分为3.40，略低于Deep Adaptive AEC（4.40），但计算复杂度仅为其约1/26。在真实消费设备数据（Subset 3）上，H-nnPBFDAF的ERLE为21.47 dB，显著优于NKF（7.29 dB）。消融实验（表2）证实，采用块激活概率的nnPBFDAF在不同回声路径长度下的平均PESQ（2.87）优于所有固定分块数模型。 实际意义：该方法在极低计算开销（仅占ARM Cortex-A35单核<9%资源）下实现了高性能AEC，并能自动适应回声路径变化，非常适合资源受限的消费类电子产品（如智能音箱、会议设备）部署，且模型已实际部署。 主要局限性：作为线性AEC框架，对高度非线性失真的回声消除能力可能有限；神经网络部分的具体结构和训练策略细节（如优化器、学习率）未完全公开；代码未开源。 🏗️ 模型架构 模型的核心是nnPBFDAF模块，其整体流程和内部结构如下图所示： ...

📄 Hair Noise Analysis and Mitigation for Smart Glasses Audio Captures #语音增强 #信号处理 #麦克风阵列 #音频分类 #数据集 ✅ 7.5/10 | 前25% | #语音增强 | #信号处理 | #麦克风阵列 #音频分类 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Subrata Biswas（Worcester Polytechnic Institute, MA, USA 及 Meta Reality Labs, WA, USA） 通讯作者：未明确说明（根据邮箱排列，可能是Daniel Wong） 作者列表： Subrata Biswas（Worcester Polytechnic Institute 及 Meta Reality Labs） Daniel Wong（Meta Reality Labs） Bashima Islam（Worcester Polytechnic Institute） Sanjeel Parekh（Meta Reality Labs） Vladimir Tourbabin（Meta Reality Labs） 💡 毒舌点评 亮点：论文开创性地将“头发噪音”这个长期困扰智能眼镜用户却鲜少被学界系统研究的“房间里的大象”定义为明确的学术问题，其用户研究和数据集构建工作扎实且具有长远价值。短板：提出的NMF基准方法略显保守，虽然有效，但在深度学习大行其道的今天，缺乏与基于深度学习的降噪/分离方法（如论文引用但未深入对比的[6][7][8]）的直接较量，使得“基准”的标杆高度受限。 ...

📄 HCGAN: Harmonic-Coupled Generative Adversarial Network for Speech Super-Resolution in Low-Bandwidth Scenarios #语音增强 #生成模型 #端到端 #低资源 🔥 8.0/10 | 前50% | #语音增强 | #生成模型 | #端到端 #低资源 学术质量 5.5/7 | 选题价值 2.0/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Xin Wang（河海大学信息科学与工程学院） 通讯作者：Yibin Tang（河海大学信息科学与工程学院） 作者列表：Xin Wang（河海大学信息科学与工程学院）、Yuan Gao（河海大学信息科学与工程学院）、Xiaotong Wang（河海大学信息科学与工程学院）、Yibin Tang（河海大学信息科学与工程学院）、Aimin Jiang（河海大学信息科学与工程学院）、Ying Chen（常州大学微电子与控制工程学院） 💡 毒舌点评 亮点：该工作的双分支设计思路清晰，将语音的谱特征与谐波结构显式解耦并分别建模，对于解决4kHz这类谐波严重丢失的极窄带问题确有针对性，消融实验也证明了谐波分支的贡献。短板：作为2026年发表在ICASSP的工作，其网络架构（U-Net + GAN + Mamba）的集成缺乏更深入的原理性创新，更像是一个工程上的有效组合；且Mamba模块在消融实验中对核心指标PESQ的提升并不显著，其必要性有待更强论证。 🔗 开源详情 代码：论文提供了代码仓库链接：https://github.com/BiolabHHU/HCGAN。 模型权重：论文中未提及是否公开预训练模型权重。 数据集：使用VCTK公开数据集，论文中说明了数据集来源和处理方式，但未说明是否提供处理后的数据。 Demo：论文中未提及在线演示。 复现材料：提供了模型架构图、关键超参数（如损失权重、学习率、批次大小）、评估指标。代码仓库可能包含更多细节，但论文正文未说明。 引用的开源项目：在模型中引用了Mamba（[18]）和MelGAN（[19]）的判别器结构。 总结：论文中提及了代码仓库链接，但未说明开源计划的其他细节（如权重、详细配置文件）。 📌 核心摘要 问题：在低带宽场景（如采样率4kHz）下进行语音超分辨率时，输入信号的谐波信息严重丢失，现有方法难以恢复出自然清晰的高质量语音。 方法核心：提出谐波耦合生成对抗网络（HCGAN）。生成器采用双分支架构：谱分支通过U-Net和Mamba模块处理频谱图；谐波分支通过时谐模块从低频谐波矩阵估计高频谐波矩阵。两分支输出融合后生成最终频谱。 创新点：1）显式引入并建模语音的谐波结构，通过矩阵形式实现谐波从低频到高频的迁移；2）设计双分支架构，分别学习谱平滑性和谐波连续性，并进行特征融合；3）在U-Net瓶颈处集成轻量Mamba模块以降低计算复杂度。 主要结果：在8kHz->16kHz任务上，HCGAN的PESQ达到3.64，超越所有对比方法（最高为TUNet的3.50）。在更困难的4kHz->16kHz任务上，其PESQ为2.50，也优于AFiLM、NVSR等传统方法。消融实验证实了多尺度特征损失、Mamba模块和谐波提取（HE）模块的有效性。 表1：16 kHz高分辨率语音从8 kHz语音恢复对比 方法 LSD PESQ SNR (dB) Params (M) AFiLM [20] 0.74 3.02 20.0 134.7 NVSR [21] 0.78 3.09 17.4 99.0 TFiLM [12] 0.78 2.51 19.8 68.2 AERO [17] 0.77 3.01 22.5 36.3 Tramba [16] 0.82 3.23 23.2 5.2 TUNet [13] 1.36 3.50 17.4 2.9 HCGAN 0.78 3.64 19.8 4.7 表2：16 kHz高分辨率语音从4 kHz语音恢复对比 方法 LSD PESQ SNR (dB) Params (M) AFiLM [20] 1.00 1.88 15.4 134.7 NVSR [21] 0.95 2.03 11.7 99.0 TFiLM [12] 1.17 2.08 15.0 68.2 TFNet [11] 1.27 1.73 17.5 55.8 HCGAN 0.96 2.50 14.3 4.7 实际意义：HCGAN以仅4.7M的参数量，在关键的感知质量指标PESQ上表现优异，尤其适用于卫星通信、物联网等对模型大小敏感且带宽极度受限的语音通信增强场景。 局限性：当输入语音基频较高（>300Hz）时，低频谐波矩阵包含的信息不足，导致谐波分支的性能提升有限。此外，实验部分未提供语音增强后的MOS评分或主观听感测试，客观指标与主观感受的关联性有待进一步验证。 🏗️ 模型架构 HCGAN是一个在GAN框架下的双分支生成器模型，其整体架构如图1所示。其核心思想是分别建模语音的频谱特征和谐波结构，然后进行融合。 ...

📄 High-Fidelity Speech Enhancement Via Discrete Audio Tokens #语音增强 #自回归模型 #语音大模型 #数据集 #预训练 ✅ 7.5/10 | 前25% | #语音增强 | #自回归模型 | #语音大模型 #数据集 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Luca A. Lanzendörfer（未明确标注，但根据作者列表顺序推测） 通讯作者：未说明 作者列表：Luca A. Lanzendörfer (ETH Zurich), Frédéric Berdoz (ETH Zurich), Antonis Asonitis (ETH Zurich), Roger Wattenhofer (ETH Zurich) 💡 毒舌点评 亮点在于其架构的“暴力美学”——用一个足够大的语言模型（1B LLaMA）和足够高分辨率的离散表示（44.1kHz DAC），将复杂的语音增强多阶段流水线简化为直接的token-to-token转换，并取得了SOTA结果，为“大力出奇迹”在语音领域提供了又一例证。短板在于这种简化高度依赖预训练的高质量编解码器（DAC）和计算资源，论文对模型计算成本、推理延迟等实际部署考量几乎只字未提，且在处理特定失真（如DNS挑战中的背景噪声抑制）时并未展现出压倒性优势。 🔗 开源详情 代码：论文明确表示“We release our codebase and model checkpoints”，并提供了Demo网站链接 https://lucala.github.io/dac-se1/。但未直接给出代码仓库URL。 模型权重：承诺发布模型检查点。 数据集：使用了公开数据集（HiFiTTS-2, MUSAN, DEMAND等），但论文中生成的训练数据集本身是否公开未说明。 Demo：提供了在线演示网站。 复现材料：论文给出了模型架构、训练数据来源、两阶段训练策略、主要超参数（模型大小、码本等）。但未提供完整的训练配置文件、损失函数具体实现、推理脚本等细节。 论文中引用的开源项目：依赖的开源工具/模型包括DAC编码器/解码器、LLaMA架构、Whisper-Large（用于计算WER）。 📌 核心摘要 这篇论文旨在解决现有基于语言模型的语音增强方法局限于低采样率（16kHz）和依赖复杂多阶段架构的问题，以实现高保真（44.1kHz）的语音增强与带宽扩展。 方法核心是提出一个名为DAC-SE1的单阶段框架，该框架直接使用44.1kHz的DAC离散音频令牌作为输入和输出，由一个基于LLaMA的1B参数自回归模型进行处理，无需额外的语义编码器或多阶段流水线。 与已往工作相比，新方法的新颖之处在于：1）直接操作高分辨率DAC令牌，保留了精细的声学细节；2）架构高度简化，统一了增强与带宽扩展任务；3）通过扩大模型参数和训练数据规模来提升性能。 主要实验结果表明，DAC-SE1在HiFiTTS-2测试集的客观指标（如DNSMOS OVRL: 2.95）和MUSHRA主观评分（58.3分）上均优于LLaSE-G1和VoiceFixer等基线。在ICASSP 2022 PLC挑战中，其PLCMOS分数达到4.34，超越了所有对比方法。在ICASSP 2023 DNS挑战中，性能与最强基线持平。 该工作的实际意义在于证明了通过简单、可扩展的自回归语言模型范式，结合高质量的音频离散表示，能够实现统一且高质量的语音增强任务，为未来构建通用音频生成模型提供了新思路。 主要局限性是论文未详细讨论模型的计算效率、训练成本以及在不同噪声类型或极低信噪比条件下的泛化能力，且其性能提升部分依赖于庞大的模型参数，可能限制了实际部署场景。 ...

📄 HyFlowSE: Hybrid End-To-End Flow-Matching Speech Enhancement via Generative-Discriminative Learning #语音增强 #流匹配 #端到端 #轻量化模型 🔥 8.0/10 | 前25% | #语音增强 | #流匹配 | #端到端 #轻量化模型 学术质量 6.2/7 | 选题价值 1.6/2 | 复现加成 0.3 | 置信度 高 👥 作者与机构 第一作者：Yang Zhang（杭州电子科技大学 通信工程学院） 通讯作者：Wenbin Jiang（杭州电子科技大学 通信工程学院，邮箱：wbjiang@hdu.edu.cn） 作者列表：Yang Zhang（杭州电子科技大学 通信工程学院），Wenbin Jiang（杭州电子科技大学 通信工程学院），Zhen Wang（杭州电子科技大学 通信工程学院），KaiYing Wu（杭州电子科技大学 通信工程学院），Wen Zhang（杭州电子科技大学 通信工程学院），Fei Wen（上海交通大学 信息科学与电子工程学院） 💡 毒舌点评 亮点在于巧妙地利用可微分ODE这一技术“胶水”，将本应用于生成建模的流匹配与用于精细监督的判别损失无缝融合，以端到端方式显著提升了轻量级模型的性能，方案优雅且有效。短板在于其创新主要停留在训练策略的集成上，网络架构本身（NCSN++）并无新意，且论文缺乏对判别损失如何具体指导向量场学习这一内在机制的更深入剖析。 🔗 开源详情 代码：论文中提供了项目主页链接 https://zhangyang77.github.io/HyFlowSE/，可用于访问音频样本等材料。论文中未明确提及代码仓库链接。 模型权重：未提及是否公开预训练模型权重。 数据集：使用了公开数据集（VoiceBank+DEMAND, WSJ0, DEMAND, CHiME3），并说明了部分数据生成方式（使用StoRM开源代码）。未提及是否提供预处理后的数据。 Demo：项目主页提供了音频样本，可作为在线演示。 复现材料：论文给出了模型参数规模、损失函数权重（α, β, w值）、优化器及学习率。但缺少batch size、训练步数/轮数、数据预处理细节、硬件环境等关键复现信息。 论文中引用的开源项目：引用了用于生成WSJ0数据集的 StoRM 开源代码，以及用于可微分ODE求解的 torchdiffeq 库。 总结：论文提供了部分复现信息和展示页面，但未声明开源计划，也未提供完全复现所需的全部细节。 📌 核心摘要 解决的问题：纯生成式的流匹配语音增强模型在追求轻量化（参数少）和高效率（低NFE）时，性能会显著下降，而现有的级联或两阶段解决方案会引入额外的推理步骤，增加计算开销，违背了流匹配高效推理的初衷。 方法核心：提出HyFlowSE框架，其核心是将标准的条件流匹配（CFM）生成损失与一个由L1损失、多分辨率STFT谱收敛损失和对数STFT幅度损失组成的判别性损失相结合。通过利用可微分的神经常微分方程（Neural ODE）求解器，这两个损失可以在一次前向传播中计算，并实现端到端联合优化。 与已有方法的新颖之处：与需要级联多个流模型（如CasFlowSE）或依赖预训练判别模型的方法不同，HyFlowSE在单一模型和单次推理流程中集成了生成与判别目标，不增加推理时的NFE，实现了效率与性能的兼得。 主要实验结果：在VoiceBank+DEMAND数据集上，仅5.2M参数的HyFlowSE(T)模型在PESQ（3.21）上超过了65.6M参数的FlowSE（3.12）。在更具挑战性的WSJ0+CHiME3低信噪比（L）场景下，HyFlowSE(T)（5.2M）的PESQ达到3.09，大幅超越27.8M参数的FlowSE(M)（2.64）和CasFlowSE（2.64）。在混响条件下（WSJ0+Reverb），其PESQ（2.95）也优于FlowSE(M)（2.45）和CasFlowSE（2.80）。 实际意义：为在资源受限设备上部署高性能语音增强系统提供了新路径。它表明通过精心的训练目标设计，可以用更小的模型达到甚至超越大模型的性能，对降低算法落地成本和功耗有直接价值。 主要局限性：网络骨干（NCSN++）并非新颖设计，创新性集中在训练目标上。论文未详细分析混合损失中各项权重的敏感性及其背后的机理。实验未与更多非流匹配的轻量级判别模型（如DCCRN等）进行对比，难以全面评估其在轻量化模型谱系中的绝对位置。 🏗️ 模型架构 HyFlowSE是一个端到端的语音增强框架，其整体架构如图1所示。 ...

📄 I-DCCRN-VAE: An Improved Deep Representation Learning Framework for Complex VAE-Based Single-Channel Speech Enhancement #语音增强 #变分自编码器 #预训练 #鲁棒性 ✅ 7.5/10 | 前25% | #语音增强 | #变分自编码器 | #预训练 #鲁棒性 学术质量 7.0/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Jiatong Li（Carl von Ossietzky Universität Oldenburg， 医学物理与声学系及 Hearing4all 卓越集群） 通讯作者：未说明（两位作者并列提供邮箱，未明确指定通讯作者） 作者列表：Jiatong Li（Carl von Ossietzky Universität Oldenburg， 医学物理与声学系及 Hearing4all 卓越集群）、Simon Doclo（Carl von Ossietzky Universität Oldenburg， 医学物理与声学系及 Hearing4all 卓越集群） 💡 毒舌点评 本文像一位严谨的工程师，将VAE语音增强系统的“后门”（跳跃连接）焊死，强迫其从潜在空间“真正学习”，并用β-VAE的旋钮精细调节学习内容，结果泛化能力显著提升。然而，改进更多是“修补”与“优化”现有架构，缺乏从根本上改变游戏规则的洞见，且未能与当前生成模型SOTA（如基于扩散模型的方法）同台竞技，使其影响力打了折扣。 ...

ICASSP 2026 - 语音增强 共 75 篇论文 ← 返回 ICASSP 2026 总览 排名 论文 评分 分档 🥇 A Lightweight Fourier-Based Network for Binaural Speech Enha 8.5分 前25% 🥈 DiTSE: High-Fidelity Generative Speech Enhancement via Laten 8.5分 前10% 🥉 Towards Lightweight Adaptation of Speech Enhancement Models 8.5分 前25% 4. FastEnhancer: Speed-Optimized Streaming Neural Speech Enhanc 8.5分 前25% 5. DisContSE: Single-Step Diffusion Speech Enhancement based on 8.5分 前10% 6. Sidon: Fast and Robust Open-Source Multilingual Speech Resto 8.5分 前25% 7. Spike-Driven Low-Power Speech Bandwidth Extension 8.0分 前25% 8. MAGE: A Coarse-to-Fine Speech Enhancer with Masked Generativ 8.0分 前25% 9. Deep Learning-Based Joint Optimization of Adaptive Feedback 8.0分 前25% 10. HyFlowSE: Hybrid End-To-End Flow-Matching Speech Enhancement 8.0分 前25% 11. HCGAN: Harmonic-Coupled Generative Adversarial Network for S 8.0分 前50% 12. Exploring Resolution-Wise Shared Attention in Hybrid Mamba-U 8.0分 前25% 13. Mixture To Beamformed Mixture: Leveraging Beamformed Mixture 8.0分 前25% 14. Modeling Strategies For Speech Enhancement in The Latent Spa 8.0分 前50% 15. LAFUFU: Latent Acoustic Features For Ultra-Fast Utterance Re 8.0分 前25% 16. Influence of Clean Speech Characteristics on Speech Enhancem 8.0分 前25% 17. LipsAM: Lipschitz-Continuous Amplitude Modifier for Audio Si 7.5分 前25% 18. MSANET: Multi-Scale Semantic Aggregation Network for Brain-A 7.5分 前25% 19. Bone-Conduction Guided Multimodal Speech Enhancement with Co 7.5分 前25% 20. The 3rd Clarity Prediction Challenge: A Machine Learning Cha 7.5分 前25% 21. Two-Stage Language Model Framework for Acoustic Echo Cancell 7.5分 前25% 22. E2E-AEC: Implementing An End-To-End Neural Network Learning 7.5分 前25% 23. SpatialNet-Echo: Real-Time Acoustic Echo Cancellation via In 7.5分 前25% 24. A Stabilized Hybrid Active Noise Control Algorithm of GFANC 7.5分 前25% 25. Enhancing Speech Intelligibility Prediction for Hearing Aids 7.5分 前25% 26. H-nnPBFDAF: Hierarchical Neural Network Partitioned Block Fr 7.5分 前25% 27. Joint Deep Secondary Path Estimation and Adaptive Control fo 7.5分 前25% 28. Enhancing Noise Robustness for Neural Speech Codecs Through 7.5分 前25% 29. Low-Bandwidth High-Fidelity Speech Transmission with Generat 7.5分 前25% 30. From Diet to Free Lunch: Estimating Auxiliary Signal Propert 7.5分 前25% 31. Beamforming Using Virtual Microphones for Hearing Aid Applic 7.5分 前50% 32. I-DCCRN-VAE: An Improved Deep Representation Learning Framew 7.5分 前25% 33. Do We Need EMA for Diffusion-Based Speech Enhancement? Towar 7.5分 前50% 34. Hair Noise Analysis and Mitigation for Smart Glasses Audio C 7.5分 前25% 35. Are Modern Speech Enhancement Systems Vulnerable to Adversar 7.5分 前25% 36. UJCodec: An End-to-end Unet-Style Codec for Joint Speech Com 7.5分 前25% 37. Spatial Covariance Matrix Reconstruction for Speech Enhancem 7.5分 前25% 38. Training-Free Inference-Time Scaling for Audio Source Separa 7.5分 前25% 39. Forward Convolutive Prediction for Frame Online Monaural Spe 7.5分 前50% 40. MeanFlowSE: One-Step Generative Speech Enhancement via Condi 7.5分 前10% 41. FlowSE-GRPO: Training Flow Matching Speech Enhancement via O 7.5分 前25% 42. Aligning Generative Speech Enhancement with Perceptual Feedb 7.5分 前25% 43. PG-SE: Predictive Acceleration and Correction for Generative 7.5分 前25% 44. Dynamically Slimmable Speech Enhancement Network with Metric 7.5分 前25% 45. Lightweight Phoneme-Conditioned Bandwidth Extension for Body 7.5分 前25% 46. Fast-ULCNet: A Fast and Ultra Low Complexity Network for Sin 7.5分 前25% 47. ParaGSE: Parallel Generative Speech Enhancement with Group-V 7.5分 前25% 48. High-Fidelity Speech Enhancement Via Discrete Audio Tokens 7.5分 前25% 49. DISSR: Disentangling Speech Representation for Degradation-P 7.5分 前25% 50. Ranking The Impact of Contextual Specialization in Neural Sp 7.5分 前25% 51. BSMP-SENet:Band-Split Magnitude-Phase Network for Speech Enh 7.0分 前25% 52. DECAF: Dynamic Envelope Context-Aware Fusion for Speech-Enve 7.0分 前25% 53. DAT-CFTNet: Speech Enhancement for Cochlear Implant Recipien 7.0分 前50% 54. Acoustic Teleportation Via Disentangled Neural Audio Codec R 7.0分 前25% 55. Reference Microphone Selection for Guided Source Separation 7.0分 前50% 56. Low-Latency Audio Front-End Region-of-Interest Beamforming f 7.0分 前25% 57. AmbiDrop: Array-Agnostic Speech Enhancement Using Ambisonics 7.0分 前50% 58. Joint Multichannel Acoustic Feedback Cancellation and Speake 7.0分 前25% 59. Gdiffuse: Diffusion-Based Speech Enhancement with Noise Mode 7.0分 前25% 60. An Efficient Neural Network for Modeling Human Auditory Neur 7.0分 前25% 61. Shortcut Flow Matching for Speech Enhancement: Step-Invarian 7.0分 前25% 62. Generalizability of Predictive and Generative Speech Enhance 7.0分 前50% 63. Mambaformer: State-Space Augmented Self-Attention with Downu 7.0分 前25% 64. Auditory-Inspired Transformer for Binaural Speech Enhancemen 7.0分 前25% 65. A State-Dependent Markov Diffusion Process for Generative Sp 6.5分 前25% 66. Confidence-Based Filtering for Speech Dataset Curation with 6.5分 前50% 67. Sampling-Rate-Agnostic Speech Super-Resolution Based on Gaus 6.5分 前25% 68. Low-Frequency Harmonic Control for Speech Intelligibility in 6.5分 前50% 69. What the student learns in knowledge distillation: A subspac 6.5分 前50% 70. MeanSE: Efficient Generative Speech Enhancement with Mean Fl 6.5分 前25% 71. On The Design of Efficient Neural Methods for Geometry-Agnos 6.5分 前50% 72. Position-Invariant Fine-Tuning Of Speech Enhancement Models 6.5分 前50% 73. Stereophonic Acoustic Echo Cancellation Using an Improved Af 6.0分 前50% 74. Towards Real-Time Generative Speech Restoration with Flow-Ma 6.0分 前50% 75. Is Phase Really Needed for Weakly-Supervised Dereverberation 6.0分 前50% 📋 论文详情 🥇 A Lightweight Fourier-Based Network for Binaural Speech Enhancement with Spatial Cue Preservation 🔥 8.5/10 | 前25% | #语音增强 | #深度学习 | #轻量级模型 #空间音频 ...