论文解读

BridgeCodec:在冻结编解码器之间做潜在特征搬运的低码率互通框架

BridgeCodec 要解决冻结的 8 kHz 源编码器与 48 kHz 目标解码器无法直接通信的问题,用 Schrödinger Bridge 在潜在空间做最优传输并以 Mamba 增强的 U-Net 建模长时依赖,在 1 kbps 传输下实现 48 kHz 重建,代价是需要两阶段训练且高频内容带有生成性幻觉。

 · 约 20 分钟 · 9744 字 阅读 →
论文解读

把重叠语音对准到声源:SonicWorld 如何做空间问答

针对重叠与运动下指定声源在指定时刻位置难定位的问题,SonicWorld 用持续声源状态组织声学证据,在 Sonic-Bench 上把单声源方向准确率从 43.75% 提升到 50.00%,代价是需要完整片段离线推理与两阶段微调。

 · 约 18 分钟 · 8569 字 阅读 →
论文解读

从肌肉电信号合成语音:混沌约束与轻量状态空间如何分工

论文针对肌电到语音合成中过度平滑与模型臃肿问题,提出融合局部注意力与状态空间的轻量编码器并用混沌损失约束时序动态,在英汉数据上以更少参数改善频谱重建与可懂度,但混沌计算只在训练时付出代价且主观差异未达显著水平。

 · 更新于 2026-10-15 · 约 19 分钟 · 9415 字 阅读 →
会议总览

interspeech-2026 论文深度解读

共收录 1354 篇 interspeech-2026 会议论文的 Reader 深度解读

 · 更新于 2026-10-15 · 约 2613 分钟 · 1309023 字 阅读 →
论文解读

不只抵消噪声,还要主动补回语音:主动语音增强如何把扬声器变成修复器

论文把问题定义为让麦克风处物理叠加信号逼近干净目标的主动声重构,用 Transformer-Mamba 生成抵消器信号并以多项声学损失联合训练,在去噪、去混响、去削波三类合成声学通道实验中报告了高于适配后传统与深度主动噪声控制基线的客观分数,但代价是依赖精确仿真通道、未来样点预测和较大生成器参数量。

 · 更新于 2026-10-15 · 约 19 分钟 · 9121 字 阅读 →
论文解读

只用 250 小时学会 67 种语言的声音:掩码预测为何聚类说话人强、认语言弱

该工作用 47.88M 参数的双向 Mamba2 编码器在约 250 小时 67 语言无标注语音上做掩码离散单元预测,在官方评测以说话人聚类 ARI 0.735 超过四个基线,但语言识别 macro-F1 0.073 与字符错误率 0.870 仍明显落后,且后期检查点出现音素泛化退化。

 · 更新于 2026-10-15 · 约 18 分钟 · 8932 字 阅读 →
论文解读

从单标签到多标签:用可控模糊度重做 MSP-Podcast 情感基准与轻量 Mamba 融合

针对自然语音中多情感共存却被多数投票抹掉的问题,该工作把 MSP-Podcast V2.0 的众包投票转为确定性多热标签并控制长尾,再用 MFCC 与 log-mel 双分支 Mamba 融合建模,在 Test1 与 Test2 上微平均 F1 约 0.50 的同时把参数量控制在约 3M 量级,代价是尾部情感在固定阈值下依然难以检出。

 · 更新于 2026-10-15 · 约 21 分钟 · 10155 字 阅读 →
论文解读

近似注意力失焦时:用双向状态空间替换快速注意力的生成式增强

针对 Genhancer 中 FAVOR+ 近似导致聚焦不足与特征多样性下降,论文以保持线性复杂度的 Hydra 替换全局注意力并保留扩张卷积负责局部建模,在 DAPS 真实重录上以 106M 参数在多项指标超越 FAVOR+ 并接近 Softmax 上界,代价是长输入外推与生成幻觉仍需单独验证。

 · 更新于 2026-10-15 · 约 19 分钟 · 9415 字 阅读 →
论文解读

留下局部异常:用状态空间模型与双轴混合重学呼吸音分类

针对呼吸音中短时局部的爆裂音与哮鸣音易被全局自注意平滑掉的问题,论文用蒸馏音频状态空间模型保留中高空间频率,再以高斯平滑约束中间层与双轴切块混合对比学习提升鲁棒性,在 ICBHI 上报告 4 分类 64.48% 与 2 分类 72.57%,代价是引入温度、核尺寸与施加阶段等超参数选择。

 · 更新于 2026-10-15 · 约 20 分钟 · 9542 字 阅读 →
论文解读

把水印藏进音素稳态区:能跟随克隆迁移的 Mamba 主动防御

针对净化后仍能克隆的语音伪造问题,该工作把身份比特藏进 100-1000 Hz 音素稳定区并用 Mamba 编码与对抗净化训练实现迁移,在 11 人 165 条克隆语音上报告近 100% 溯源而 MH-Mamba 净化后保持率报告 92.34% 且代价是需强制对齐与两阶段训练。

 · 更新于 2026-10-15 · 约 16 分钟 · 7772 字 阅读 →
论文解读

状态记忆不够用时,音频编码器如何向 Mamba-2 低头:SAM 的紧凑表征与结构化问答

SAM 用 Mamba-2 替代 Transformer 做音频语言模型主干,以 2.7B 参数在 AudioSet 上报告 21.1 mAP、在 AudioCaps 上报告 17.6 SPICE,并以联合微调音频编码器、保持 64 个紧凑音频 token、加入结构化推理监督为代价换取推理能力从 22.8 到 56.8 的提升。

 · 更新于 2026-10-15 · 约 20 分钟 · 9694 字 阅读 →
论文解读

一步去噪去混响:薛定谔桥轨迹为何要配 Mamba 的状态演化

针对联合去噪去混响,论文用薛定谔桥中间状态训练 Mamba 主干并在退化端单步推理,在真实录音与混响集上取得多项领先,代价是干净对照集上部分语义指标未胜出且需补流式与统计验证。

 · 更新于 2026-10-15 · 约 15 分钟 · 7283 字 阅读 →
论文解读

从划区域到指一点:SPOT-TSE 用距离加方位点查询做目标语音提取

针对固定区域边界敏感与单维度距离或方位重叠歧义问题,SPOT-TSE 用距离加方位连续空间点查询结合空间查询编码与歧义感知训练做多通道提取,在仿真智能眼镜数据上把 D1 到 D3 的 SDR 提升到 14.95、13.94 和 11.05 dB 并把 WER 降到 0.12、0.14 和 0.22,代价是参数量从 0.52M 增加到 1.46M 但运算量下降 …

 · 更新于 2026-10-15 · 约 20 分钟 · 9749 字 阅读 →
论文解读

冻住两端编解码器,只在潜变量之间架桥:BridgeCodec 的低码率跨器互通

针对冻结且结构失配的编码器与解码器无法直接互通的问题,BridgeCodec 用薛定谔桥学习源潜变量到目标潜变量的最优传输并以 Mamba 增强 U-Net 建模长时依赖,在 8 kHz、1 kbps 输入到 48 kHz 重建的极端条件下把 STOI 从 0.23 提升到 0.88、SIM 提升到 0.96,代价是高频生成内容使 WER 略升至 2.11 …

 · 更新于 2026-10-15 · 约 17 分钟 · 8018 字 阅读 →
论文解读

不听也能答:视频基准的视觉捷径与 25 倍音频压缩的补救

论文用单帧静音探针审计 10 个视频基准揭示视觉捷径,再在 LLaVA-OneVision 上外挂语音编码器并以因果 Mamba 周期查询把 25 Hz 音频压到 1 Hz,在过滤后语音与跨模态任务上取得稳定增益而视觉任务基本不受影响,代价是延迟从 1.00 秒升至 1.60 秒。

 · 更新于 2026-10-15 · 约 20 分钟 · 9975 字 阅读 →
论文解读

从场上峰值到声道目标:PyPhonPlan 如何把计划、感知与记忆算成发音

论文要解决任务动力学目标值被事先固定、缺少记忆与感知影响机制的问题,选择用耦合动态神经场生成时变声道目标并用临界阻尼振子求解轨迹,在 1 次基线加 10 次影子跟读加 1 次洗脱的简化仿真中报告跟读峰值拉向 1.56 与洗脱残留偏移负 0.29,代价是输入时序仍需手工指定且仅为一维示例。

 · 更新于 2026-10-15 · 约 19 分钟 · 9496 字 阅读 →
论文解读

缺一块频谱也要补回来:SEMamba++ 用全局、局部与周期偏置做通用语音修复

针对噪声、混响、限带与削波并存的通用语音修复问题,SEMamba++ 以频率 GLP 模块、多分辨率并行时频双路径块与可学习 softplus 映射改进 SEMamba,在 VCTK-GSR 与多个域外集上提升感知质量,而代价是频率轴线性操作限制了采样率无关部署。

 · 更新于 2026-10-15 · 约 20 分钟 · 9574 字 阅读 →
论文解读

静态卷积不够用时:用通道内局部注意力给 Mamba 换上动态前端

针对语音识别中 Mamba 用固定深度卷积做局部聚合而缺乏内容自适应的问题,论文把该位置换成因果卷积加通道内局部注意力来动态生成状态空间参数,在 LibriSpeech 和 TED-LIUM 上以更小参数量取得更低词错误率,代价是引入双向结构和注意力窗口等额外设计与解码依赖。

 · 更新于 2026-10-15 · 约 20 分钟 · 9972 字 阅读 →
论文解读

小数据多语言无监督表示:BiMamba2 掩码预测为何说话人聚类强而语种识别弱

该研究用 47.88M 参数的双向 Mamba2 编码器在 250 小时 67 语种无标注语音上做掩码离散单元预测,主检查点以 ARI 0.735 超过四个基线,但语种识别与识别错误率仍明显落后,代价是后期训练出现音素泛化退化与本地诊断失效。

 · 更新于 2026-10-15 · 约 18 分钟 · 8628 字 阅读 →
论文解读

单麦克风既要分开声音又要估计每个声源的房间响应:DAMSEP 的联合做法

DAMSEP 针对单麦克风混叠下丢失空间信息的问题,用分离主干加共享去混响与多声源复数传递函数估计做联合训练,在 HETMIXR 上以可复述的混响重建约束实现分离与近远排序,最强证据是相对 TF-Locoformer 的 SI-SDRi 提升 0.65 dB,代价是需要成对干净与混响监督和固定扫频解码流程。

 · 更新于 2026-10-15 · 约 19 分钟 · 9453 字 阅读 →