论文解读

用脉冲竞争选专家:SpikeMoE 如何兼顾稀疏计算与缺失模态

论文针对传统 softmax 门控与脉冲计算不兼容以及多模态输入缺失时选路脆弱的问题,提出基于侧抑制与不应期的 k-WTA 路由器和两阶段缺失模态补全,在视觉、语言与情感分析任务上以较低理论能耗达到与人工网络可比的精度,但结论依赖特定编码器、缺失模拟方式与理论能耗估计。

 · 更新于 2026-11-04 · 约 20 分钟 · 9712 字 阅读 →
论文解读

SwinDS-BWE:用局部窗口生成器与尾部事件判别器做语音带宽扩展

针对高频重建局部难、平均型监督易漏掉稀疏失败的问题,该工作用 Swin-1D 格型生成器做幅度相位精修,并用三个轻量决策科学判别器补尾部与过亮监督,在 VCTK 与 MLS 法语上以更少参数取得更高的 NISQA-MOS,但 SI-SDR 等能量指标并未全面占优且实时因子略有增加。

 · 更新于 2026-11-04 · 约 19 分钟 · 9099 字 阅读 →
论文解读

面向端侧部署的音频伪造检测压缩:跨域蒸馏与移动引导剪枝如何分工

该文针对 XLSR-AASIST 这类 3 亿参数量级检测器难以部署的问题,用跨域知识蒸馏补泛化监督、用移动分数引导结构化剪枝保关键结构,在 90% 稀疏度下做到 31.9M 参数和 23.3G FLOPs 且多数据集平均只上升 1.30% EER。

 · 更新于 2026-11-04 · 约 19 分钟 · 9019 字 阅读 →
论文解读

加深不加参:只循环精炼类别标记的音频频谱 Transformer

针对音频片段分类需要跨时间整合但加层代价大的问题,LAST 用 6 个共享块先做一次全量编码再只循环更新类别标记,在 AudioSet 上以 10 次通过达到 0.3450 mAP 并同时减少参数与计算量,代价是每轮通过数需单独训练且增益依赖只更新类别标记的设计。

 · 更新于 2026-11-04 · 约 17 分钟 · 8275 字 阅读 →
论文解读

把思考藏进隐状态:AURAL 如何用多路径分块推理换来更快首字应答

针对语音语言模型中显式思维链延迟高且难以表达细粒度声学线索的问题,AURAL 用高斯混合隐状态加联合块预测做两阶段训练,在 Qwen2.5-Omni 上把首个答案 token 时间从 1.22 秒降到 0.10 秒,代价是需要先构造 68.3 万条简洁思维链监督并依赖质量门控奖励来调节推理深度。

 · 更新于 2026-11-04 · 约 19 分钟 · 9403 字 阅读 →
论文解读

用反馈调制输入再稀疏计算:DuSpaR 如何省掉一半以上的循环计算

针对端侧语音推理中循环层每步稠密矩阵乘开销大的问题,DuSpaR 用前馈加反馈双状态回路调制输入并对矩阵乘向量做 ReLU 稀疏,在相近参数下比 GRU 在关键词识别和语义理解上省算力且精度更高,在语音增强上省约一半算力并保持质量,但稀疏收益依赖输入分布与部署是否支持跳零。

 · 更新于 2026-11-04 · 约 17 分钟 · 8461 字 阅读 →
论文解读

一步走完转换:把内容编码器也装进平均流蒸馏里

针对一步零样本语音转换中内容编码器耗时约为主流程十倍的问题,MeanVoiceFlow2 用教师 MeanVoiceFlow 做转换蒸馏并联合训练轻量内容编码器与平均速度网络,再以真实数据重建、扩散判别器混合对抗和教师增强条件扩充提升真实感与解耦,在 VCTK 上自然度高于教师且推理约快 9 倍、说话人相似度基本持平。

 · 更新于 2026-11-04 · 约 22 分钟 · 10743 字 阅读 →
论文解读

把扰动关进掩蔽阈里:STM 如何用硬约束换掉反复调参的质量损失

针对只需数秒语音即可克隆的 VC/TTS 滥用问题,STM 把扰动放在频域幅度谱上并用心理声学掩蔽阈做硬钳位,仅优化扰动去逼近目标说话人嵌入,在白盒实验中以 80 步迭代取得可比或更高的声纹拒绝率,同时把黑盒可迁移保护保留在 71.50% 而把生成耗时降到 2.19 对 3.48 秒每句的量级。

 · 更新于 2026-11-04 · 约 22 分钟 · 10879 字 阅读 →
论文解读

不动原模型做唤醒词:用正交子空间从预训练 ASR 里取出紧凑编码器

论文研究不做梯度微调能否直接用预训练 ASR 编码器做说话人无关唤醒词检测,并用 SliceGPT 式 PCA 结构化剪枝把编码器通道减半,证据是 50% 剪枝时参数约减 40% 而 EER 仅温和上升,但随机保留同等维度会使 EER 恶化到 40% 以上。

 · 更新于 2026-11-04 · 约 21 分钟 · 10197 字 阅读 →
论文解读

不等目标前缀也能写候选:As2d 把音频本身当作起草依据

针对手机上音频已预填而完整回答仍需逐词生成的按需理解任务,As2d 让音频条件起草者脱离目标已验证前缀独立推进并由目标验证纠正,在四机七数据集上把合并语音识别吞吐相对纯目标解码提高 42 到 76%,代价是候选供给不足时仍需目标单步推进且增益依赖覆盖率与到达时机。

 · 更新于 2026-11-04 · 约 21 分钟 · 10398 字 阅读 →
论文解读

音频注意力可在语言模型运行前被线性读出:先验排序与两段式 Triage

针对一分钟语音变成 750-1500 个音频 token 且语言模型浅层仍高度关注音频的问题,用编码器输出的闭式线性映射预测全层注意力排序并在模型前剪枝,转录用分箱覆盖、选择题再在第 2 层做精度融合校正,保守预算下与全音频差距控制在小范围内,激进预算下全面领先可运行基线,代价是线性先验在两类 Qwen-Audio 模型上失效且需用漂移筛查区分。

 · 更新于 2026-11-04 · 约 18 分钟 · 8981 字 阅读 →
论文解读

超声数据太多存不下:用边缘端蝙蝠活动检测器先拦住噪声

针对被动声学监测每夜数十 GB 超声数据的问题,该工作把短时傅里叶特征加轻量谱减与全量卸载到 MVP 加速器的 8 比特 CNN 做成边缘门控,在空间异域低流行率下报告 AUC-ROC 0.9748 并抑制 99.4% 噪声帧,代价是只保留 65.3% 蝙蝠叫声且 100 毫秒窗仍需 104.00 ms 端到端延迟。

 · 更新于 2026-11-04 · 约 19 分钟 · 9339 字 阅读 →
论文解读

没有处处最优的识别器:伊比利亚语种的准确率、速度与覆盖如何互相牵制

该研究在 85.37 小时的五种伊比利亚语言加德语土耳其语对照上,用宏平均词错误率与实时因子比较十个开权重模型和一个商业 API,发现商用与受限模型领先、可商用开权重中 omniASR 系列与 Whisper 领先,而巴斯克语低覆盖与男性优势的性别差异构成主要代价。

 · 更新于 2026-11-04 · 约 17 分钟 · 8319 字 阅读 →
论文解读

去掉参考文本还要更快:Tacit-TTS 用掩码并行替代自回归克隆

Tacit-TTS 针对 IndexTTS2 自回归语义解码慢且已有并行方案依赖参考文本的问题,用掩码非自回归生成加免训练语速估计与重流蒸馏实现免文本克隆,跨语言证据显示英文目标相似度 0.789 且词错率 0.10%,代价是中文指标与内容准确率仍低于教师模型。

 · 更新于 2026-11-04 · 约 20 分钟 · 9724 字 阅读 →
论文解读

听懂语气却用不上:把语音思维链搬进循环解码器深度

针对能听出副语言线索却不会用它规划回复的感知推理脱节问题,LoopSLM 用权重共享循环块加每轮声学重锚定和两阶段训练实现无文本思维链直接回复,证据是推理精度提升超 20 个点且生成词数减少 64.5%,代价是提示处理与每解码步都要跑 4 轮循环带来的执行深度增加。

 · 更新于 2026-11-04 · 约 11 分钟 · 5244 字 阅读 →
论文解读

把脉冲稀疏变成可执行的省电:Zephyr 如何让去噪网络同时算对异构算子

针对耳机助听器等电池供电设备的语音去噪功耗问题,Zephyr 把 Spiking-FullSubNet 改写为 INT8 硬件友好版本并配以稀疏感知的复用 PE 阵列,在 Intel N-DNS 上报告 14.54 dB 与 52.9nJ 每帧的估算能耗,代价是相对浮点原版约 0.66 dB 下降且能耗为 45nm 估算而非实测。

 · 更新于 2026-11-04 · 约 19 分钟 · 9086 字 阅读 →
论文解读

长草稿走不远:用声学进度递推撑住 ASR 推测解码的后半程

针对对齐感知草稿在加长草稿 horizon 后接受长度饱和的问题,论文用递推的声学进度状态给音频交叉注意力加高斯偏置并做变长联合训练,在五个 ASR 测试集上以无损方式报告了 0.6B 目标 1.657×与 1.7B 目标 1.227×的宏平均端到端加速,代价是引入进度预测器与强制对齐监督。

 · 更新于 2026-11-04 · 约 17 分钟 · 8504 字 阅读 →
论文解读

离线分离模型的延迟不是输入长度:读出位置决定流式下限

该文把离线音乐分离模型不改权重地按单跳滑窗流式运行,用读出位置控制算法延迟,证明窗口长度处存在质量拐点,并在 23 与 93 毫秒下用 HT-Demucs 与 SCNet 达到专用实时模型相当的分离质量,代价是除 HT-Demucs 外仍高于实时计算量。

 · 更新于 2026-11-04 · 约 17 分钟 · 8470 字 阅读 →
论文解读

因果约束下做扩散:DiffVQE2 如何把回声噪声联合控制做到低延迟

针对免提通话需要因果低延迟联合回声噪声控制的问题,DiffVQE2 用因果卷积加单向 GRU 改造混合扩散框架并辅以有限前视,在 ICASSP 2023 AEC 盲测上以更低算力取得更高的主观 MOS,但客观双讲指标仍有代价。

 · 更新于 2026-11-04 · 约 18 分钟 · 8694 字 阅读 →
论文解读

本地学斜率、全局排步骤:少步语音流映射如何避开教师轨迹积分

针对流匹配语音合成多步积分代价高的问题,论文用出发点局部微分恒等式做蒸馏、用一致性代价图做全局步数规划、用四步模型做对齐自蒸馏,最强证据是 Seed-TTS 上一步达到 1.80% 词错率接近 32 步教师的 1.76%,代价是说话人相似度和预测质量仍低于教师。

 · 更新于 2026-11-04 · 约 16 分钟 · 7760 字 阅读 →