论文解读

不用乘法做语音文本对齐:SPARK 把用户自定义关键词检测搬进脉冲域

针对文本注册的用户自定义关键词检测能耗过高问题,SPARK 用端到端脉冲网络与脉冲驱动注意力做音频文本匹配,在 LibriPhrase 上以 99.07% 的 AUC 和 3.97% 的 EER 维持可比性能,代价是音素级难负样本区分仍弱于重型预训练基线且全脉冲链路依赖特定仿真与能量估算条件。

 · 更新于 2026-10-16 · 约 18 分钟 · 8550 字 阅读 →
论文解读

剪哪一层?语音大模型的编码器与解码器要用不同尺子量

针对语音大模型含编码器与适配器且序列被音频主导的问题,提出编码器在适配器输出处打分与解码器只看文本词元的 SBI,在三模型上以无修复剪层对照显示高剪除率下更稳健,但解码器在约 20% 剪除前仍明显退化且需权衡计算开销。

 · 更新于 2026-10-16 · 约 16 分钟 · 7663 字 阅读 →
论文解读

把 Vocos 搬进脉冲域:稀疏放电如何保住频谱细节

该研究把频域声码器 Vocos 改写为脉冲版本,用脉冲 ConvNeXt 加幅度捷径、自结构蒸馏和时间移位解决二值信息瓶颈,4 步模型在感知质量接近基线时仅消耗约 14.7% 能量,但信号级精度指标仍有差距。

 · 更新于 2026-10-16 · 约 18 分钟 · 8576 字 阅读 →
论文解读

方向重叠时只靠空间线索不够:SpkGuideDOA 用说话人引导增强定位

针对多个移动说话人方向接近时纯空间线索难以稳定归属的问题,SpkGuideDOA 用压缩分辨率的说话人门控对直接路径相位差估计器做残差调制,在仿真与 LOCATA 上报告了更低的漏检与角度误差,代价是引导分支带来的参数增加与联合排列约束。

 · 更新于 2026-10-16 · 约 17 分钟 · 8294 字 阅读 →
论文解读

激活精度说了算:Whisper 端侧量化中权重格式与激活位宽的系统对决

论文在 Whisper tiny.en 与 base.en 上做 80 余组训练后量化对照,证明把激活从 16 位降到 8 位带来 1-3 个百分点词错误率损失,而 NVFP4 的 W4A16 以 6.4 倍压缩做到接近无损,代价是细粒度带来双精度运算需求与 MXFP4 在标准流程下失效。

 · 更新于 2026-10-16 · 约 16 分钟 · 8003 字 阅读 →
论文解读

注意力块减半仍可用:逐头通道剪枝如何用二阶分数留住重要维度

该文针对音频 Transformer 注意力块提出逐头独立的通道级结构化剪枝并用 Fisher 信息打分,在注意力参数稀疏 60% 时仍保持接近整头剪枝的分类与识别性能,但逐头剪枝的推理加速幅度小于整头剪枝且翻译任务下降更大。

 · 更新于 2026-10-16 · 约 21 分钟 · 10349 字 阅读 →
论文解读

长语音越转越错:用三种坏音频做减法压住 Whisper 幻觉

针对 Whisper 长语音中静音幻觉、重复循环和内容遗漏互相放大的问题,Whisper-CD 用高斯噪声、静音、全零谱与时间平移三种负信号在解码时做多负例对比减法,在五个英文长语音基准上报告最高在 CORAAL 降低 24.3 个百分点,代价是每步要多算三路解码。

 · 更新于 2026-10-16 · 约 19 分钟 · 9095 字 阅读 →
论文解读

不为每句话建分布:DriftAudio 用边际漂移做一步音频的分布后训练

针对自由文本下每条条件只有极少真实样本而难以估计条件分布的问题,DriftAudio 保留文本条件生成而在冻结特征空间匹配边际分布,从 MeanAudio 出发把 FAD 从 1.68 降到 1.11、FD 从 15.43 降到 12.71,从 FdAudio 出发把 FAD 从 1.22 降到 0.99,代价是部分起点上的 IS 与 CLAP 出现回落。

 · 更新于 2026-10-16 · 约 18 分钟 · 8952 字 阅读 →
论文解读

先压缩时间再做全局融合:MambaVoice 的轻量视听歌声分离

针对多人演唱与密集伴奏下的目标歌声分离,MambaVoice 用对数分频音频编码加面部动作门控做条件,再以先 Mamba 后 Transformer 的混合主干建模,报告在 Acappella 未见未闻测试上以 16.2M 参数取得 14.18 dB SDR,并在 URSing 跨域与推理耗时上给出对照,代价是强干扰下仍略低于 VoViT 基线且主观评测样本 …

 · 更新于 2026-10-16 · 约 18 分钟 · 8736 字 阅读 →
论文解读

用一帧延迟换真流式:TinyCall 在 2.3 kbps 下的因果编码与标量量化安排

TinyCall 针对窄带应急语音在 2.3 kbps 下采用因果 SEANet 编码器加 Vocos 式频谱解码器与残差有限标量量化实现流式重建,流式相对离线仅从 PESQ 1.3197 降到 1.2994,但伪前视引入一帧算法延迟且未完全消除边界失真。

 · 更新于 2026-10-16 · 约 20 分钟 · 9662 字 阅读 →
论文解读

把逐帧检索换成一步速度场:在 WavLM 空间学习 kNN 传输

该研究用条件流匹配网络回归 kNN 生成的源到伪目标位移,以交叉注意力与 FiLM 注入目标说话人条件并比较三条高斯路径,在 LibriSpeech 上以单步推理改善可懂度与估计质量,代价是目标说话人验证相似度低于 kNN 与音素幻觉器。

 · 更新于 2026-10-16 · 约 14 分钟 · 6862 字 阅读 →
论文解读

不重编音频也能验声:复用编码器状态删掉无据事件提及

针对大音频语言模型在字幕中提到输入中不存在声音事件的问题,REVE 复用目标模型已算出的编码器帧状态做两尺度验证,在 AudioSet 上开发集召回约束下删掉 92.9% 无据提及,只增加 3.38M 参数和 0.57 ms 完整验证延迟。

 · 更新于 2026-10-16 · 约 16 分钟 · 7925 字 阅读 →
论文解读

边想边说:用异步进度语音盖住推理静音的口语模型

针对串行先想后说导致长时间无声等待的问题,该工作用推理主路加轻量报幕支路的异步结构,在保持串行推理问答精度基本相当的同时,把用户可感知的静音大幅压低,代价是需要额外的报幕生成与动态调度。

 · 更新于 2026-10-16 · 约 18 分钟 · 9015 字 阅读 →
论文解读

先分对白再分音乐音效:LiteCASS 用两级子带 U-Net 做立体声实时分离

针对立体声电影音频要同时分出对白、音乐、音效并保住空间感的问题,LiteCASS 用确定性子带重排加两级紧凑 U-Net 做掩码分离,在 DnR v3 立体声扩展上以 1.06 M 参数和 0.72 G 每秒运算量取得平均 SI-SDR 最高,代价是语音感知指标仍落后于更大基线与视觉辅助系统。

 · 更新于 2026-10-16 · 约 19 分钟 · 9469 字 阅读 →
论文解读

在只允许二维卷积的神经形态芯片上做音视融合:NAVIR 的分解与受限解码

针对工业噪声下纯音频识别崩溃的问题,NAVIR 用逐帧空间编码加时序卷积的分解结构适配 BrainChip AKD1000,在 GRID 噪声测试下量化融合模型取得未见说话人 14.0% 与重叠说话人 3.3% 词错率,代价是未见说话人纯唇读仍高达 35.3% 且音视模型在片上吞吐下降。

 · 更新于 2026-10-16 · 约 17 分钟 · 8497 字 阅读 →
论文解读

共享一块做精修:ADER 用早停深度与单专家适配省掉冗余迭代

针对固定深度对所有语音做同样多次精修的浪费,ADER 用共享 TS-Transformer 块循环精修并以深度控制器硬早停加每步单专家残差适配,在 VCTK-DEMAND 上以平均 2.15 次迭代达到 WB-PESQ 3.37,代价是相对固定 3 步共享块仍有约 2.6% 的感知质量下降。

 · 更新于 2026-10-16 · 约 17 分钟 · 8386 字 阅读 →
论文解读

不碰权重只改掩码:BLINC 用盲估计双峰分布做免训练校准

针对掩码型语音增强在域偏移下掩码双峰性退化的问题,BLINC 冻结模型并用直方图匹配把预测掩码重映射到由含噪信号盲特征决定的双峰目标分布,在几乎不增加耗时的条件下提升了感知质量,但以信号级指标下降和无法修复排序错误为代价。

 · 更新于 2026-10-16 · 约 15 分钟 · 7245 字 阅读 →
论文解读

把二次方的强制对齐压进终端设备:原地计算与可解释剪枝

针对长语音强制对齐的二次方内存与时间瓶颈,论文用分治原地计算的赫希伯格维特比算法保证结果不变,再用随机游走先验加转写精度界做剪枝,三小时音频在单核中央处理器上以兆字节级内存完成对齐,剪枝后进一步提速但依赖精度假设。

 · 更新于 2026-10-16 · 约 19 分钟 · 9476 字 阅读 →
论文解读

用圆环记时间:CircleMatch 以千级参数做关键词识别

CircleMatch 针对极小参数关键词识别,用分频带压缩编码加每类 5 个原型匹配,再以无参数圆环统计与有序路径分数汇总时序,在 GSC 与 MSWC 多词表上以约 1k-10k 参数取得可比精度,代价是大词表与大模型绝对精度仍占优且部分对比协议并不一致。

 · 更新于 2026-10-16 · 约 23 分钟 · 11158 字 阅读 →
论文解读

冻住检测器再多算一遍:CoReLoop 如何把循环输入做对

针对未见攻击泛化难且不扩充数据、不改动原参数的问题,CoReLoop 用 LoopBridge 构造循环输入、循环 LoRA 加门控更新与 ExitBridge 对齐分类器,在 14 个跨域测试集上 24 层模型以约 10M 可训练参数把池化等错误率从 4.85% 降到 3.74%,自适应停止以平均 1.18 次通过达到 3.73%,代价是第二次通过仍需完整 …

 · 更新于 2026-10-16 · 约 9 分钟 · 4181 字 阅读 →