论文解读

从平均发放率到分布:用分层离散隐变量逼近人工耳蜗听神经随机响应

该工作用分层向量量化变分自编码器把 Greenwood 频谱映射为每个时频格的 Gamma 分布参数并随机采样出平均发放率神经图,在低中频与静默段复现了原电刺激听神经模型的分布与结构,但高频与跨通道精细时间相关仍有明显误差,而计算时间从近 70 秒降到毫秒级。

 · 更新于 2026-10-16 · 约 18 分钟 · 9013 字 阅读 →
论文解读

只在跨度完备时生成:预训练文本模型做流式逆规范化的读标写路线

该文解决流式语音识别词流需要即时转写为书面形式的问题,用预训练文本到文本模型加读标写策略把生成限制到完备跨度,在越南语 5M 句数据上流式达到 4.18% 与 0.64% 而接近离线 3.63% 与 0.52%,代价是仍缺未来上下文且长跨度需等待完备。

 · 更新于 2026-10-16 · 约 15 分钟 · 7175 字 阅读 →
论文解读

文本很确定、音频很多变:用数据重排让大音频语言模型并行解码

针对大音频语言模型音频序列过长导致逐词元解码延迟高的问题,论文用只改监督微调数据的半自回归块并行加模态感知的动态截断,在保持质量的同时报告最高 3.42 倍的每步词元加速,但语音合成任务加速更保守且资源当前不可用。

 · 更新于 2026-10-16 · 约 19 分钟 · 9051 字 阅读 →
论文解读

不用算整张谱相关面:用耳蜗内毛细胞包络取循环调制

针对机械与水下录音中弱而宽带的循环调制检测问题,论文用 CARFAC 内毛细胞通道包络谱代替 FAM 加 ICMC 的谱相关面,在合成音、CWRU 轴承与 ShipsEar 工作船录音上恢复了主要的低频循环线,并把同任务墙钟耗时降到约 2 至 37 分之一,代价是真实水下宽带噪声下归一化后噪声基更高。

 · 更新于 2026-10-16 · 约 18 分钟 · 8640 字 阅读 →
论文解读

把对比解码的听觉偏置装进权重:CAAD 如何用伪真值同步蒸馏

针对语音语言模型偏向语言先验而忽视声学证据的问题,CAAD 用元数据锚定的伪真值同步生成教师双路径对比分布并蒸馏给单路径学生,在 Dynamic-SUPERB 上相对标准蒸馏提升约 8% 并在 MCR-BENCH 上把 Shift 降到 79.03,代价是仍需调对比权重 α 并受限于小模型自身能力。

 · 更新于 2026-10-16 · 约 17 分钟 · 8075 字 阅读 →
论文解读

深层只看低频带:TF-Refiner 用可配置带宽兼顾多采样率与计算量

针对固定采样率建模与频点数增加带来计算膨胀的问题,TF-Refiner 把深层分析限定在可配置截止频率以下并用浅层解码加局部复数滤波保持全频带输出,同一套在两种采样率训练的参数可用于未见采样率,代价是推理时仍需按预算选择截止频率的工作点。

 · 更新于 2026-10-16 · 约 22 分钟 · 10921 字 阅读 →
论文解读

执行深度不变时,循环放在哪里才算数:流匹配 TTS 的权重重用布局

在每次网络求值都执行 18 次块调用的共同条件下,论文比较七种权重重用布局,显示 SEQUENCE 以 83.6M 参数对 158.0M 基线在 32 步保持可比可懂度,而共享段位置主要影响 4 步可懂度且只有 Middle 在两数据集两种步数下词错率均排前二。

 · 更新于 2026-10-16 · 约 17 分钟 · 8386 字 阅读 →
论文解读

逐帧早退省算力吗?修直出口梯子后动态路由不再超越静态前沿

该文在因果语音增强梯子上用深监督加逐帧单调修复得到可比静态族,证明路由相对专用静态可高出约 0.11 感知质量但与修复后静态前沿差距小于 0.01,且在 STM32N6 实测时延上动态执行只提供同一梯子内的中间工作点。

 · 更新于 2026-10-16 · 约 18 分钟 · 8965 字 阅读 →
论文解读

弹性时间:用可预测性决定音频潜在帧的去留

针对固定帧率自编码器对不同信息密度分配相同时间预算的问题,该文用轻量潜在预测器度量可预测即冗余并做分段保留与回滚重建,在部署时按保留比例调节平均帧率,代价是边界决策离散且重度压缩下仍需权衡重建质量。

 · 更新于 2026-10-16 · 约 21 分钟 · 10285 字 阅读 →
论文解读

不等长频带不好并行:把选频加窗折进一路打包傅里叶的可逆恒 Q 变换

针对可逆恒 Q 变换各频带时域系数不等长导致的多次核启动与搬运开销,论文用打包实信号傅里叶加固定路由表把选频加窗重排折进带内短逆变换,在同算子同长度基线下把分析合成往返加速两到八倍,代价是实现固定在 65536 点切片并依赖重叠切片处理长信号。

 · 更新于 2026-10-16 · 约 15 分钟 · 7503 字 阅读 →
论文解读

小参数如何靠词典读准多音字:G2PO 的轻量与开放词汇设计

针对普通话多音字消歧依赖大模型且无法预测训练未见读音的问题,G2PO 用 RoBERTa-tiny 加词典融合与词性辅助,在仅 3.99M 参数下在 CPP 上报告 99.15% 准确率并在未见读音上报告 70.79% 零样本准确率,代价是仍依赖外部词典覆盖与 Jieba 生成的词性标签。

 · 更新于 2026-10-16 · 约 19 分钟 · 9133 字 阅读 →
论文解读

给 Whisper 加一句可验证的开头:用锚音频同时压制幻觉与装满 30 秒窗口

针对 Whisper 在静音与非语音上产生虚假转写且 30 秒窗口被短语音浪费的问题,论文用前置锚音频做输入级接地与分隔符,在不改模型不微调下把总体词错误率从 32.18% 降到 13.23% 并把非语音幻觉压到 0.14% 左右,代价是锚短语需按领域挑选且批量失败时要回退重算。

 · 更新于 2026-10-16 · 约 15 分钟 · 7229 字 阅读 →
论文解读

标准注意力最准、高效注意力更快:语音情感识别中的精度与扩展性权衡

该研究在统一多模态架构下比较标准自注意力与 RetNet、LightNet、GSA、FoX、KDA 在 MSP-Podcast 上的情感识别效果,报告显示标准自注意力在 Test1 均值 36.42% 和 Test2 均值 27.19% 上最稳,而高效变体在 400 秒序列上把延迟降到 5.96 ms 量级、显存降到 0.328 GB 量级,代价是识别分数下 …

 · 更新于 2026-10-16 · 约 19 分钟 · 9020 字 阅读 →
论文解读

不把残差量化层加起来:用三维网格保留从粗到细的分离线索

针对量化后多层信息被求和压扁的问题,RVQ-Grid 把每层量化向量堆成三维网格并用双轴循环块分离,在 WSJ0-2Mix 上比 Codecformer 提升 3.6 dB 并以约 6 倍更少的乘加操作达到 8.6% 词错误率,但样本级指标仍低于波形 SepFormer。

 · 更新于 2026-10-16 · 约 15 分钟 · 7358 字 阅读 →
论文解读

先搭架子后修细节:音频分离大模型注意力动态的因果解剖

该研究以推理时因果干预解剖 SAM Audio 的文本条件与自注意力收敛,发现加性注入定语义、交叉注意力修声学、稳定层早收敛,并据此提出免训练的层选择注意力缓存,以约 25% 自注意力计算节省实现最高 6.7 倍的质量保持优势。

 · 更新于 2026-10-16 · 约 19 分钟 · 9328 字 阅读 →
论文解读

不逐字追踪也能选好转写:用一次前向的并行采样做最小贝叶斯风险解码

针对非自回归语音识别无法用历史词消解多路径不确定性的问题,该研究用掩码预测模型的单次前向并行采样估计负词错率期望效用并取最大,在四类语料上显著优于原非自回归解码且保持数十倍于波束搜索的速度,但增加采样数与解码器调用会带来显存与计算代价。

 · 更新于 2026-10-16 · 约 19 分钟 · 9185 字 阅读 →
论文解读

只练适配器:扩散大模型为何更能扛住语音到文本的潜桥瓶颈

论文把语音编码器和大模型都冻结、只训练适配器做语音到文本对齐,在 LibriSpeech 上用扩散解码取得 test-clean 词错误率 2.807% 和约 12.3 倍实时因子,代价是仍依赖 960 小时数据规模和固定解码超参数才能拉开与自回归基线的差距。

 · 更新于 2026-10-16 · 约 17 分钟 · 8115 字 阅读 →
论文解读

双耳助听要在 8 毫秒内降噪:RT-Tango 如何把分布式滤波做轻做快

RT-Tango 针对双耳助听的分布式低功耗实时降噪问题,用 ERB 压缩加分组循环掩码估计加固定跳帧稀疏化和非对称短时傅里叶变换加在线空间统计,在 33.41 MMACs/s 与 8 ms 算法延迟下保持可比的增强质量,而在线流式版本以 SI-SDR 下降为代价实现严格因果运行。

 · 更新于 2026-10-16 · 约 17 分钟 · 8127 字 阅读 →
论文解读

同样 4 比特,不同结局:跨架构 TTS 后训练量化的敏感部件地图

该研究在统一协议下对 3 个核心加 8 个复现加 2 个盲测 TTS 模型做训练后量化,发现相同位宽下自然度损失完全取决于模型特异的敏感部件,最强证据是 4 比特逐通道权重让 Supertonic 下降 2.8 个 UTMOS 而 Kokoro 仅下降 0.07,而代价是逐张量缩放即使在 8 比特也会严重退化且真实部署的延迟与能耗必须逐运行时验证。

 · 更新于 2026-10-16 · 约 18 分钟 · 8865 字 阅读 →
论文解读

编码器也能剪六层:用留一法选层与无标签恢复守住多语识别

针对 whisper-large-v3-turbo 编码器 32 层冗余问题,用留一层词错率变化选出 6 层直接删除,再以无标签英语语音做编码器隐状态均方误差蒸馏恢复,四语平均词错率从基线 18.2% 升至零样本 21.9% 再回落到 20.1%,代价是仍残留 1.9 个百分点的绝对升高和编码器参数减少 118M。

 · 更新于 2026-10-16 · 约 18 分钟 · 8871 字 阅读 →