论文解读

关键词只偶尔出现,为何卷积要每帧都全算一遍:子模型短时记忆的稀疏调度

针对流式关键词检测中逐帧输出带来的池化状态冗余,论文把卷积主干切成以池化结尾的子模型并按静态调度稀疏执行,在保持识别精度的同时把嵌入计算和缓存都压下来,但分类间隔拉大也带来了可测的延迟代价。

 · 更新于 2026-10-15 · 约 21 分钟 · 10436 字 阅读 →
论文解读

留住跨模态共有通道:面向气导骨导融合的 CCAP 结构化剪枝

针对气导易受噪、骨导带宽受限而融合模型又难上穿戴设备的问题,CCAP 用双路零掩蔽相对多模态响应的保持度给卷积通道打分并剪掉低分通道,在 TAPS 上多架构保持 PESQ 与 STOI 的同时把 50% 剪枝 LAU-Net 在 Cortex-M7 上的延迟降到 87 ms,但高剪枝率与单次剪枝加微调仍是主要代价与边界。

 · 更新于 2026-10-15 · 约 18 分钟 · 8575 字 阅读 →
论文解读

床旁直接算语音:把采集、计算与显示装进一台嵌入式设备

针对临床录音需外传处理带来的延迟与信息技术障碍,该演示把韵律分析全流程搬到 NVIDIA Jetson AGX Orin 上本地运行,用麦克风采集、显示器呈现交互仪表盘,并以快于音频时长的本地处理支撑床旁复核与重算,但原文未报告可比精度与延迟数字。

 · 更新于 2026-10-15 · 约 21 分钟 · 10171 字 阅读 →
论文解读

三路不对齐时先对齐再融合:LMPAN 用轻量多路径校准保住双讲语音

针对全双工对话中时延漂移与能量失配导致回声残留和过抑制问题,LMPAN 用多路径软对齐加注意力融合与动态目标加两阶段 SSL 训练,在约 480K 参数和 126M 计算量下取得与 DeepVQE-S 可比的主观与下游任务表现,代价是动态目标会略微拉低整体 MOS。

 · 更新于 2026-10-15 · 约 23 分钟 · 11495 字 阅读 →
论文解读

小参数做音频问答:Samsone 用裁剪与数据配比换端侧可用性

Samsone 针对端侧音频问答任务,采用 Whisper-Tiny 编码器加 SmolLM2 解码器的标准结构并做词汇表缩减与深度剪枝,在 MMAU 等基准上以 99M 至 356M 参数取得可比大模型的成绩,代价是语言通用能力下降且未做硬件级优化。

 · 更新于 2026-10-15 · 约 17 分钟 · 8111 字 阅读 →
论文解读

在时域里学增益:WaveNorm 如何同时做响度归一与降噪

针对远近场电平起伏与噪声下传统增益控制易放大噪声的问题,WaveNorm 选择全因果时域卷积加 GRU 瓶颈的端到端映射,在 -70 dB 宽动态与多种噪声下报告约 6 dB 降噪与符合 P.56/P.79 的响度稳定,代价是 49 M MACs 与 55 KB 的端侧预算约束。

 · 更新于 2026-10-15 · 约 19 分钟 · 9062 字 阅读 →
论文解读

延迟云端来帮忙:用空间统计稳住低算力多通道语音增强

针对可穿戴设备低算力实时增强能力不足的问题,论文用冻结的大容量云端模型以延迟输出、中间层特征和协方差融合三种方式辅助边缘小模型,在标准集上把 SI-SDR 从 1.97 dB 提升到 5.74 dB,在挑战集上从 -1.16 dB 提升到 2.33 dB,边缘侧仅增加约 1.5% 参数和 2.4% 计算量。

 · 更新于 2026-10-15 · 约 18 分钟 · 8597 字 阅读 →
论文解读

先降维再建依赖:RALCT 用随机增强与卷积 Transformer 做轻量环境声识别

针对助听器难辨非语音环境声的问题,RALCT 把随机音频增强、MFCC 与 log-mel 拼接、CNN 降维与 Transformer 建模串成一条流水线,在 UrbanSound8K 上以约 310000 参数达到最高 94.56% 验证准确率,代价是增强强度受内存限制且部分易混类别仍偏弱。

 · 更新于 2026-10-15 · 约 18 分钟 · 8960 字 阅读 →
论文解读

在手机上同时跑三个十亿级模型:Argmax Pro 如何兼顾实时转写、说话人与自定义词表

Argmax Pro 针对离线可用的富功能语音识别问题,选择以 Parakeet v2 做转写、Canary v2 CTC 经 CTC-WS 做偏置、Streaming Sortformer v2 微调做说话人切分并全部部署到手机 NPU 上,论文报告自定义词表可扩至 3000 词而不影响运行时延迟,但未给出词错率、延迟与功耗的定量对照。

 · 更新于 2026-10-15 · 约 17 分钟 · 8401 字 阅读 →
论文解读

参数小不等于能跑:LiSenNet 在受限 NPU 上的算子与状态协同改造

针对 STM32N6 上 Neural-ART 只支持静态整数量化卷积图的问题,该研究把 LiSenNet 双路 GRU 瓶颈改为卷积频率混合加因果空洞时间卷积并配套可折叠归一化与有界激活,最终以 46.2k 参数实现板载 int8 PESQ 3.01 与每 16 ms 跳 4.83 ms 处理,代价是 154 KiB 的 25 个 FIFO 流状态。

 · 更新于 2026-10-15 · 约 15 分钟 · 7324 字 阅读 →
论文解读

逐帧早退省算力吗?修直出口梯子后动态路由不再超越静态前沿

该文在因果语音增强梯子上用深监督加逐帧单调修复得到可比静态族,证明路由相对专用静态可高出约 0.11 感知质量但与修复后静态前沿差距小于 0.01,且在 STM32N6 实测时延上动态执行只提供同一梯子内的中间工作点。

 · 更新于 2026-10-15 · 约 18 分钟 · 8965 字 阅读 →
论文解读

小参数也要听懂声音:Mizar 用频率合并与三阶段训练补齐音频证据

Mizar 针对 200M 参数以下本地音频理解问题,用 CED-Small 加频率合并映射器连接 SmolLM2-135M,并以三阶段训练组织 ReasonAQA、AudioMCQ 与 AVQA 监督,在 MMAU 等三项基准上报告超越同规模 Mellow 的结果,代价是仍需三阶段调参与教师模型辅助筛选。

 · 更新于 2026-10-15 · 约 19 分钟 · 9210 字 阅读 →
论文解读

说话与开枪必须同步:PUBG Ally 如何把慢推理装进快对局

PUBG Ally 用事件驱动的语言模型做高层意图与语音、每刻运行的行为树做移动战斗恢复来解决语音协同与实时控制的矛盾,最强证据是 2B 端侧学生在能力评分上追平 31B 教师且端到端语音往返约 1.6 秒对云端约 3.4 秒,代价是安全加强后良性拒答小幅上升且残局战斗评分仍偏低。

 · 更新于 2026-10-15 · 约 22 分钟 · 10638 字 阅读 →
论文解读

同样 4 比特,不同结局:跨架构 TTS 后训练量化的敏感部件地图

该研究在统一协议下对 3 个核心加 8 个复现加 2 个盲测 TTS 模型做训练后量化,发现相同位宽下自然度损失完全取决于模型特异的敏感部件,最强证据是 4 比特逐通道权重让 Supertonic 下降 2.8 个 UTMOS 而 Kokoro 仅下降 0.07,而代价是逐张量缩放即使在 8 比特也会严重退化且真实部署的延迟与能耗必须逐运行时验证。

 · 更新于 2026-10-15 · 约 18 分钟 · 8865 字 阅读 →
论文解读

激活精度说了算:Whisper 端侧量化中权重格式与激活位宽的系统对决

论文在 Whisper tiny.en 与 base.en 上做 80 余组训练后量化对照,证明把激活从 16 位降到 8 位带来 1-3 个百分点词错误率损失,而 NVFP4 的 W4A16 以 6.4 倍压缩做到接近无损,代价是细粒度带来双精度运算需求与 MXFP4 在标准流程下失效。

 · 更新于 2026-10-15 · 约 16 分钟 · 8003 字 阅读 →
论文解读

近满分不可信时怎么办:表示工程与录音级评估决定水下舰船分类能否部署

该研究以水下舰船被动声学分类为任务,用多时频与耳蜗表示加时间统计池化和紧凑卷积做分类,最强证据是录音级隔离的 DeepShip 上 157K 参数四层卷积测试宏 F1 为 0.7226 而 11.17M 参数 ResNet18 验证更低,代价是 ShipsEar 近满分结果不能视为未见录音泛化。

 · 更新于 2026-10-15 · 约 17 分钟 · 8428 字 阅读 →
论文解读

只用卷积和梅尔特征做语音检测:kiloVAD 如何把模型压到 2.1 千参数

针对常开边缘设备的因果低延迟语音活动检测问题,kiloVAD 选择标准梅尔特征加纯卷积主干,配合逐层结构化剪枝与角度感知量化,在 200 毫秒因果评估下以 2.1 千参数达到 AVA-Speech 上 0.850 的曲线下面积,代价是极限压缩时部分种子出现层坍塌且 4 比特量化仍明显掉点。

 · 更新于 2026-10-15 · 约 21 分钟 · 10414 字 阅读 →
论文解读

用一帧延迟换真流式:TinyCall 在 2.3 kbps 下的因果编码与标量量化安排

TinyCall 针对窄带应急语音在 2.3 kbps 下采用因果 SEANet 编码器加 Vocos 式频谱解码器与残差有限标量量化实现流式重建,流式相对离线仅从 PESQ 1.3197 降到 1.2994,但伪前视引入一帧算法延迟且未完全消除边界失真。

 · 更新于 2026-10-15 · 约 20 分钟 · 9662 字 阅读 →
论文解读

在只允许二维卷积的神经形态芯片上做音视融合:NAVIR 的分解与受限解码

针对工业噪声下纯音频识别崩溃的问题,NAVIR 用逐帧空间编码加时序卷积的分解结构适配 BrainChip AKD1000,在 GRID 噪声测试下量化融合模型取得未见说话人 14.0% 与重叠说话人 3.3% 词错率,代价是未见说话人纯唇读仍高达 35.3% 且音视模型在片上吞吐下降。

 · 更新于 2026-10-15 · 约 17 分钟 · 8497 字 阅读 →
论文解读

参数减三成而精度不掉:低秩频率卷积把噪声范围调对再谈边缘实时

针对单帧变 Q 输入的单音高估计,论文把频率轴空洞卷积拆成秩 9 瓶颈使参数从 17787 降到 11397 且三库精度持平,并证明训练噪声下限从 +6.02 dB 压到 -20 dB 能把 -20 dB 处 RPA50 从 2.44 提到 22.41,代价是干净集掉 0.35 点,自研 C 内核以 83 kB 在四款 CPU 上快于 …

 · 更新于 2026-10-15 · 约 19 分钟 · 9110 字 阅读 →