子标签

下方只统计已核验方向的论文记录,按已核身份去重,身份待核时按页面保留。“直接”只含明确标注该方向的论文;“含子树”同时包含下级方向。点击名称进入论文库继续筛选;数量与上方按标签名称收录的页面数不同。

论文解读

旁人插话时只认佩戴者:波束、鼻麦与旁人声检测的三路差分识别

针对智能眼镜佩戴者语音易被旁人声污染的问题,该工作保留指向嘴部的波束通道并补入鼻麦原始通道与旁人声检测嵌入送入流式 RNN-T,在真实录制集上相对噪声训练强基线平均降低 14.4% 词错率、最高达 18.0%,代价是仍依赖噪声增强训练且在特定旁人角度上残留短板。

 · 更新于 2026-10-15 · 约 20 分钟 · 9956 字 阅读 →
论文解读

行为不变而神经重组:粤语声调归一化在认知负荷下的主动抑制

该研究用粤语声调外在归一化双任务加脑电时频分析回答负荷下如何维持知觉恒常,发现行为准确率不受视觉负荷影响,但顶枕 alpha 同步增强与高负荷前额 delta 去同步共同支撑主动控制,代价是视觉任务准确率下降与额外抑制资源投入。

 · 更新于 2026-10-15 · 约 18 分钟 · 8961 字 阅读 →
论文解读

没有通用冠军的语音识别:用同一标尺同时量准度与速度

该文针对英语短语音主导、长语音与多语言评测分散且准度与效率口径不一的问题,搭建覆盖 86 个系统与 11 个数据集的三轨评测流程并统一词错误率与逆实时因子计算,在当前结果中 Conformer 类编码器加大语言模型解码器平均词错误率最低而 CTC 与 TDT 解码器吞吐更高,但差异同时受训练数据与配置影响。

 · 更新于 2026-10-15 · 约 21 分钟 · 10402 字 阅读 →
论文解读

并行时间—频带混合加可学习回灌:在不调参的情况下压住识别敏感的增强伪影

针对带切分前端中循环时间与跨频带模块的串行依赖问题,论文用并行时间—频带混合器替代循环展开并用可学习的观察信号加回抑制伪影,在冻结 Whisper 下降低词错误率,代价是仍需两阶段训练且为话语级非流式混合。

 · 更新于 2026-10-15 · 约 19 分钟 · 9335 字 阅读 →
论文解读

先分语种对齐再跨语种迁移:PART 如何避免多语语音表示坍缩

针对多语语音大模型中多任务混训导致语言区分度丢失的问题,PART 用先单语 ASR 逐层解冻再引入 S2TT 联合优化的三阶段策略,在 Fleurs 上把平均 WER 从 6.4 降到 4.7、在 CoVoST2 上平均提升 1.4 BLEU,代价是需要 810k 小时 ASR 加 434k 小时 S2TT 数据与 256 卡三轮训练。

 · 更新于 2026-10-15 · 约 17 分钟 · 8238 字 阅读 →
论文解读

从零到 147 小时:普什图语开放语音库如何先补句子再借广播破圈

该文为普什图语从界面本地化、维基句子抽取、易丢音素补句到广播动员建成 147 小时众包朗读库,并用 MCV20 微调 Whisper Base 在 MCV20 测试集上报告 13.4% 词错误率,但朗读口音、方言与性别缺失限制了外推。

 · 更新于 2026-10-15 · 约 19 分钟 · 9033 字 阅读 →
论文解读

用稳定的到来方向代替说话人注册:在长会议中直接抽出目标语音

针对长时多方对话中说话人活动不均衡与重叠导致归属困难的问题,论文提出以目标到来方向为空间先验的多通道目标说话人抽取前端 PATSE,在回放与真实对话上以词错率和 diarization 错误率衡量获得一致增益,代价是仍需已知目标方向且对极小角度间隔更敏感。

 · 更新于 2026-10-15 · 约 18 分钟 · 8792 字 阅读 →
论文解读

听错药名不是随机错:用发音加语义把噪声实体链回词典

针对端到端语音识别中专有名词易被替换为高频近音词的问题,该文提出只读转写文本的多视角检索 grounding 框架,用 G2P 细粒度发音、Soundex 粗粒度编码与上下文语义嵌入做归一化融合排序,在 69542 个对齐药物实体上把 Whisper-large-v3 的 Recall@1 从 38.27% 提升到 74.67%,代价是依赖预定义闭集词典与实 …

 · 更新于 2026-10-15 · 约 16 分钟 · 7834 字 阅读 →
论文解读

没见过的搭嘴音为何反而认得更准:自监督模型在 G|ui 与 West !Xoon 上的微调检验

论文把 Wav2Vec2 与 HuBERT 微调到两种富含搭嘴音的 Khoisan 语言上比较搭嘴与非搭嘴音素误差,报告搭嘴误差显著更低且单语 HuBERT 整体最优,但冻结基座与盲目增大规模或语言数都不能保证更好。

 · 更新于 2026-10-15 · 约 18 分钟 · 8986 字 阅读 →
论文解读

幻觉来自只看文字不听声音:用对齐线索把小型语音语言模型拉回声学

论文把自动语音识别中的幻觉定义为对齐后的编造插入词,用因果中介与注意力行为定位到偏向文本的多头自注意力,再用连接时序分类门控与跨注意力构建 AudioSLM,在 LibriSpeech 上把开发集幻觉错误率从 52.01% 降到 8.69%,代价是正确率与替换删除略有回退且大骨干仍出现逆扩展。

 · 更新于 2026-10-15 · 约 19 分钟 · 9460 字 阅读 →
论文解读

看不见的语言也能借力:用施主 LoRA 初始化受体 LoRA 的跨语言迁移

针对 Whisper 预训练几乎未见过的低资源受体语言,论文用同语系内正字法分布最接近的施主语言先训 LoRA 再迁移初始化受体 LoRA,在 40-100 小时条件下相对受体单独微调获得约 9%-17% 的词错误率下降,代价是仍需数十小时受体标注语音与施主大语料先训。

 · 更新于 2026-10-15 · 约 21 分钟 · 10426 字 阅读 →
论文解读

剪掉一半反而更准:Whisper 中一次性幅度剪枝的正则化效应

该研究在 Whisper-small 上用免微调的一次性幅度剪枝证明剪对位置可降低词错误率,解码器自注意力剪 50% 在 LibriSpeech test-other 上带来 2.38% 绝对增益,而 40.8% 稀疏度的敏感度感知压缩仅使词错误率恶化 0.20%

 · 更新于 2026-10-15 · 约 18 分钟 · 8832 字 阅读 →
论文解读

流式多说话人识别的四条路:不微调也能跑,微调才更准

论文以同一对开源流式 ASR 与流式说话人日志模型为起点,比较级联、掩码输入、词级 SOT 与日志条件四种架构,报告显示日志条件的 SSA 在多说话人 cpWER 平均最低而词级 SOT 在单说话人上退化明显,代价是需要微调与多实例内存。

 · 更新于 2026-10-15 · 约 20 分钟 · 9743 字 阅读 →
论文解读

解开 1 比特下限:用可变秩二值分解把编码器压进亚比特

针对 Conformer-Transducer 端侧过大问题,论文用二值低秩分解加梯度敏感度的混合秩分配把编码器压到亚 1 比特,用 LibriSpeech 上 1.0 bpw 混合秩 dev-other 词错误率 6.01% 与 0.2 bpw 仍可运行为证据,代价是解码器与联合网络仍需高秩且低码率下词错误率明显上升。

 · 更新于 2026-10-15 · 约 19 分钟 · 9146 字 阅读 →
论文解读

真类概率塌向两端时,用排序与距离重建词级置信度

针对二值目标粗糙、时序对齐易错和真类概率坍缩问题,论文提出结合排序分与分布距离的连续目标 RanD 并为四种解码结构训练词级置信度估计器,在印地语与英语实验中报告了更低的校准误差与更高的区分度,但删除词与低资源表征仍未解决。

 · 更新于 2026-10-15 · 约 18 分钟 · 8626 字 阅读 →
论文解读

可读性难不倒现代语音识别:人类觉得难的文本为何机器转写不怕

该研究用合成语音控制发音变量,对比可读性与转写错误,发现现代端到端语音识别的字错率与全局可读性指数近乎正交,而人类感知难度仍与错误相关,内部不确定性也未随文本变难而上升。

 · 更新于 2026-10-15 · 约 20 分钟 · 9963 字 阅读 →
论文解读

一个参数两套解码:用块限制与一致性约束缩小离线-流式差距

该文用共享参数的块限制注意力加动态块卷积统一离线与流式 Transducer,并以全格点对称 KL 一致性正则在低延迟流式上缩小差距,主证据是 L 尺寸统一双模加 MCR 在 0.32s 延迟平均词错率 8.24 而离线保持 6.63,代价是每步需跑离线与流式两次前向并承担额外 KL 计算与延迟定义约束。

 · 更新于 2026-10-15 · 约 18 分钟 · 8693 字 阅读 →
论文解读

用可验证奖励把语码切换听写拉回原语言:CER 与书写系奖励的分工

该文把语码切换识别当作可验证奖励问题,用组相对策略优化在仅一成合成语码切换语音上训练,以字符错率奖励消灭整句翻译、以书写保真奖励压制错文字系,并用两遍起草加改写让模型再听一次,二十成数据在人工录制的双语测试上超过全量低秩监督微调,但代价是单步采样更贵且在阿拉伯语等对上改写可能过纠。

 · 更新于 2026-10-15 · 约 17 分钟 · 8267 字 阅读 →
论文解读

自回归模型的熵最小化为何不能只做一半:策略梯度与词元熵的两项补全

针对自回归测试时自适应中熵最小化实现分裂的问题,论文推导出包含词元级策略梯度损失与词元级熵损失的完整梯度,并在 Whisper 语音识别上以 20 余个噪声口音多语域验证,最强的束搜索变体带来最低词错率,但代价是每步多采样与多步更新的计算开销。

 · 更新于 2026-10-15 · 约 17 分钟 · 8231 字 阅读 →
论文解读

不用多条件训练做流式鲁棒识别:在线分离前端加干净训练后端的解耦路线

论文研究噪声混响和重叠说话下的零前视流式识别,采用在线语音分离前端加只用干净语音训练的流式识别后端的解耦框架,最强证据是在 LibriSpeech 模拟噪声、CHiME-4 和 LibriCSS 上用 oTF-CrossNet 加干净后端超过同等数据量的多条件训练基线,代价是系统好坏高度依赖分离前端的强度。

 · 更新于 2026-10-15 · 约 20 分钟 · 9719 字 阅读 →