论文解读

边说边执行又要能撤回:RASSG 如何处理语音中的自我修正

RASSG 针对流式语音中用户修正参数会导致已启动工具产生不可逆陈旧执行的问题,用三次识别一致启动加校准无效风险在最后可取消时刻否决继续执行,在受控执行时钟下把 ReCAST 修正子集的陈旧率从 50.00% 降到 3.15%,代价是保留 3.676 s 成功延迟并依赖固定工具时间假设。

 · 更新于 2026-11-05 · 约 18 分钟 · 8791 字 阅读 →
论文解读

边听边说边想:Rubato 用两套时钟解开实时音频与异步思考的绑定

针对全双工语音模型中实时音频与内部思考共用一条位置时间轴导致变速推理时错位的问题,Rubato 用实时钟与思考钟两套独立位置计数实现零样本变速插值,在只训练两种极端思考预算下保持准确率并随算力提升缩短给出答案的时间,代价是推理需维护多套键缓存与合成数据依赖。

 · 更新于 2026-11-05 · 约 19 分钟 · 9443 字 阅读 →
论文解读

SpikCTU:固定记忆加共享循环推理的紧凑脉冲语音指令识别

论文把语音指令识别拆成一次编码得到固定记忆、多次共享循环读记忆并修正预测,在三个基准上用 0.16-0.17M 参数取得可比精度,早退能减少循环步数但总能耗节省有限。

 · 更新于 2026-11-05 · 约 19 分钟 · 9152 字 阅读 →
论文解读

只用语音转写数据训练语音检索模型

SSEmb 只用标准语音转写对训练轻量适配器,把冻结语音编码器接到冻结文本检索向量空间,实现直接语音查文本,在英文与多语言及口语文档检索上接近级联系统且时延更低。

 · 更新于 2026-11-05 · 约 17 分钟 · 8055 字 阅读 →
论文解读

让语音识别忘记特定说话人同时还能正常转写

论文针对语音识别隐表示残留说话人痕迹的隐私问题,提出在第 6 层辅助嵌入上先聚类找质心再推离的 SAID 方法,在 VCTK 上以遗忘集成员推断 52.6% 接近重训练金模型 52.7% 为最强证据,代价是保留集词错误率高于微调类基线。

 · 更新于 2026-11-05 · 约 18 分钟 · 8908 字 阅读 →
论文解读

跨房间说话人链接:用时间表结构弥补跨设备失配

该文研究门诊多房间录音中无访客注册时的访客跨房链接,用逐设备中心化加并发与房间类型约束和员工语音校准阈值做聚类,在 VOiCES 仿真日上对 11 种嵌入全面超越无标签基线,但高度依赖跨房重复语音去除且单访患者仍易误合并。

 · 更新于 2026-11-05 · 约 16 分钟 · 7814 字 阅读 →
论文解读

部署后语音伪造检测器何时不可信:基于嵌入的无监督漂移监测

论文针对部署中无标签条件下无法判断检测器是否处于熟悉条件的问题,在固定检测器嵌入上用两个参考的正则马氏距离做可信与告警分流,实验显示未被拦截的伪造误接受率降到 1% 以下,但代价是自动覆盖率明显下降且真语音漂移也会触发大量告警。

 · 更新于 2026-11-05 · 约 17 分钟 · 8310 字 阅读 →
论文解读

混叠录音里检测器到底在听谁:语音还是背景声

论文用语音和背景声各自独立真假的混合数据,比较四种检测器对假语音与假背景声的敏感度和依赖频段,发现假背景声更好检但差距主要来自对未见过假语音的泛化失败,且前端编码器决定了证据集中在哪个频段。

 · 更新于 2026-11-05 · 约 16 分钟 · 7543 字 阅读 →
论文解读

语义和声学分开建模的目标说话人提取

该文研究编解码器词元怎样用于目标说话人提取,提出判别语义分支加生成声学分支的分工结构,在 Libri2Mix 上把可比基线的 dWER 从 0.388 降到 0.118,代价是依赖两阶段结构和冻结的 DualCodec 编解码器。

 · 更新于 2026-11-05 · 约 17 分钟 · 8137 字 阅读 →
论文解读

语音助手听错一个词,何时会办错事:按任务角色诊断工具调用

论文用同一句话配对比较不同位置的单字改动,说明数字与否定等任务角色比功能词更容易让结构化工具调用失败,并用跨源分组预测证明细粒度角色比二元关键性多出可验证的诊断信息。

 · 更新于 2026-11-05 · 约 17 分钟 · 8373 字 阅读 →
论文解读

窗长为何重要:噪声下语音活动检测的离线基准解读

论文在 LibriVAD-small 的 test-clean 上离线比较 TEN、Silero 与 RMS 能量基线,回答窗长如何改变帧级排序质量,最强证据是 TEN 在 16 ms 取得 AUC 0.917 且 20 到 50 ms 几乎不变,而 Silero 只在 30 ms 附近最好,代价是结论限于离线排序而不含端点延迟。

 · 更新于 2026-11-05 · 约 17 分钟 · 8216 字 阅读 →
论文解读

词对齐韵律:说话人差异远大于抑郁或创伤后应激严重度

论文检验词级韵律能否作为抑郁与 PTSD 的行为标记,发现词特异偏差跨语境几乎不重复,而按说话人聚合后高度可重复,但仍与症状严重度无可检测关联。

 · 更新于 2026-11-05 · 约 20 分钟 · 9700 字 阅读 →
论文解读

说话方式不变任务信息也能更像队友:口语人机组队实验解读

该研究用口语找物放物游戏比较中性工具型与团队建设型智能体,发现后者在队友感知上显著更高但游戏成绩无差异,且人的信任倾向和神经质影响总体评分,韵律特征还能弱但显著地分辨对话对象。

 · 更新于 2026-11-05 · 约 19 分钟 · 9255 字 阅读 →
论文解读

朗读中停顿落在哪里:同一篇短文里的声学间隙位置比较

论文用同一篇 69 词朗读比较两组人的词间声学间隙落在标点处还是非标点处,最强证据是非标点处计数差异大而标点处相近,代价是结论只限这批录音和这篇短文。

 · 更新于 2026-11-05 · 约 15 分钟 · 7234 字 阅读 →
论文解读

给低层声学数值补上文字说明,让大音频语言模型直接判断构音障碍

论文研究只给语音波形时大音频语言模型难以直接判断构音障碍的问题,提出把用 OpenSMILE 算出的音高、响度、谐噪比和语速等数值连同性别语言信息写进提示词再做监督微调,在 PC-GITA 西班牙语料上以说话人级准确率超过 wav2vec2 与 XLS-R 基线,但增益依赖微调与特定划分且特征顺序是事后按单特征效果排定的。

 · 更新于 2026-11-05 · 约 17 分钟 · 8318 字 阅读 →
论文解读

给音频基础模型植入可用真实声音触发的后门

论文研究在不知道下游任务和预训练数据时如何给语音基础模型植入后门,用固定无关表示拉偏触发样本、用自造聚类维持干净样本表示,在九个任务上保持干净性能并在触发时大幅降级,但彻底清洗需要大量标注和端到端微调。

 · 更新于 2026-11-05 · 约 19 分钟 · 9419 字 阅读 →
论文解读

为对话配上合适语气:用合成反馈训练风格规划器

针对对话语境下如何用自然语言指令控制合成语气的问题,论文提出冻结合成模型、用目标语音似然奖励训练规划器,在英语电影对话子集上提升了与目标语音的声学相似性和语境恰当性,但结论依赖同一合成后端且未做人工听音验证。

 · 更新于 2026-11-05 · 约 16 分钟 · 7754 字 阅读 →
论文解读

掩码与替换扩散做零样本语音合成:增益是否必须改写已生成的词元

论文用只在训练加替换、采样只用掩码的 DeMaR 检验零样本语音合成,发现字错率下降在不再改写已定词元时依然保留,而两种解码运行方式不同且原文未报告延迟对比。

 · 更新于 2026-11-05 · 约 18 分钟 · 8836 字 阅读 →
论文解读

只看文字能猜出说话方式吗:用无监督声音聚类做的可证伪检验

论文把风格是否可从文本推断变成跨模态聚类预测问题,用六个说话人上文本嵌入预测声音聚类的提升只有 0.111 且四分之三来自词本身,句子语义只多加 0.026 且几何上不紧凑。

 · 更新于 2026-11-05 · 约 21 分钟 · 10247 字 阅读 →
论文解读

蒸馏损失如何改变语音音乐小模型的合并效果

论文固定结构和评测,只把蒸馏损失从 DistilHuBERT 损失换成相关性损失,比较权重插值和激活排列两种合并,发现后者在语音侧更稳、需要搬动的通道更少,但在标准宽度音乐侧仍是旧损失更好。

 · 更新于 2026-11-05 · 约 15 分钟 · 7327 字 阅读 →