论文解读

在移动对话中解码注意:MOV-AAD 如何把脑电与身体信号同步起来

论文针对静态双人语音难以反映真实移动对话的问题,构建了 50 人、64 导脑电加眼动与多路生理同步的移动对话数据集,用重复词检测、包络与轨迹重建和被试间相关验证了注意信号可用性,代价是轨迹特征弱、个体与慢生理信号差异大。

 · 更新于 2026-10-16 · 约 22 分钟 · 10707 字 阅读 →
论文解读

不预测分数只判断好坏:PrefSQA 用成对偏好绕开 MOS 噪声

针对平均意见分标度受评分人和测试协议影响而噪声大的问题,PrefSQA 研究完全不看 MOS 的成对偏好预测,用语义声学双编码器加不确定性温度、损伤注意力与批内非匹配参考头建模,并在 MOS 衍生、低噪声仿真与真人偏好数据上验证,显示高质量数据才能让结构改进显现,但小间隔样本仍是主要误差来源。

 · 更新于 2026-10-16 · 约 19 分钟 · 9175 字 阅读 →
论文解读

为南阿塞拜疆语建可用的语音识别:社区录音、转写外来语音与难例评测如何分工

针对南阿塞拜疆语标注极少且用阿拉伯字母书写的问题,论文用社区朗读、北阿塞拜疆语音转写和独立难例集三路建数据,并在八个模型上做微调对照,最强证据是社区微调后的 MMS 在 GoldSet 上取得相对最好的词错率,但长短句、书写歧义和跨方言声学差异仍带来明显代价。

 · 更新于 2026-10-16 · 约 21 分钟 · 10357 字 阅读 →
论文解读

语义越深 prosody 越淡:用显式声学支路补回句子重音

针对无对齐句子重音检测中深层语义表示压制细粒度韵律的问题,ProWhistress 用冻结 Whisper 隐式流加可训练声学显式流做门控融合,在英汉五套基准上以 SinoStress 合成到真人录音几乎不掉点的证据支撑跨域鲁棒性,代价是新增声学编码器与融合头的训练与调参负担。

 · 更新于 2026-10-16 · 约 17 分钟 · 8373 字 阅读 →
论文解读

三小时单人语料做声调语言合成:Efik 语音保存为何选中多语言预训练路线

针对 Efik 数据稀缺与声调易错问题,研究用约 3 小时 2632 句单人语料微调 VITS、MMS-TTS、SpeechT5 和 Orpheus-TTS 四种模型,母语者评测显示 MMS-TTS 以 3.80±0.63 居首且长文本更稳,但声调与特殊音素问题仍未解决。

 · 更新于 2026-10-16 · 约 21 分钟 · 10023 字 阅读 →
论文解读

不只给真假标签:让人来教模型说出伪造在哪里

针对语音伪造检测泛化差且缺可解释推理的问题,该文用 4 万条人类标注的伪造线索做思维链监督,在 SALMONN 上做二分类与推理联合微调,最强证据是 Test-1-HL 上 EER 从 15.7% 降到 13.2%,代价是推理质量提升小且对高保真未见合成器仍吃力。

 · 更新于 2026-10-16 · 约 19 分钟 · 9141 字 阅读 →
论文解读

先学容易方向再反哺困难方向:WhispEar 用伪平行耳语扩大耳语转正常语音

针对平行耳语数据稀缺导致耳语转正常语音韵律和音色难恢复的问题,WhispEar 用统一语义表示做双向转换并以容易的正常转耳语方向生成大规模伪平行数据,主实验显示 WhispEar-Scaled 在中英文测试上同时提升可懂度、音质、基频相关性和说话人相似度,代价是仍需少量真实对齐数据微调且依赖共享声学模型与声码器条件。

 · 更新于 2026-10-16 · 约 18 分钟 · 8579 字 阅读 →
论文解读

情感合成的好坏不能只测自然度:一个同时测质量与情感吻合的大规模听感数据集

该研究针对情感合成语音缺乏质量评估数据的问题,收集 13 套系统加自然语音共 18208 条样本的 262 人听评数据,发现中性语音训练的质量预测器与大模型裁判在部分情感上可排序系统但随情感波动明显,代价是跨系统比较条件不完全公平且零样本预测仍有差距。

 · 更新于 2026-10-16 · 约 17 分钟 · 8370 字 阅读 →
论文解读

台语发声中字落画:用三模态共识把硬字幕视频熬成 860 小时语料

针对台语语音配繁体中文硬字幕的跨语言错位问题,该工作用光学字符识别与三模态音视语言模型产出双候选、再经字符错误率过滤与视觉语言模型融合的多轮迭代框架,把金标集字幕识别字符错误率从 36.8% 降到 9.3%,并以 860 小时伪标签语料把跨语言转写错误率从 57.8% 降到 37.8%,代价是依赖共识筛选与多轮微调且初始跨域泛化较弱。

 · 更新于 2026-10-16 · 约 20 分钟 · 9941 字 阅读 →
论文解读

反向做标注:先定发音动作时刻,再合成带地标的英语词库

该研究用 Pink Trombone 发音合成把英语词典逐词合成为男声与女声两套波形,并按发音指令时刻直接放置地标,以平均短时可懂度 0.75 左右为代价换来无人工标注歧义的确定性基准。

 · 更新于 2026-10-16 · 约 18 分钟 · 8829 字 阅读 →
论文解读

俄语语音缺的不是时长,而是可复述的韵律标注:Balalaika 如何把 5 千小时做成可用训练集

针对俄语重音移动与韵律标注缺失问题,Balalaika 用语义切分加多识别器投票加质量过滤构建约 5078 小时多源语料,并在 25 小时等量预算下验证去噪与语音合成的自然度收益,但严格过滤与单说话人优势等边界仍需注意。

 · 更新于 2026-10-16 · 约 19 分钟 · 9127 字 阅读 →
论文解读

停顿不等于让出话轮:BanglaTurn 如何为孟加拉语补上轮次结束检测基准

该研究针对孟加拉语会话缺少轮次结束标注问题,用播客音频加说话人日志加语言模型初标加人工全检构建 35374 条语料,并用 Whisper 编码器加多尺度池化做二分类,在 319 条异源平衡测试集上达到 84.33% 准确率,代价是误报率升至 23.75%。

 · 更新于 2026-10-16 · 约 18 分钟 · 8523 字 阅读 →
论文解读

不转写、不翻译:用对齐的句向量直接生成法语摘要

该文把跨语言文本与语音摘要统一为语义向量序列到法语摘要的生成问题,用 BGE-M3 与 SENSE 对齐的嵌入加 140M 可训练的 SBARThez 实现,在 CrossSum 低资源文本和自建 ABT-SpeechSUM 三语语音上超过级联与 mT5-large 基线,但依赖嵌入空间对齐质量且摘要多为合成参考。

 · 更新于 2026-10-16 · 约 18 分钟 · 8706 字 阅读 →
论文解读

搬走家具后混响变了:用编辑前实测与均匀材质代理更新房间脉冲响应

针对家具移除与移动后同一声源接收位置的房间脉冲响应更新问题,论文提出以均匀材质仿真代理刻画几何变化的 PG-RIR,在 14 场景留一评估上把 T60 误差降到 0.0316 秒左右,但多步回代会累积平滑且逆渲染基线在大表面数下失效。

 · 更新于 2026-10-16 · 约 17 分钟 · 8495 字 阅读 →
论文解读

自然多语速普通话基准:GRATS 为何要用真实目标录音检验变速

GRATS 针对普通话声调对时长扰动敏感而人工变速参考失真的问题,用 25 人×60 句×5 速共 7500 句自然平行录音做基准,报告了极端速率下时长与基频一致性下降而可懂度与感知质量出现分化的证据,代价是仅覆盖台湾朗读语料且暂缺主观听感验证。

 · 更新于 2026-10-16 · 约 18 分钟 · 8596 字 阅读 →
论文解读

自然语音也会幻觉:HALAS 用 3611 段财报电话揭示七个主流 ASR 的真实错误

针对端到端语音识别在真实无处理语音上是否幻觉的问题,论文用 Earnings 22 加七模型加人工跨度标注构建 HALAS,最强证据是字符与语义代理指标仅 81% ROC-AUC 而先进检测器仅 53.1% F1,代价是数据集为富集幻觉的高难度采样且不能反映真实部署频率。

 · 更新于 2026-10-16 · 约 19 分钟 · 9139 字 阅读 →
论文解读

为阿联酋方言建语料:Hamsa 如何用 11 小时人工标注把方言识别误差拉下来

针对阿联酋阿拉伯语口语与标准语差异大、已有语料多为标准语或埃及黎凡特方言的问题,Hamsa 构建 11 小时人工转写对话语料并用统一超参数微调多语识别模型,最强证据是 Whisper-v2 词错误率从 42.25% 降到 24.46%、字错误率从 71.91% 降到 8.27%,代价是规模仍小、说话人未严格隔离且原始音频暂只提供转写与采集脚本。

 · 更新于 2026-10-16 · 约 18 分钟 · 8520 字 阅读 →
论文解读

键盘声能泄密吗:语音预训练表示在跨键盘与 VoIP 失真下的泛化与 KAN 适配

该文用 37 把键盘 37440 次敲击构成的 KEYAC 检验冻结语音预训练表示加轻量下游头的按键识别泛化,发现 VoIP 编解码导致显著下降,而单隐层 KAN 适配头在各条件下一致提升并以 WavLM 最强,但仍需标准录音训练且无可验证的公开代码与数据。

 · 更新于 2026-10-16 · 约 18 分钟 · 8579 字 阅读 →
论文解读

笑声和哭声翻不过去:MoVE 用混合发声专家保留非言语声

针对语音到语音翻译丢失笑声哭声的问题,论文用可扩展表情合成管线加五专家混合 LoRA 与软路由解决,在英中翻译上以 76% 非言语匹配和最高人评自然度情感相似度为证据,代价是合成数据主导与英中范围验证。

 · 更新于 2026-10-16 · 约 17 分钟 · 8303 字 阅读 →
论文解读

一个音符就是一个声源:用双流网络先抓取再联合分账做乐谱对齐的音符分离

针对复调录音中同音色音符互相泄漏的问题,论文用谐波与打击乐双流 NoteGrab 按音高与起止逐个抓取音符,再用自适应集合归属联合重分混合能量,在 SCNS-Eval 上中位 SI-SDR 达 7.39 dB,代价是逐音符推理与完整乐谱依赖。

 · 更新于 2026-10-16 · 约 21 分钟 · 10215 字 阅读 →