论文解读

压低末尾音高峰反而更快:听损者话轮结尾预测中的韵律线索取舍

该研究以自报听力困难的老年听者为对象,用自然、增强末尾重读音节 f0 峰、压低 f0 峰并提前下降三种问句条件做在线按键预测,发现压低条件比增强条件更快更准,而增强峰反而损害预测,同时主观努力与信心因天花板效应未能区分条件。

 · 更新于 2026-10-15 · 约 18 分钟 · 8850 字 阅读 →
论文解读

多人对话里该说还是该静:MP-Bench 把轮次感知拆成可核对的行为题

MP-Bench 用合成四人语音与显式、隐式、消极三类轮次条件测语音智能体,12 个系统的最强证据是带完美说话人标签的文本上限接近满分而实时语音系统在游戏轮次上徘徊于随机水平,代价是完全受控合成、无重叠与单决策点评估。

 · 更新于 2026-10-15 · 约 23 分钟 · 11162 字 阅读 →
论文解读

打断太少学不会:用声学扰动与删尾重组补足离线轮替标注中的中断样本

针对离线轮替标注中暂停打断与重叠打断样本过少导致韵律学不会的问题,论文比较声学扰动、删尾重组及其组合三种增广,用随机森林在阿根廷西班牙语任务对话上把开发集 PI 从 0.36 提到 0.45、I 从 0.41 提到 0.48,代价是平滑转换与重叠转换的 F1 轻微下降且留出集宏平均未提升。

 · 更新于 2026-10-15 · 约 19 分钟 · 9268 字 阅读 →
会议总览

cvpr-2026 论文深度解读

共收录 103 篇 cvpr-2026 会议论文的 Reader 深度解读

 · 更新于 2026-10-15 · 约 212 分钟 · 106059 字 阅读 →
会议总览

eusipco-2026 论文深度解读

共收录 127 篇 eusipco-2026 会议论文的 Reader 深度解读

 · 更新于 2026-10-15 · 约 247 分钟 · 123292 字 阅读 →
论文解读

只用语音活动判断和谁在交谈:多人轮替如何变成可计算的对齐分数

针对助听器要在多人同场中判断助听器用户想和谁交谈的问题,论文提出只用每人二值语音活动流的多人贝叶斯最小重叠间隙框架,用会话对齐分数刻画群体轮替,并在真实 2、3、4 人对话上分别报告 97.1%、90.1% 和 90.4% 的平均伙伴识别准确率,代价是需要数十秒到数百秒的积分窗口才能观察到充分轮替。

 · 更新于 2026-10-15 · 约 18 分钟 · 8690 字 阅读 →
论文解读

多人同时说话时,目标人该接话还是倾听:PolySLGen 的在线多模态反应生成

针对多人交互中只建模说话或只建模双人的不足,PolySLGen 用过去全组语音与动作为条件联合生成目标人的文本、语音风格、身体动作和说话状态分,证据是动作与说话状态预测上优于多个基线,代价是推理约 5 帧每秒且说话状态预测仍困难。

 · 更新于 2026-10-15 · 约 18 分钟 · 8648 字 阅读 →
会议总览

acl-2026 论文深度解读

共收录 199 篇 acl-2026 会议论文的 Reader 深度解读

 · 更新于 2026-10-15 · 约 433 分钟 · 216709 字 阅读 →
论文解读

鸡尾酒会里看口型说话:AV-Dialog 如何同时听清、看准接话时机

AV-Dialog 针对多人干扰下跟丢目标说话人与抢话时机错乱问题,用声学码加唇部视觉做流式理解与轮次预测,在干扰下把轮次预测准确率从 54% 提升到 79%,代价是双模型并行与视觉前视带来的额外延迟与显存开销。

 · 更新于 2026-10-15 · 约 20 分钟 · 9965 字 阅读 →
论文解读

说什么与何时说分开评:面向全双工对话的双轴生成式奖励模型

针对全双工口语对话模型缺可靠在线奖励的问题,论文提出把语义连贯与轮次时机分开推理再给总分的生成式奖励模型,用三阶段感知加推理加 GRPO 训练,在合成与真实人机对话上报告了更高的准确率,代价是需要合成加真实数据联合调优且尚未验证在线强化学习收益。

 · 更新于 2026-10-15 · 约 17 分钟 · 8143 字 阅读 →
论文解读

像演员一样听指令说话:冻结编码器做可控全双工对话

F-Actor 用冻结音频编码器加只微调语言模型的单阶段方案,在约 2000 小时数据上实现对音色、话题、打断与应答和起话方的指令跟随,最佳配置以词级文本对齐加 2 步音频延迟取得低困惑度和高起话准确率,但打断等稀有行为仍只能给出方向性控制且语音自然度未达真值。

 · 更新于 2026-10-15 · 约 17 分钟 · 8091 字 阅读 →
论文解读

转录都对,为什么听起来还是不合适:语音交互的文化能力

该文把语音智能体的文化能力重新定义为事件限定的交互能力,用语音事件与交互契约约束韵律时机与参与管理,并以附录的事件卡与最小对诊断补足词错率与平均意见分测不到的得体性,代价是增加人工判断与规范界定负担且不提供新数据集验证。

 · 更新于 2026-10-15 · 约 18 分钟 · 8845 字 阅读 →
论文解读

少即是多:轮次结束主要靠声音和韵律,而非文本语义

论文用同一轻量三流分类器穷举声学、韵律、文本七种组合,发现声学加韵律在相同训练下取得最平衡的准确与延迟,而加入文本只增加抢话误报且不能提升性能。

 · 更新于 2026-10-15 · 约 17 分钟 · 8308 字 阅读 →
论文解读

只看说话前一秒会误判:用整段对话和视频教会模型的附和时机

针对附和预测中缺视频、模态时间不对齐和只盯触发点的问题,论文用多层跨模态对齐加两阶段课程学习,在韩语 KC-Dialog 上宏 F1 达到 58.53,代价是视频推理耗时从 18.868 毫秒增至 20.083 毫秒。

 · 更新于 2026-10-15 · 约 20 分钟 · 9604 字 阅读 →
论文解读

先判有没有声,再判是不是说完:用两级协作做实时轮次结束检测

针对语音对话中停顿与轮次结束难以区分的问题,论文构建含合成与真实对话的 OpenETD 数据集并提出 SpeculativeETD 两级协作推理,用端侧轻量模型逐块判有声无声、只在静音段触发服务端大模型判暂停还是结束,在混合训练下真实集上取得更好分割效果,代价是服务端调用与传输延迟仍需计入部署预算。

 · 更新于 2026-10-15 · 约 17 分钟 · 8486 字 阅读 →
会议总览

eacl-2026 论文深度解读

共收录 36 篇 eacl-2026 会议论文的 Reader 深度解读

 · 更新于 2026-10-15 · 约 75 分钟 · 37568 字 阅读 →
论文解读

语义手势补上文本加音频的缺口:多方对话保持与让渡预测

该研究把多方桌游对话切成保持或让渡的 2 分类问题,用文本加音频加语义手势的混合专家模型求解,最强证据是 3 模态融合在语义监督下取得更高的宏平均 F1,代价是标注一致性中等且领域局限于游戏对话。

 · 更新于 2026-10-15 · 约 18 分钟 · 8974 字 阅读 →
论文解读

从纠缠录音到可控双轨:分离、重建与扩展如何分工保留对话时序

针对全双工对话需要保留轮转、重叠与反馈时序但真实录音纠缠不清的问题,ConversationalVoice 用质量校验的分离、词面固定的重建与上下文约束的扩展三阶段产出共享格式的双轨数据,并在自动评估中保持 0.983 至 0.991 的同说话人相似度与正向区分度,同时以重建提升预测音质而扩展维持相近交互密度。

 · 更新于 2026-10-15 · 约 21 分钟 · 10184 字 阅读 →
论文解读

停顿不等于结束:泰米尔电话语音的语义轮次终点如何被验证与复现

针对泰米尔电话语音在每次停顿判断是否说完的问题,论文用 116 通双通道电话切出 18485 个边界并以音频大模型重标,再把 Smart Turn v3 微调为 8.7 MB 与 21 MB 两个纯音频模型,在 30 通未见来电的 4168 条上把准确率从 70.30% 提到 86.13%,代价是生产端 VAD 与流式切窗再扣约 2.60 点且部分边界根本不 …

 · 更新于 2026-10-15 · 约 18 分钟 · 8617 字 阅读 →
论文解读

序列不等长就保不住语义:TASTE2 用一词一隐变量走向可打断对话

TASTE2 把每个文本词元配一个连续音频隐变量使序列长度严格等于文本,用 56.3% 对 57.3% 保留 98.2% 文本问答能力并以 0.060 秒停下响应用户打断,代价是流畅接话需 1.207 秒、部署首音频 2701 毫秒且显式副语言控制不稳定。

 · 更新于 2026-10-15 · 约 19 分钟 · 9448 字 阅读 →