论文解读

真人中文语音做考题:VCB Bench 为何要同时考听话、懂知识和抗干扰

针对英文为主和合成语音评测失真的问题,VCB Bench 用全真人中文语音构建指令跟随、知识理解与鲁棒性三维评测,在 9 个语音对话模型上显示常识问答最难而物理干扰比口误更致命。

 · 更新于 2026-10-16 · 约 16 分钟 · 7773 字 阅读 →
论文解读

吴语没有数据就没有模型:用八千小时多维标注把理解与生成一起补齐

针对吴语语音数据极少、无公开基准和可用模型的问题,论文用约 8000 小时多维自动标注语料加人工基准与分阶段模型验证,在识别与理解任务上大幅降低误差并提升翻译与属性判断,但数据分布不均与自动标注噪声仍限制泛化。

 · 更新于 2026-10-16 · 约 19 分钟 · 9033 字 阅读 →
论文解读

词级定位而非句级知道:WESR 把笑声哭声放回词的位置

针对非言语事件只知有无、不知在词何处的问题,论文以 21 类离散与连续事件的词级转写为目标,用位置感知的评测解耦词错与事件错,并以 1700+ 小时弱标注训练得到强基线,在保持词错误率基本稳定的代价下把宏平均 F1 做到 38.0%。

 · 更新于 2026-10-16 · 约 21 分钟 · 10205 字 阅读 →
论文解读

不靠语义猜声音:用海洋哺乳动物叫声逼模型真正去听

该研究用分布外海洋哺乳动物叫声构造感知与认知两类选择题,测低层听觉,最强证据是人类 Remember 达 97.1% 而模型仅 57.1% 左右,代价是题型限于单选题且只覆盖单一生态域。

 · 更新于 2026-10-16 · 约 18 分钟 · 8578 字 阅读 →
论文解读

单个都会、合在一起就不会:ART 要求模型同时听懂语音与声音再推理

论文针对多模态大模型只被单项音频能力考核的问题,构造 9 类 9000 条音频内嵌提问的推理基准,用是否问答与描述问答两种协议测得人类约 92.9% 而开源模型多在 50% 附近,代价是全合成语音与模板化问题限制了声学多样性。

 · 更新于 2026-10-16 · 约 16 分钟 · 7824 字 阅读 →
论文解读

已有配音怎么改:AV-Edit 用音画联合表示做加、删、换

针对已有视频音轨需随画面增删替换音效的问题,AV-Edit 先用细粒度对比掩码预训练学到音画对齐表示,再用相关门控加多模态扩散重生成,在 VGG-Edit 三类编辑与 VGGSound 生成上报告最优距离与质量,代价是原文承认不能无失真保留原音。

 · 更新于 2026-10-16 · 约 20 分钟 · 9758 字 阅读 →
论文解读

广播满分不等于学会唇读:六条件复测下的视觉泛化断层

该文用统一预处理把六种说话条件接入三种主流架构复测,显示纯视觉在域外全面崩溃、音视融合仅在 Lombard 夸张口型下稳定增益,而发音人清晰度与 90 度侧脸的影响远大于小角度偏移与加数据量。

 · 更新于 2026-10-16 · 约 17 分钟 · 8033 字 阅读 →
论文解读

内容无毒不等于语音无毒:用来源与类型双头拆分副语言毒性

针对纯文本审核漏掉语气、情绪与语速等副语言毒性的问题,该研究构建带毒性来源标注的 ToxiAlert-Bench 并采用双头加多阶段训练的 ToxiAlert 模型,最强证据是在自建基准上相对最强基线 Macro-F1 相对提升 21.1%、准确率相对提升 13.0%,代价是合成数据依赖 TTS 表现力与细粒度类别仍存在明显短板。

 · 更新于 2026-10-16 · 约 20 分钟 · 9976 字 阅读 →
论文解读

从播报式评测转向双人对话:Candor-LR 如何暴露音频退化并放大视觉补偿

针对播报式基准低估真实对话难度的问题,该工作把 1656 段双人视频会议转成 713.5 hours 训练加 60.1 hours 测试的视听识别基准,报告显示纯音频错误率从 LRS3 的 0.74–1.95% 升至 16.83–24.32%,而混合训练可把对话测试集视听错误率压到 9.83% 与干净条件下 8.48%,代价是必须自备原数据许可并复刻多步清洗 …

 · 更新于 2026-10-16 · 约 20 分钟 · 9639 字 阅读 →
论文解读

把只有发音的埃及儿童对话变成可计算的带符正字法:ARABABYTALK-EGY 如何标注与设基准

该文把埃及阿拉伯语 CHILDES 的国际音标转写为全带符 CODA 正字法并加上引理与核心词性,得到约 2.6 万词例的语料,并在形态消歧与语音识别上给出基线,代价是语料规模小且 GPT-4o 初转写准确率低、需大量人工校对。

 · 更新于 2026-10-16 · 约 17 分钟 · 8252 字 阅读 →
论文解读

一种检测器要听懂四种造假:小波提示如何补上频率感知

针对语音、声音、歌声与音乐四类音频造假统一检测问题,论文提出冻结语音自监督模型并只学习提示词的小波提示调优方法,在四类联合训练下以远少于微调的参数取得更低的平均等错误率,但单类训练仍难跨类泛化。

 · 更新于 2026-10-16 · 约 19 分钟 · 9083 字 阅读 →
论文解读

只看画面就分割:音频缺席时音频-视觉分割为何失灵

论文指出当前音频-视觉分割模型依赖视觉显著性而忽视音频,用 AVSBench-Robust 的正负音频对照和分类器引导的相似度学习把单源 G-mIoU 做到 87.672 并把负样本误激活压到近零,代价是正样本分割分数略有回落。

 · 更新于 2026-10-16 · 约 18 分钟 · 8657 字 阅读 →
会议总览

eacl-2026 论文深度解读

共收录 36 篇 eacl-2026 会议论文的 Reader 深度解读

 · 更新于 2026-10-16 · 约 75 分钟 · 37568 字 阅读 →
论文解读

在急救现场做第一视角助手:EgoEMS 为何先解决多模态同步与关键步骤标注

EgoEMS 针对院前急救中多成员协同与强流程性难以建模的问题,用 233 次模拟试验同步采集第一视角视频、音频、手表惯性与按压真值并标注 67 类关键步骤,基准显示监督变换器在分类达 62.3% 而零样本大模型仍明显落后,代价是模拟与真实出警之间仍有分布差距。

 · 更新于 2026-10-16 · 约 21 分钟 · 10163 字 阅读 →
论文解读

藏在声音特征里的后门:语速与情感为何能绕过音频大模型对齐

论文提出以语速、情感、噪声、口音、音量等声学特征为触发器的后门攻击框架 HIN 与 AudioSafe 评测,在 5% 投毒下语速与情感触发达到 100% 攻击成功率而音量触发不足 6.2%,且训练损失几乎不波动,代价是防御仍需在安全性与可用性之间权衡。

 · 更新于 2026-10-16 · 约 16 分钟 · 7640 字 阅读 →
论文解读

单语很强、混着说就错:HiKE 用三级切换与借词标注拆解韩英代码切换识别

针对韩英混说识别缺乏公开非合成评测的问题,HiKE 以 1121 句自然录音加词/短语/句子三级与借词标注做细粒度评测,报告 10 个多语模型单语转混说时 MER 扩大 3 到 13 倍,而拼接单语合成的句级数据微调也能带来 6.8% 以上改善,但自然句内数据仍更优。

 · 更新于 2026-10-16 · 约 16 分钟 · 7799 字 阅读 →
论文解读

从能转写到能听懂言外之意:HPSU 如何检验语音大模型的类人听觉

HPSU 针对真实口语中潜在意图与隐含情绪的理解缺口,用三阶段多模态半自动标注构建 2 万余中英样本与 16 个任务,并以 13 个模型与人类基线对比显示最好模型仅 62.6% 而人类达 87.3%,代价是依赖自动裁判与多模型协同标注带来的可复现性核对负担。

 · 更新于 2026-10-16 · 约 18 分钟 · 8751 字 阅读 →
论文解读

从看见听见到回得得体:HumanSense 把共情拆成可测的四层阶梯

针对多模态大模型在以人为中心场景中感知尚可但理解与回应不足的问题,论文用 3882 道真人记录选择题建四层基准并以多阶段全模态强化学习做推理模型,最强证据是人类 87.5% 领先最优模型 29.7 个百分点,而代价是长上下文推理仍是瓶颈且音频任务覆盖不全。

 · 更新于 2026-10-16 · 约 17 分钟 · 8399 字 阅读 →
论文解读

直播不是更长的短视频:LiViBench 如何测互动理解与评论利用

针对主播与观众实时互动的直播视频理解问题,论文用多智能体加种子问题的人机协同流程构建含音频语音评论的 3168 视频 3175 题基准,并以两阶段指令微调加视频到评论检索训练 LiVi-LLM-7B,在 LiViBench 上报告 64.4% 的总准确率,代价是仍落后最优闭源模型的直播专有任务与对海量评论的依赖取舍。

 · 更新于 2026-10-16 · 约 19 分钟 · 9418 字 阅读 →
论文解读

MAVERIX:逼模型同时听和看,堵住单模态捷径的音视频理解基准

MAVERIX 用 700 段视频与 2556 道必须联合音视频才能回答的问题,测出以 Gemini 2.5 Flash-Lite 约 54.7% 选择题准确率为代表的模型与 92.8% 人类表现之间的大幅差距,代价是更长的人工标注与多轮去捷径校验流程。

 · 更新于 2026-10-16 · 约 21 分钟 · 10185 字 阅读 →