论文解读

边听边译不重算:全单向架构如何让大模型学会何时读、何时写

针对同声传译需在部分语音下增量输出的问题,EASiST 用多延迟语义分块构造单调交错数据、全单向语音编码器加 LLM 与轻量读写策略头经三阶段训练实现自适应低重算推理,在 MuST-C 与 Europarl-ST 英德英西上取得更好的延迟质量权衡,但自适应增益依赖分块对齐质量与阈值调节。

 · 更新于 2026-11-05 · 约 19 分钟 · 9178 字 阅读 →
论文解读

多语言共用低秩空间为何冲突:MoLoRA 用共享与路由专家分开建模

针对多语言端到端语音翻译中共用单组低秩更新导致语言间干扰的问题,MoLoRA 把多个低秩适配模块当作专家并辅以多粒度语音融合,在 MuST-C 八语言平均 32.2 与 CoVoST-2 三语言平均 36.3 的 BLEU 下超过同量级单 LoRA,代价是路由与负载均衡等额外机制和调参成本。

 · 更新于 2026-11-05 · 约 21 分钟 · 10072 字 阅读 →
论文解读

不追求逼真、追求可控:用功率谱模板与小规模搜索做语音翻译鲁棒训练

针对语音到文本翻译在真实噪声下不稳定的问题,论文用可解释环境模拟器加功率谱模板原型约简与 27 组小规模超参数搜索组织鲁棒训练,在相同数据预算下使模拟噪声训练与真实噪声训练表现接近,代价是混响与精细调度需另行取舍且最优配置只在搜索范围内成立。

 · 更新于 2026-11-05 · 约 18 分钟 · 8894 字 阅读 →
论文解读

同样的文字为何译法不同:用双分支把重音和情绪送进语音翻译

针对端到端语音翻译只对齐文字内容而丢失重音与情绪的问题,论文用语音编码器与风格编码器双分支加分层最优传输和注意力检索来分离并再融合两类信息,在 ContraProST 上提升方向性约 5.0 点、全局约 4.5 点,在 CoVoST-2 上 2B 平均提升 0.43 BLEU、8B 提升 0.98 BLEU,代价是两阶段训练与额外风格编码器开销。

 · 更新于 2026-11-05 · 约 17 分钟 · 8473 字 阅读 →
论文解读

等还是说:REINA 用信息增益把非流式翻译模型改成同传模型

针对同传要在质量与延迟之间选读或写的问题,REINA 用完整音频与截断音频下对数概率之差估计信息增益来训练独立策略网络,在 MUST-C 与 CVSS-C 上提升归一化流效率,但截断适配训练与单调约束不可缺且德语高延迟点仍有反例。

 · 更新于 2026-11-05 · 约 16 分钟 · 7713 字 阅读 →
论文解读

不等整句就翻译:用句法块教会大模型何时等待、何时落笔

针对同声传译需在流式语音下联合决定何时翻译与翻译什么的问题,SASST 用句法感知分块加目标侧重排构造含等待符号的流式监督并统一到冻结 Whisper 编码器加解码器大模型中,在 CoVoST2 英德英中英日上以 2 到 4 秒级延迟取得质量优势,其代价是依赖句法分析器与额外的对齐预处理。

 · 更新于 2026-11-05 · 约 18 分钟 · 8531 字 阅读 →
论文解读

在允许改写的前提下如何判定语义丢失:EviSI 的证据对齐与分层扣分

针对同传中为控延迟而产生的改写与概括,EviSI 用共享源证据与 Anchor/Event/Logic/Fluency 分工配合调和与确定性扣分来区分可接受变体与事实错误,在英中方向上恢复了人类系统总排序但在逐条输出上仍表现混杂。

 · 更新于 2026-11-05 · 约 20 分钟 · 9804 字 阅读 →
论文解读

卡住最强翻译模型:难例众包与逐条验证规则

该规则验证基准收集 3456 个跨 109 语言的难译输入;在 911 个纯文本难例的盲测与 Gemma 4 验证下,人类参考译文通过率为 99.1%,Gemini 3.1 Pro 为 43.8%。人译高通过部分由收录条件保证;提供人工规则后的高分属于特权信息诊断,不代表模型自生成规则的能力。

 · 更新于 2026-11-05 · 约 22 分钟 · 10621 字 阅读 →
论文解读

当解码器缺的不是声音,而是下一词的语义证据

语音识别 | 8.4/10

 · 更新于 2026-11-05 · 约 23 分钟 · 11111 字 阅读 →
论文解读

翻译丢掉的不只是词:当语调跨越语言还能剩下多少?

语音翻译 | 6.0/10

 · 更新于 2026-11-05 · 约 17 分钟 · 8041 字 阅读 →
论文解读

The Null Token Knows: Reducing Message-Free Hallucination in ASR and NMT

语音识别 | 6.5/10

 · 更新于 2026-11-05 · 约 15 分钟 · 7035 字 阅读 →
论文解读

VoxSumm: A Multilingual Corpus of Long-Form Spoken News for Joint Summarization and Translation

语音翻译 | 6.9/10

 · 更新于 2026-11-05 · 约 12 分钟 · 5820 字 阅读 →
论文解读

Breaking the Curse of Multilinguality in Many-to-Many Speech-to-Text Translation via a Resource-Aware Mixture of Speech Encoders

语音翻译 | 8.2/10

 · 更新于 2026-11-05 · 约 16 分钟 · 7762 字 阅读 →
论文解读

The Role of Disfluencies in Speech Translation

语音翻译 | 6.4/10

 · 更新于 2026-11-05 · 约 22 分钟 · 10618 字 阅读 →
论文解读

SimulS2ST-Omni: Data-Efficient Streaming Speech-to-Speech Translation via Explicit Trajectory Supervision

语音翻译 | 7.3/10

 · 更新于 2026-11-05 · 约 15 分钟 · 7236 字 阅读 →
论文解读

When to Use Extra Context: Evidence-Grounded Terminology Adaptation for Simultaneous Speech Translation

语音翻译 | 6.7/10

 · 更新于 2026-11-05 · 约 13 分钟 · 6074 字 阅读 →
论文解读

X-Translator: A Real-Time Multilingual Speaker-Aware Speech-to-Speech Translation System

语音翻译 | 7.8/10

 · 更新于 2026-11-05 · 约 16 分钟 · 7793 字 阅读 →
论文解读

Do LLMs Need Architectural Changes for Simultaneous Speech Translation? A Prefix-to-Prefix Data Driven Approach

语音翻译 | 5.7/10

 · 更新于 2026-11-05 · 约 15 分钟 · 7514 字 阅读 →
论文解读

Gemma 4 Technical Report

语音识别 | 6.2/10

 · 更新于 2026-11-05 · 约 17 分钟 · 8126 字 阅读 →
论文解读

NAVER LABS System Re-implementation for the IWSLT 2026 Instruction-Following Task

语音翻译 | 6.4/10

 · 更新于 2026-11-05 · 约 12 分钟 · 5932 字 阅读 →