论文解读

深度冗余时做减法:用浅层对齐让伪造语音检测走得更远

针对 Transformer 伪造语音检测器深层冗余且域外泛化差的问题,论文用 XLS-R 加 1 到 4 层 MTLA 分类器并以角距离把浅层向末层对齐,在 19LA 训练、多域评测下以 479.11K 分类器参数取得域外增益,但过强对齐与过深堆叠仍会退化。

 · 更新于 2026-11-05 · 约 20 分钟 · 9858 字 阅读 →
论文解读

剪层扰动解码接口后如何恢复:X-AuT 的渐进压缩与跨尺度蒸馏

针对 Qwen3-ASR-0.6B 的 18 层音频编码器,X-AuT 用短预算行为探针选择可恢复层组合,再经表示对齐、跨尺度蒸馏与 LoRA 微调分两跳压到 14 层,单次运行显示 16 层宏平均误差从 5.61% 降到 5.27%,14 层为 5.75% 且音频塔参数减少 20.7%。

 · 更新于 2026-11-05 · 约 8 分钟 · 3529 字 阅读 →
论文解读

高层偏向视频、跨模态不宜直并:AccKV 按层聚焦再校准压缩音视频 KV

针对音视频大模型推理时 KV 缓存过大问题,AccKV 按层自适应聚焦关键模态并先模态内合并再跨模态校准,在 MVBench 与 AVSD 上用 10% 缓存与 120 词元预算维持接近全缓存精度,但未测量延迟与吞吐提升。

 · 更新于 2026-11-05 · 约 16 分钟 · 7861 字 阅读 →
论文解读

把多模态 token 推迟送入:在中间层汇合为何能省算力

论文针对多模态 token 与文本从第 0 层共同走完全部语言模型层造成的算力负担,提出仅让文本走完全程而把多模态 token 直接送入中间层的 DeepInsert,并在视觉、音频、分子模态中显示第 4 层插入可持平基线,而更深插入可用可接受回落换取推理加速。

 · 更新于 2026-11-05 · 约 19 分钟 · 9123 字 阅读 →
会议总览

eacl-2026 论文深度解读

共收录 36 篇 eacl-2026 会议论文的 Reader 深度解读

 · 更新于 2026-11-05 · 约 75 分钟 · 37568 字 阅读 →
论文解读

边听边译不重算:全单向架构如何让大模型学会何时读、何时写

针对同声传译需在部分语音下增量输出的问题,EASiST 用多延迟语义分块构造单调交错数据、全单向语音编码器加 LLM 与轻量读写策略头经三阶段训练实现自适应低重算推理,在 MuST-C 与 Europarl-ST 英德英西上取得更好的延迟质量权衡,但自适应增益依赖分块对齐质量与阈值调节。

 · 更新于 2026-11-05 · 约 19 分钟 · 9178 字 阅读 →
论文解读

压缩对齐与异步去噪:READ 如何把扩散说话头做到实时

针对扩散说话头推理慢与长视频接缝断裂问题,READ 用 32×32×8 时空压缩加 SpeechAE 对齐音频与 A2V-DiT 生成,并在 HDTF 上以 4.421 骨干耗时取得 Sync-C 8.658 的竞争精度,代价是需 8 步采样与 Split-CFG 增加约 50% 耗时。

 · 更新于 2026-11-05 · 约 18 分钟 · 8991 字 阅读 →
论文解读

信息不均匀时不再平均分配:用聚类定长短、用索引记时长

针对固定帧率对静音与稳态元音浪费而对快速过渡欠分配的问题,VARSTok 用时间感知的密度峰聚类做变长切分并用扩展索引隐式编码时长,在平均 30.95 Hz 下重建 UTMOS 达 3.8949 超过 40 Hz 固定基线,但更低码率与说话人相似度上仍有代价。

 · 更新于 2026-11-05 · 约 16 分钟 · 7911 字 阅读 →
论文解读

先找重层再剪通道:SepPrune 为语音分离模型省算力的三步剪枝

针对语音分离模型分离网络最重、均匀剪枝易伤轻层的矛盾,SepPrune 用结构分析定位、可微掩码选通道、剪后微调恢复的分布优化,在三数据集多骨干上降低参数与计算量,而一轮微调即可恢复大部分性能,但大幅剪枝时恢复速度因结构而异。

 · 更新于 2026-11-05 · 约 17 分钟 · 8155 字 阅读 →
论文解读

把扩散模型变成流水线:滚动去噪如何实现连续随语音手势

该文把随语音手势生成改成随音频推进的滚动扩散窗口,用逐帧递增的噪声排布和一次性解码多帧的梯子加速,在 ZEGGS 与 BEAT 上提升连贯性与多样性,代价是梯子步长增大时在表现力强的数据上会出现平滑与抖动问题。

 · 更新于 2026-11-05 · 约 19 分钟 · 9360 字 阅读 →
论文解读

归纳一次反复复用:从三段音频中提炼可迁移的听答步骤

针对音频问答中少样本演示不稳定且每次推理都要重复传入演示音频的问题,论文提出每个任务只归纳一次纯文字指令的 Audio-Induct,并在 9 个大音频语言模型与两个基准上验证其准确率与推理开销,代价是小模型自行归纳仍不稳定且对策略思维链仅边缘显著。

 · 更新于 2026-11-05 · 约 17 分钟 · 8402 字 阅读 →
论文解读

不用教师也能学轨迹跳转:自蒸馏一致性轨迹的快速语音增强

针对扩散增强推理步数多、原有 SBCTM 依赖预训练教师的问题,该工作用学生自身的 EMA 拷贝生成轨迹目标并配合三阶段课程,在相同 NCSN++ 骨干上以两步几何调度达到 PESQ 3.01、SI-SDR 19.07 dB,代价是 PESQ 仍低于直接优化 PESQ 损失的教师模型。

 · 更新于 2026-11-05 · 约 17 分钟 · 8276 字 阅读 →
论文解读

视频推理为何仍贵:沿采样编码连接器与解码四段查开销

该综述把视频大模型开销定位到帧选择、编码器、连接器压缩与大模型预填充解码四段,显示约 25 % 视觉 token 保留下多类方法接近基线精度,而推到约 10 % 保留与流式内存时必须显式建模时间冗余并计入选择器与编码代价。

 · 更新于 2026-11-05 · 约 21 分钟 · 10163 字 阅读 →
论文解读

先出声再等文本:用原生语音令牌在波形之前跟踪读到哪

增量文本流式语音合成需要在线知道说到原文何处,X2-NativeCursor 用原生语音令牌加局部匹配做可修正估计再输出单调光标,在 80 毫秒前视下中文平均绝对误差 0.151 字,对比在线波形基线 320 毫秒前视下 1.253 字,代价是每个主干需单独训练观察器且对未见音色敏感。

 · 更新于 2026-11-05 · 约 19 分钟 · 9189 字 阅读 →
论文解读

不对称残差融合能否替代双向跨模态 Transformer:RAFM-SER++ 的轻量化权衡

RAFM-SER++ 以文本为查询、语音为键值的单向残差注意力替代双向跨模态 Transformer,结合 BYOL 式对齐与注意力池化,在 IEMOCAP 上达到 81.10% BACC、ESD 上 95.39% BACC,同时将可训练参数从 8.9M 降至 3.6M 并提升推理吞吐。

 · 更新于 2026-11-05 · 约 20 分钟 · 9994 字 阅读 →
论文解读

轻量时序建模如何兼顾精度与跨库泛化:SETEAB 的下采样、通道校准与双向加权融合

针对语音情感识别中时序依赖不稳定与计算冗余问题,SETEAB 在 TIM-Net 基础上引入深度可分离下采样、SE-Res2Block、TEAB 与全局加权双向融合,在 5 个库平均上以 0.06 - 0.12 GFLOPs 实现 47.69% UA 与 45.23% F1,并在跨库平均 WA 上达到 37.53% 且保持 0.4 - 0.5M 参数量级。

 · 更新于 2026-11-05 · 约 19 分钟 · 9189 字 阅读 →
论文解读

先定语义再补声音:TontaubeV1 用分层编解码与有界上下文做流式语音合成

TontaubeV1 把 12.5 Hz 分层编解码的语义流交给大模型定韵律与时长、三个小模型逐层补声学细节,并用配对边界与有界窗口做长文本流式合成,代价是四阶段串行与非因果解码需二次转码,在 400 段英文有声书评测中韵律与 ElevenLabs Flash v2.5 持平并领先其余三家。

 · 更新于 2026-11-05 · 约 18 分钟 · 9018 字 阅读 →
论文解读

不用时间刻度做修复:判别表示如何指示流匹配的剩余路程

论文针对修复任务中全局时间 t 无法刻画样本相关退化程度的问题,提出以冻结判别编码器表示替代时间条件来驱动流匹配速度场,在语音增强上报告了可复核的提升,并以额外编码器开销和自适应推理换取计算节省。

 · 更新于 2026-11-05 · 约 21 分钟 · 10282 字 阅读 →
论文解读

无相位也能低延迟重建语音:EffVOC 把窗长钉在 20 毫秒

EffVOC 用因果卷积加 LSTM 的上采样声码器从幅度谱或 Mel 系数直接重建宽带与全频带波形,在 20 毫秒算法延迟下宽带 MOS 达到 4.17 与 4.15、全频带达到 4.14 与 4.11,代价是更高帧率带来的计算量与对短窗高重叠的依赖。

 · 更新于 2026-11-05 · 约 17 分钟 · 8255 字 阅读 →
论文解读

在标准 vLLM 上跑实时对话语音:GEPARD 把定制算子移出解码循环的取舍

GEPARD 为实时对话把文本与 32 通道 GroupFSQ 音频在同一标准全注意力 Transformer 中联合自回归生成并用 NanoCodec 流式解码,以 vLLM 原生可服务为首要约束,通过 prefill 前缀克隆、单步并行采样与 DPO 蒸馏 CFG 实现单流 RTF 约 0.067 与 256 并发约 204 倍加速,代价是帧级并行带来的 …

 · 更新于 2026-11-05 · 约 22 分钟 · 10716 字 阅读 →