UBG-Net: An Uncertainty-aware Bayesian Gating Network for Robust Audio-Visual Speech Recognition

📄 UBG-Net: An Uncertainty-aware Bayesian Gating Network for Robust Audio-Visual Speech Recognition #语音识别 #模型集成 7.1/10 | 创新 1.5/2 | 严谨 1.2/1.5 | 实验 1.1/1.5 | 清晰 0.8/1 | 影响 1/1.5 | 开源 0.2/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ✅ 7.1/10 | 前50% | #语音识别 | #模型集成 | arxiv 👥 作者与机构 第一作者:Jinjie Fu(University of Science and Technology of China, NERC-SLIP) 通讯作者:未说明 作者列表:Jinjie Fu、Hang Chen、Wu Guo、Zhijun Zhang、Kuiliang Li、Peng Gao(均来自 University of Science and Technology of China, NERC-SLIP) 💡 毒舌点评 本文将信号层偶然不确定性作为上下文注入贝叶斯门控网络,在极具挑战的真实多说话人场景中实现了可观的 WER 下降,融合与解码的联合设计具有明显洞察。然而,实验完全依赖单一预训练主干 AV-HuBERT 且仅在两个数据集上验证,缺乏与其他显式不确定性基线的深入对比,且 UBG-Net 自身未提供任何代码或权重,使得“SOTA”宣称的可复现性存疑。 ...

2026-07-09 · 更新于 2026-07-24 · 3 min · 596 words

CHILDES-Aligned: A Curated Children's Speech Dataset via Multi-Model Timestamp Ensembling

📄 CHILDES-Aligned: A Curated Children's Speech Dataset via Multi-Model Timestamp Ensembling #语音识别 #模型集成 #数据集 #数据清洗 #低资源 7.2/10 | 创新 1/2 | 严谨 1/1.5 | 实验 0.8/1.5 | 清晰 0.8/1 | 影响 0.8/1.5 | 开源 1.2/1.5 | 复现 0.3/0.5 | 工程 1.3/1.5 ✅ 7.2/10 | 前50% | #语音识别 | #模型集成 | #数据集 #数据清洗 | arxiv 👥 作者与机构 第一作者:Haolong Zheng(University of Illinois Urbana-Champaign) 通讯作者:Mark A. Hasegawa-Johnson(University of Illinois Urbana-Champaign) 作者列表:Haolong Zheng(UIUC)、Yuanzhuo Hu(CUHK, Shenzhen)、Xinyu Liang(CUHK, Shenzhen)、Vishal Sunder(IBM Research)、Dancheng Liu(University at Buffalo, SUNY)、Jinjun Xiong(University at Buffalo, SUNY)、Samuel Thomas(IBM Research)、Brian Kingsbury(IBM Research)、Zhizheng Wu(CUHK, Shenzhen)、Mark A. Hasegawa-Johnson(UIUC) 💡 毒舌点评 这篇论文把一个务实的工程问题解决得相当漂亮:用多模型集成投票替代脆弱的单系统对齐,把那个乱糟糟的 CHILDES 时间戳修到可用水平,并且大方地放出了数据和代码。不过方法本身的创新深度有限,本质上是对齐+投票的组合拳,缺少对组件或超参数的深入消融分析,实验部分更像是产品交付报告而非严格的研究验证,微调实验关键细节的缺失让复现性打了折扣。 ...

2026-07-07 · 更新于 2026-07-24 · 3 min · 599 words

Multilingual Long-Form Speech Instruction Following: KIT's Submission to IWSLT 2026

📄 Multilingual Long-Form Speech Instruction Following: KIT's Submission to IWSLT 2026 #语音识别 #语音合成 #语音翻译 #多模态模型 #数据增强 #参数高效微调 #模型集成 10/10 | 创新 1.5/2 | 严谨 1.2/1.5 | 实验 1.3/1.5 | 清晰 1/1 | 影响 1.5/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 🔥 10/10 | 前10% | #语音识别 | #数据增强 | #语音合成 #语音翻译 | arxiv 👥 作者与机构 Enes Yavuz Ugan, Maike Züfle, Yuka Ko, Supriti Sinhamahapatra, Fabian Retkowski, Seymanur Akti, Jan Niehues, Alexander Waibel 1 Karlsruhe Institute of Technology (KIT) 2 Carnegie Mellon University ...

2026-06-04 · 更新于 2026-07-24 · 3 min · 569 words