ICLR 2026 语音/音频论文详细分析

ICLR 2026 语音/音频论文详细分析 共分析 133 篇 ICLR 2026 论文 🎯 任务分类 点击任务标签查看该方向所有论文: 语音合成(10篇) 音频生成(9篇) 语音识别(9篇) 基准测试(9篇) 音乐生成(9篇) 语音对话系统(8篇) 音频分类(6篇) 音频问答(6篇) 语音情感识别(5篇) 多模态模型(5篇) 音视频(4篇) 音频检索(4篇) 语音分离(3篇) 模型评估(2篇) 语音翻译(2篇) 音乐信息检索(2篇) 生成模型(2篇) 音乐理解(2篇) 视频生成(2篇) 跨模态生成(1篇) 脑编码(1篇) 模型可解释性(1篇) 音视频深度伪造检测(1篇) 图像生成(1篇) 数据集(1篇) 语音增强 #对抗样本(1篇) 语音大模型(1篇) 音频编辑(1篇) 音视频事件检测(1篇) 生态计算(1篇) 视频描述生成(1篇) 视频摘要(1篇) 语音问答(1篇) 基准测试 #数据集(1篇) 音频安全(1篇) 神经网络架构(1篇) 语音转换 #语音匿名化(1篇) 声源定位(1篇) 序列解耦(1篇) 空间音频(1篇) 音频分离(1篇) 机器人操作(1篇) 动作生成(1篇) 音频场景理解(1篇) 跨模态检索(1篇) 语音增强(1篇) 多模态推理(1篇) 语音合成评估(1篇) 语音生成(1篇) 生物声学(1篇) 模型比较(1篇) 音视频联合推理(1篇) 语音识别 #语音合成(1篇) ⚡ 今日概览 📥 133 篇 → 🔬 深度分析完成 ...

2026-05-01 · 更新于 2026-05-19 · 72 min · 15177 words

Sometin Beta Pass Notin (SBPN): Improving Multilingual ASR for Nigerian Languages via Knowledge Distillation

📄 Sometin Beta Pass Notin (SBPN): Improving Multilingual ASR for Nigerian Languages via Knowledge Distillation #语音识别 #知识蒸馏 #多语言 #低资源 #伪标签 ✅ 6.2/10 | 前50% | #语音识别 | #知识蒸馏 | #多语言 #低资源 | arxiv 学术质量 4.7/8 | 影响力 0.8/1 | 可复现性 0.7/1 | 置信度 高 👥 作者与机构 第一作者:Sewade Ogun 通讯作者:未明确说明(论文仅提供第一作者邮箱) 作者列表:Sewade Ogun 💡 毒舌点评 这篇论文是一项扎实的工程集成工作,为尼日利亚低资源语言构建了一套完整的多语言ASR训练流水线,并开源了模型。其最大价值在于填补了该领域缺乏专用开源基础模型的空白,并通过详尽的工程优化(如伪标签生成流水线、皮钦语文本归一化)取得了优于现有基线的性能。然而,核心方法(知识蒸馏+伪标签迭代)是已有技术的直接应用,缺乏架构或算法层面的创新。对于顶会而言,其贡献更偏向于系统集成与数据处理,而非方法论上的突破。 📌 核心摘要 问题:现有支持尼日利亚语言(约鲁巴语、豪萨语、伊博语、尼日利亚皮钦语、尼日利亚英语)的多语言ASR系统性能落后于高资源语言,主要挑战包括数据稀缺、不规则正字法、声调变音符号、语码转换及本地命名实体。 方法核心:提出一个两阶段多语言ASR框架。第一阶段,利用多个现有的单语教师模型,通过带N-gram语言模型融合的CTC解码生成伪标签,结合少量人工标注数据,通过知识蒸馏训练一个统一的多语言学生模型(SBPN)。第二阶段,使用训练好的学生模型对未标注数据生成更优伪标签,经置信度过滤后进行迭代自训练。 与已有方法相比的新颖性:论文未提出新的模型架构或训练算法。其新颖性在于系统性地集成并优化了现有技术(知识蒸馏、大规模伪标签生成、针对特定语言的文本归一化、轻量化模型设计),专门解决尼日利亚语言ASR的独特挑战,是一个针对特定语言群组的工程化解决方案。 主要实验结果: SBPN-Large在Fleurs测试集上相对于单语教师模型实现了平均29%的相对WER降低。 SBPN-Base(120M参数)在Common Voice测试集上平均WER为25.53%,显著优于同量级基线AfriHuBERT(64.27%)和mHuBERT-147(69.53%)。 SBPN-Large(600M参数)在Fleurs测试集上平均WER为32.72%,优于参数量更大的MMS-1B(41.23%)和Whisper Large(116.46%)。 模型对语速变化表现出更强的鲁棒性(图3)。 模型在语言识别任务上也表现出色(表6)。 实际意义:提供了首个专门为尼日利亚主要语言构建的开源多语言基础ASR模型(SBPN),降低了该领域研究和应用的门槛,有助于数字鸿沟的弥合和语言保护。 主要局限性:对于含声调变音符号的语言(如约鲁巴语),模型在正确预测变音符号方面仍有较大提升空间(图4);论文坦承生成式纠错(GEC)方法引入了幻觉;主要创新在于系统集成而非方法论突破;未充分测试模型处理语码转换的能力。 🔗 开源详情 代码:论文中未提及代码链接。 模型权重: SBPN-Base checkpoint: https://huggingface.co/ogunlao/SBPN_multilingual_base SBPN-Large checkpoint: https://huggingface.co/ogunlao/SBPN_multilingual_large 单语教师模型 (Hausa): https://huggingface.co/CLEAR-Global/w2v-bert-2.0-hausa_579_993h_yourtts 单语教师模型 (Igbo): https://huggingface.co/CLEAR-Global/w2v-bert-2.0-igbo_naijavoices_500h 单语教师模型 (Yorùbá): https://huggingface.co/CLEAR-Global/w2v-bert-2.0-yoruba_naijavoices_500h 单语教师模型 (Nigerian Pidgin): https://huggingface.co/asr-nigerian-pidgin/pidgin-wav2vec2-xlsr53 SBPN-Base 预训练权重:https://huggingface.co/nvidia/parakeet-tdt_ctc-110m 数据集: Common Voice (https://commonvoice.mozilla.org/) Naijavoice dataset (论文中未提供链接,仅提及数据集名和出处) Fleurs (https://huggingface.co/datasets/google/fleurs) SLR86 (https://www.openslr.org/86/) BibleTTS (论文中未提供链接,仅提及数据集名和出处) Igbo-asr (https://www.kaggle.com/code/jameskaile/igbo-asr/input) Nigerian pidgin dataset (论文中未提供链接,仅提及数据集名和出处) Afrispeech-200 (论文中未提供链接,仅提及数据集名和出处) Gigaspeech (https://github.com/Speechcolab/gigaspeech) 未标注数据集:约10000小时,来源于尼日利亚广播、在线音频平台和免费播客,论文中未提供获取链接。 Demo:论文中未提及。 复现材料: 模型超参数详情见论文附录 C。 用于尼日利亚皮钦英语文本规范化的同音词列表见论文附录 A 和 B。 训练细节:使用 NeMo 语音工具包,采用 AdamW 优化器,进行 SpecAugment、噪声添加、时间拉伸等数据增强。 论文中引用的开源项目: NeMo (https://github.com/NVIDIA/NeMo) KenLM (https://github.com/kpu/kenlm) MossFormer2 (论文中未提供链接,仅提及论文) Pyannote speaker diarization toolkit (https://github.com/pyannote/pyannote-audio) Silero VAD (https://github.com/snakers4/silero-vad) VoxLingua107-ECAPA (https://huggingface.co/speechbrain/lang-id-voxlingua107-ecapa) AfroLID (论文中未提供链接,仅提及论文) Flashlight decoder (https://github.com/flashlight/flashlight) pyctcdecode (https://github.com/kensho-technologies/pyctcdecode) PyTSMod (https://github.com/KAIST-MACLab/PyTSMod) MUSAN dataset (论文中未提供链接,仅提及论文) Text processing tool (论文中未提供链接,仅提及论文) 🏗️ 方法概述和架构 本文的SBPN框架是一个端到端的多语言ASR系统构建流程,其核心是通过知识蒸馏将多个单语教师模型的能力融合到一个统一的多语言学生模型中,并利用伪标签进行迭代自改进。 ...

2026-05-19 · 更新于 2026-05-19 · 3 min · 482 words

UrduSpeech: A 156-Hour Urdu Speech Corpus with 12-Dimension Paralinguistic Annotations

📄 UrduSpeech: A 156-Hour Urdu Speech Corpus with 12-Dimension Paralinguistic Annotations #语音识别 #数据集 #多语言 #低资源 #数据清洗 ✅ 7/10 | 前25% | #语音识别 | #数据集 | #多语言 #低资源 | arxiv 学术质量 5.8/8 | 影响力 0.7/1 | 可复现性 0.5/1 | 置信度 高 👥 作者与机构 第一作者:Attia Nafees ul Haq (Audio, Speech and Language Processing Group (ASLP@NPU), Northwestern Polytechnical University) 通讯作者:Attia Nafees ul Haq, Lei Xie (邮箱:attianafees@mail.nwpu.edu.cn, lxie@nwpu.edu.cn) 作者列表:Attia Nafees ul Haq (ASLP@NPU, Northwestern Polytechnical University), Zeyu Zhu (ASLP@NPU, Northwestern Polytechnical University), Jingbin Hu (ASLP@NPU, Northwestern Polytechnical University), ChunJiang He (ASLP@NPU, Northwestern Polytechnical University), Lei Xie (ASLP@NPU, Northwestern Polytechnical University) 💡 毒舌点评 亮点:针对乌尔都语这一“高人口、低资源”语言,首次系统构建了包含156小时音频、12维副语言标注的大规模开放语料库,有效解决了RTL脚本和代码切换两大处理难题,为相关研究提供了关键基础设施。短板:论文核心贡献是数据集及数据整理流水线,但对流水线核心组件(尤其是基于Gemini的提示工程)的细节描述和消融分析不足,更像一份详尽的工程报告。更关键的是,所有转录和标注质量都深度绑定一个闭源商业模型(Gemini 2.5 Pro),其长期可及性、结果一致性和完全可复现性存疑,这构成了方法论上的根本性弱点。 ...

2026-05-19 · 更新于 2026-05-19 · 2 min · 386 words

语音/音频论文速递 2026-05-19

语音/音频论文速递 2026-05-19 共分析 34 篇论文 ⚡ 今日概览 📥 抓取 34 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 4篇 ████ #音频深度伪造检测 2篇 ██ #音频生成 2篇 ██ #音频安全 1篇 █ #多模态模型 1篇 █ #音频编码 1篇 █ #音频修复 1篇 █ #医疗音频 1篇 █ 📊 论文评分排行榜(34 篇,按分数降序) 排名 论文 评分 分档 主任务 🥇 Acoustic Interference: A New Paradigm Weaponizing Acous 8.7分 前25% #音频安全 🥈 CodeBind: Decoupled Representation Learning for Multimo 8.6分 前15% #多模态模型 🥉 SAME: A Semantically-Aligned Music Autoencoder 8.5分 前25% #音频编码 4. A Survey of Advancing Audio Super-Resolution and Bandwi 8.1分 前25% #音频修复 5. MedASR: An Open-Source Model for High-Accuracy Medical 7.9分 前30% #语音识别 6. Speaker-Disentangled Remote Speech Detection of Asthma 7.5分 前50% #医疗音频 7. MusicDET: Zero-Shot AI-Generated Music Detection 7.4分 前25% #音频深度伪造检测 8. VISAFF: Speaker-Centered Visual Affective Feature Learn 7.4分 前25% #对话情感识别 9. Robust Audio Tagging under Class-wise Supervision Unrel 7.3分 前25% #音频分类 10. SIREM: Speech-Informed MRI Reconstruction with Learned 7.3分 前40% #医学图像重建 11. Sonalyzer-Moz: A Framework for Analyzing the Structure 7.3分 前50% #音乐结构分析 12. Omni-Customizer: End-to-End MultiModal Customization fo 7.3分 前25% #音视频 13. Contextual Biasing for Streaming ASR via CTC-based Word 7.2分 前50% #语音识别 14. Beyond Transcripts: Iterative Peer-Editing with Audio U 7.2分 前50% #语音摘要 15. UrduSpeech: A 156-Hour Urdu Speech Corpus with 12-Dimen 7.0分 前25% #语音识别 16. Audio-Image Cross-Modal Retrieval with Onomatopoeic Ima 7.0分 前50% #音频检索 17. Profiling the Voice: Speaker-Specific Phoneme Fingerpri 7.0分 前50% #语音伪造检测 18. Voice ‘‘Cloning’’ is Style Transfer 7.0分 前25% #语音克隆 19. SemaVoice: Semantic-Aware Continuous Autoregressive Spe 6.8分 前50% #语音合成 20. Stable Audio 3 6.8分 前25% #音频生成 21. Taming Audio VAEs via Target-KL Regularization 6.7分 前50% #音频生成 #语音合成 22. WavFlow: Audio Generation in Waveform Space 6.7分 前25% #音频生成 23. Can Large Audio Language Models Ignore Multilingual Dis 6.5分 前50% #音频问答 24. PAREDA: A Multi-Accent Speech Dataset of Natural Langua 6.5分 前50% #语音数据集 25. Flexible Multi-Channel Target Speaker Extraction Using 6.3分 中等偏上 #说话人提取 26. Sometin Beta Pass Notin (SBPN): Improving Multilingual 6.2分 前50% #语音识别 27. A Fast Robust Adaptive filter using Improved Data-Reuse 6.2分 前50% #声学回声消除 28. Robust Soft-Constrained Spatially Selective Active Nois 5.7分 前25% #音频增强 29. Analyzing Error Propagation in Korean Spoken QA with AS 5.6分 前50% #语音问答 30. S2Accompanist: A Semantic-Aware and Structure-Guided Di 5.6分 前50% #音乐生成 31. A Distribution Matching Approach to Neural Piano Transc 5.5分 前50% #音乐转录 32. EnvTriCascade: An Environment-Aware Tri-Stage Cascaded 5.3分 前50% #音频深度伪造检测 33. Fractional-Order Subband p-Norm Adaptive Filter via Tra 5.0分 前50% #自适应滤波 34. Bridging the Gap: Converting Read Text to Conversationa 3.1分 后50% #语音转换 📋 论文列表 🥇 Acoustic Interference: A New Paradigm Weaponizing Acoustic Latent Semantic for Universal Jailbreak against Large Audio Language Models 🔥 8.7/10 | 前25% | #音频安全 | #对抗样本 | #多模态模型 #基准测试 | arxiv ...

2026-05-19 · 更新于 2026-05-19 · 23 min · 4805 words

Can Large Language Models Imitate Human Speech for Clinical Assessment? LLM-Driven Data Augmentation for Cognitive Score Prediction

📄 Can Large Language Models Imitate Human Speech for Clinical Assessment? LLM-Driven Data Augmentation for Cognitive Score Prediction #语音生物标志物 #数据增强 #大语言模型 #医疗音频 #低资源 ✅ 6/10 | 前50% | #语音生物标志物 | #数据增强 | #大语言模型 #医疗音频 | arxiv 学术质量 5.4/8 | 影响力 0.6/1 | 可复现性 0/1 | 置信度 中 👥 作者与机构 第一作者:Si-Belkacem Yamine Ketir (Télécom SudParis, France) 通讯作者:未说明 作者列表:Si-Belkacem Yamine Ketir (Télécom SudParis, France)、Lenard Paulo Tamayo (Nara Institute of Science and Technology, Japan)、Shohei Hisada (Nara Institute of Science and Technology, Japan)、Shaowen Peng (Nara Institute of Science and Technology, Japan)、Shoko Wakamiya (Nara Institute of Science and Technology, Japan)、Eiji Aramaki (Nara Institute of Science and Technology, Japan) 💡 毒舌点评 本文提出了一个逻辑清晰、临床动机明确的数据增强框架,其核心亮点在于“书面锚定+风格转换”的受控生成范式,并创新性地引入相似性引导策略以提升合成数据的语义保真度。然而,其说服力严重受限于实验规模:在一个仅30人、分布极不平衡且未公开的特定语料库上得出结论,且基线选择过于薄弱(仅对比无增强和高斯噪声),未与领域内更相关的文本增强方法(如EDA、回译)或更强大的预测模型进行对比,使得方法优越性的声称显得证据不足。此外,论文依赖于闭源的GPT-5模型,严重损害了工作的可复现性与普适性。 ...

2026-05-18 · 更新于 2026-05-19 · 2 min · 330 words

From Flat Language Labels to Typological Priors: Structured Language Conditioning for Multilingual Speech-to-Speech Translation

📄 From Flat Language Labels to Typological Priors: Structured Language Conditioning for Multilingual Speech-to-Speech Translation #语音翻译 #多任务学习 #多语言 #低资源 #语言学先验 ✅ 6.9/10 | 前50% | #语音翻译 | #多任务学习 | #多语言 #低资源 | arxiv 学术质量 5.9/8 | 影响力 0.6/1 | 可复现性 0.4/1 | 置信度 高 👥 作者与机构 第一作者:Yu Pan(九州大学信息科学与电气工程学院,工作完成时;现Recho Inc.,东京) 通讯作者:Jianjun Zhao(九州大学信息科学与电气工程学院) 作者列表:Yu Pan(九州大学/Recho Inc.)、Yang Hou(国家信息学研究所)、Xiongfei Wu(卢森堡大学SnT中心)、Yves Le Traon(卢森堡大学SnT中心)、Liang Zhang(东华大学)、Lei Ma(东京大学计算机系/阿尔伯塔大学电气与计算机工程系)、Jianjun Zhao(九州大学) 毸舌点评 论文提出一个清晰且动机充分的框架,旨在解决多语言S2ST中“扁平化语言标签”表示能力不足的问题,将语言学类型学知识系统性地注入条件机制。其核心价值在于论证了结构化先验在低资源场景下的显著增益,这为数据稀缺的多语言任务提供了实用思路。然而,该工作的“框架感”有限,本质上是对一个强基线(S2ST-Omni)在条件机制上的精巧改进,而非一个可广泛应用的新架构。实验评估完全局限于CVSS-C这一合成目标语音数据集,且未与最新的一些SpeechLLM工作进行对比,影响了结论的普适性和说服力。创新性尚可,但不足以称之为突破。 核心摘要 问题:现有基于SpeechLLM的多语言语音到语音翻译(S2ST)系统常采用扁平化的语言标签(language-as-label)作为条件,忽略了跨语言共享的系统性语言学结构(如形态、语序、谱系关联),这在低监督数据下限制了模型的多语言适应能力。 核心方法:提出S2ST-Omni 2框架,将语言条件从扁平标签重构为结构化类型学先验,在三个层面进行注入:a) 表示层:类型学启发的层次化语言编码(TI-HLE),将源语言分解为形态、重排、语系和残差特定通道;b) 声学层:动态门控的语言调制Dual-CTC(LA-Dual-CTC),根据内容自适应地调制中间声学特征;c) 解码层:类型学感知的LLM提示,提供翻译导向的语言学指导。 新意:不同于以往仅用独立语言嵌入,本文系统性地将显式的语言学类型学知识融入S2ST模型的条件机制中,旨在提供更有结构的归纳偏置,而非让模型从数据中隐式学习所有语言差异。 主要结果:在CVSS-C数据集上,S2ST-Omni 2在平均BLEU(37.73 vs 35.67)和ASR-BLEU(35.00 vs 33.45)上相比基线S2ST-Omni分别获得5.8%和4.6%的相对提升,并在COMET和BLASER 2.0上也取得最优。消融实验证实了三个层面组件的互补贡献。在仅~3小时监督数据的低资源日语-英语任务上,S2ST-Omni 2同样显著优于基线。数据预算分析显示,随着训练数据减少,S2ST-Omni 2相对于基线的BLEU相对增益从5.8%单调增加至15.1%。 实际意义:该工作为数据稀缺的多语言S2ST任务提供了一种有效的技术路径,即通过引入语言学先验来补偿监督信号的不足,对构建更具语言适应性和数据效率的跨语言语音系统有启发价值。 主要局限性:a) 方法依赖于预先定义的、针对英语翻译任务的特定类型学分类,其泛化性(如到其他目标语言)未验证;b) 框架复杂度增加(引入了多路CTC损失、FiLM调制、动态门控),训练和推理成本未充分分析;c) 主要实验局限于CVSS-C的三个欧洲语言对及合成目标语音,对其他语系、真实场景的覆盖有限;d) 未提供代码或模型权重,可复现性不足。 方法概述和架构 整体流程概述:S2ST-Omni 2是一个基于组件的组合式S2ST框架,分为语音到文本翻译(S2TT)前端和可插拔的文本到语音(TTS)后端。前端核心是一个SpeechLLM,它接收语音输入,并通过多层、多模块的条件调制,最终输出翻译文本。训练分为两阶段:第一阶段稳定语音-文本对齐,第二阶段通过LoRA微调增强LLM翻译能力。整个系统并非严格端到端,因为S2TT和TTS通过显式文本接口解耦。 ...

2026-05-18 · 更新于 2026-05-19 · 8 min · 1698 words

Improving Automatic Speech Recognition for Speakers Treated for Oral Cancer using Data Augmentation and LLM Error Correction

📄 Improving Automatic Speech Recognition for Speakers Treated for Oral Cancer using Data Augmentation and LLM Error Correction #语音识别 #数据增强 #大语言模型 #医疗音频 #低资源 #语音转换 #文本转语音 ✅ 6/10 | 前50% | #语音识别 | #数据增强 | #大语言模型 #医疗音频 | arxiv 学术质量 5/8 | 影响力 0.8/1 | 可复现性 0.2/1 | 置信度 高 👥 作者与机构 第一作者:Hidde Folkertsma(论文作者列表首位,通常为第一作者) 通讯作者:未明确说明 作者列表:Hidde Folkertsma, Thomas B. Tienkamp, Sebastiaan A.H.J. de Visscher, Max J.H. Witjes, Rob J.J.H. van Son, Jiapan Guo, Bence Mark Halpern 作者与机构:论文正文及致谢部分未明确列出所有作者所属的完整机构信息。仅在致谢中提及数据收集获得了格罗宁根大学医学中心研究伦理委员会的批准,表明研究可能与该机构有关联。 💡 毒舌点评 本文系统性地将多种数据增强技术(从传统信号处理到生成式模型)和LLM纠错应用于一个数据极度稀缺、具有重要临床意义的垂直领域——口腔癌术后患者的语音识别。实验设计全面,对比了不同的ASR模型、微调策略和LLM,并进行了消融分析,实证部分扎实。然而,论文的核心方法创新性有限,本质是现有技术的组合与应用验证。更关键的是,受限于仅11名患者的小数据集,所有结论的统计显著性和泛化能力存疑,部分分析(如将TTS的成功归因于语言多样性)缺乏严格验证。此外,依赖闭源LLM API带来的隐私与部署矛盾,是其从“有效”走向“实用”难以绕过的障碍。 ...

2026-05-18 · 更新于 2026-05-19 · 2 min · 426 words

语音/音频论文速递 2026-05-18

语音/音频论文速递 2026-05-18 共分析 13 篇论文 ⚡ 今日概览 📥 抓取 13 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #音乐生成 2篇 ██ #音频分类 2篇 ██ #音频修复 1篇 █ #语音识别 #说话人分离 1篇 █ #语音翻译 1篇 █ #语音识别 1篇 █ #生理信号预测 1篇 █ #语音生物标志物 1篇 █ 📊 论文评分排行榜(13 篇,按分数降序) 排名 论文 评分 分档 主任务 🥇 Modeling Music as a Time-Frequency Image: A 2D Tokenize 8.1分 前25% #音乐生成 🥈 Scalable neuromorphic computing from autonomous spiking 7.8分 前25% #音频分类 🥉 Real-time Speech Restoration using Data Prediction Mean 7.5分 前25% #音频修复 4. Mind the Gap: Impact of Synthetic Conversational Data o 7.2分 前25% #语音识别 #说话人分离 5. From Flat Language Labels to Typological Priors: Struct 6.9分 前50% #语音翻译 6. Beyond Content: A Comprehensive Speech Toxicity Dataset 6.5分 前25% #音频分类 7. ARIA: A Diagnostic Framework for Music Training Data At 6.1分 前25% #音乐生成 8. Improving Automatic Speech Recognition for Speakers Tre 6.0分 前50% #语音识别 9. Toward World Modeling of Physiological Signals with Cha 6.0分 前50% #生理信号预测 10. Can Large Language Models Imitate Human Speech for Clin 6.0分 前50% #语音生物标志物 11. Can We Trust AI-Inferred User States. A Psychometric Fr 6.0分 前50% #模型评估 12. Sound Sparks Motion: Audio and Text Tuning for Video Ed 5.5分 前25% #视频编辑 13. Perforated Neural Networks for Keyword Spotting 5.0分 前60% #关键词检测 📋 论文列表 🥇 Modeling Music as a Time-Frequency Image: A 2D Tokenizer for Music Generation 🔥 8.1/10 | 前25% | #音乐生成 | #自回归模型 | arxiv ...

2026-05-18 · 更新于 2026-05-19 · 11 min · 2305 words

Vividh-ASR: A Complexity-Tiered Benchmark and Optimization Dynamics for Robust Indic Speech Recognition

📄 Vividh-ASR: A Complexity-Tiered Benchmark and Optimization Dynamics for Robust Indic Speech Recognition #语音识别 #课程学习 #迁移学习 #多语言 #低资源 ✅ 7.0/10 | 前50% | #语音识别 | #课程学习 | #迁移学习 #多语言 | arxiv 学术质量 5.8/8 | 影响力 0.7/2 | 可复现性 0.6/1 | 置信度 高 👥 作者与机构 作者列表:Kush Juvekar (Adalat AI, India), Kavya Manohar (Adalat AI, India), Aditya Srinivas Menon (Adalat AI, India), Arghya Bhattacharya (Adalat AI, India), Kumarmanas Nethil (Adalat AI, India) 通讯作者:未说明 💡 毒舌点评 论文提出了一个诊断低资源语音识别中“studio-bias”现象的有用基准和训练策略,其系统化的因子设计实验是扎实的工程科学。但核心方法(高学习率、从难到易课程)本质上是超参数优化和课程学习思想在特定问题上的应用与组合,创新性更多是经验性的“最佳配方”而非原理性突破。更关键的是,所有结果完全依赖Whisper这一种模型架构和有限的两种语言,且实验缺少必要的统计稳定性分析,泛化结论需谨慎看待。 ...

2026-05-14 · 更新于 2026-05-19 · 3 min · 453 words

WARDEN: Endangered Indigenous Language Transcription and Translation with 6 Hours of Training Data

📄 WARDEN: Endangered Indigenous Language Transcription and Translation with 6 Hours of Training Data #语音识别 #机器翻译 #低资源 #迁移学习 #濒危语言 #知识增强 ✅ 7.0/10 | 前25% | #语音识别 | #迁移学习 | #机器翻译 #低资源 | arxiv 学术质量 7.2/8 | 影响力 0.8/2 | 可复现性 0.8/1 | 置信度 高 👥 作者与机构 第一作者:Ziheng Zhang(Australian National University) 通讯作者:Liang Zheng(Australian National University) 作者列表:Ziheng Zhang(Australian National University), Yunzhong Hou(Australian National University), Naijing Liu(University of Oxford), Liang Zheng(Australian National University) 💡 毒舌点评 本文为濒危语言文档化提供了一个实用且思路清晰的工具链,其核心价值在于用语言学知识(音系相似性、词典)巧妙弥补了数据匮乏的短板。然而,该系统更像是一个精心设计的工程方案,而非一个具有广泛启示性的算法突破。其性能严重依赖一个外部的、覆盖率有限的词典,且两阶段设计带来的错误传播问题未得到充分缓解。在仅单一语言上验证,其宣称的“强基线”意义有待更多数据集检验。 ...

2026-05-14 · 更新于 2026-05-19 · 3 min · 467 words