数据增强 | 语音/音乐/音频论文速递

A First Exploration of Neuromorphic OT-CFM for Multi-Speaker VSR

📄 A First Exploration of Neuromorphic OT-CFM for Multi-Speaker VSR #生成模型 #流匹配 #数据增强 7.5/10 | 创新 1.4/2 | 严谨 1.3/1.5 | 实验 1.1/1.5 | 清晰 1.2/1 | 影响 1.2/1.5 | 开源 0.5/1.5 | 复现 0.8/0.5 | 工程 0.8/1.5 ✅ 7.5/10 | 前25% | #生成模型 | #数据增强 | #流匹配 | arxiv 👥 作者与机构 Lin Chen (北京工商大学), Jingping Fang (北京工商大学), Hairui Liu (西安电子科技大学), Chenyang Xu (清华大学), Junhao Chen (北京工商大学), Xiaorui Li (悉尼大学), Weidong Cai (悉尼大学), Xiaoming Chen (北京工商大学，通讯作者)。 ...

Adapting Foundation ASR Models to Dysarthric Speech: A Case Study

📄 Adapting Foundation ASR Models to Dysarthric Speech: A Case Study #语音识别 #自回归模型 #参数高效微调 #数据增强 6.2/10 ✅ 6.2/10 | 前50% | #语音识别 | #参数高效微调 | #自回归模型 #数据增强 | arxiv 👥 作者与机构作者：Christian Huber, Laura Kernahan, Alexander Waibel 机构：卡尔·斯鲁普工业大学（KIT，德国）及其卡内基-梅隆大学（CMU，美国）的合作项目 💡 毒舌点评说白了，这是一篇非常扎实的“工程应用报告”，但离顶会的“科研论文”标准还有不小的距离。优点很明显：选题刚需，流程完整，结果感人（从完全不能用到相当可用），还有真实的部署和用户反馈，这比很多只在数据集上刷分的工作要实在得多。但问题是，它的“学术味儿”太淡了。核心方法就是“拿Whisper微调”，这操作放在语音社区甚至不如“在LibriSpeech上微调”来得有新意。实验设计最大硬伤就是“单人验证”，这直接把结论的普遍性打入冷宫——你的LoRA不行、Qwen3-ASR不行，换个人可能就反过来了。分析也浮于表面，比如只说LoRA效果差是因为“失配”，却没动手验证这个猜想（比如调调rank试试？）。最可惜的是，它本可以提炼出一些关于“极端域下全量微调 vs 参数高效微调”的有趣规律，但论文满足于描述现象，没有深入机理。所以，它很好地解决了一个实际问题，但对科学共同体贡献的新知有限。更适合发表在应用类会议或期刊上。 📌 核心摘要本文针对基础ASR模型在构音障碍语音上性能差的问题，提出了一个端到端的个性化适配与部署方案。核心工作是使用TEQST工具收集了单一说话者约92小时的朗读语音，并通过部署的移动应用收集了8.8小时的纠正数据。以Whisper (whisper-large-v3) 为基础模型，通过全量微调，仅用1.4小时数据就将WER从基线的128.4%降至15.8%，使用全部数据（含纠正）后达到最佳9.7%。作为对比，LoRA参数高效微调方法效果较差（相对下降15%-39%），而另一个基础模型Qwen3-ASR-1.7B在相同设置下的表现也不及Whisper。最终，微调后的模型被部署为iOS移动应用，提供多种录音模式和实时纠正功能，显著改善了用户的生活质量和沟通信心。论文指出，该工作成功证明了全量微调在应对巨大领域偏移时的有效性，并为解决实际无障碍通信问题提供了一个可行路径。 🔗 开源详情代码：论文中未提及任何代码仓库链接。模型权重：论文中未提供作者微调后的模型权重下载链接。论文使用了开源的Whisper (whisper-large-v3) 和 Qwen3-ASR-1.7B作为基础模型，但未提供最终的个性化模型。数据集：论文中提及“The data set can be accessed here”，暗示数据集可通过链接访问，但在提供的论文全文中未显示具体的URL。数据集包含约100.8小时的构音障碍语音（训练集89.8小时，纠正数据8.8小时，开发集和测试集各1.1小时）。 Demo：论文中未提及在线演示链接或移动应用商店链接。复现材料：论文中未提及具体的训练配置文件、检查点、环境依赖列表或附录等复现材料。论文中引用的开源项目： TEQST：论文引用为[4]，用于数据收集，未提供具体链接。 Whisper：OpenAI的ASR模型，论文引用为[10]，未提供具体链接。 Qwen3-ASR：阿里云的ASR模型，论文引用为[11]，未提供具体链接。 Faster Whisper：论文引用为[13]，用于模型部署，未提供具体链接。 CTranslate2：论文引用为[5, 6]，作为Faster Whisper的实现基础，未提供具体链接。 LoRA：论文引用为[3]，参数高效微调方法，未提供具体链接。补充链接（自动提取）： ...

Building an ASR Solution for Training and Assessing Children's Reading

📄 Building an ASR Solution for Training and Assessing Children's Reading #语音识别 #低资源 #数据增强 #正则化微调 8.5/10 | 创新 1.2/2 | 严谨 1.2/1.5 | 实验 1.3/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 1.3/1.5 | 复现 0.5/0.5 | 工程 1.2/1.5 🔥 8.5/10 | 前50% | #语音识别 | #数据增强 | #低资源 #正则化微调 | arxiv 👥 作者与机构作者：Yacouba Diarra, Nouhoum Souleymane Coulibaly, Mamadou Dembele, Aymane Dembele, Michael Leventhal 机构：RobotsMali AI4D Laboratory，马里巴马科 💡 毒舌点评这篇论文的定位清晰，解决了一个真实存在的痛点：在低资源非洲语言环境下进行儿童阅读评估。作者提供了一个完整的“从数据采集到课堂验证”的端到端工作流，这种工程上的完整性和在真实场景中的部署验证，是许多学术论文所缺乏的，值得肯定。所构建的公开基准数据集（an-be-kalan-bench）是其核心资产，对后续研究有价值。然而，作为一篇向顶会投稿的论文，其技术贡献显得较为常规。所谓的“创新”更多体现在应用场景的迁移和特定问题的数据集构建上，而非提出新的算法或模型架构。实验部分虽然设计了消融，但核心结论（更强的模型微调效果更好、重复数据对弱模型更有用、SpecAugment起正则化作用）均在预料之中，缺乏让人眼前一亮的深度洞察。未能与当前强大的Whisper等多语言模型进行直接比较，是一个明显的短板，削弱了其结论在更广泛ASR领域中的说服力。总体而言，这是一篇扎实的应用型工作，但离“顶会级”的算法创新仍有差距。 ...

Dilemmadata: On the Interoperability of Heterogeneous Roman Numeral Datasets

📄 Dilemmadata: On the Interoperability of Heterogeneous Roman Numeral Datasets #数据集 #数据增强 #基准测试 10/10 | 创新 2/2 | 严谨 1.5/1.5 | 实验 1.5/1.5 | 清晰 1/1 | 影响 1.5/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 🔥 10/10 | 前50% | #数据集 | #数据增强 | #基准测试 | arxiv 👥 作者与机构 Johannes Hentschel，Emmanouil Karystinaios，Gerhard Widmer，Markus Neuwirth。其中Hentschel和Neuwirth来自林茨计算音乐分析研究组（LCMA），安东·布鲁克纳大学；Karystinaios和Widmer来自约翰·开普勒大学林茨分校计算感知研究所（CP）。 💡 毒舌点评这是一篇典型的“数据集/工具”论文，核心贡献是解决了两个流行但格式不同的和声数据集（AND和DLC）的合并问题，发布了更大的Dilemmadata。它就像一篇详细的“数据清洗”报告，诚实、有用，但缺乏让人眼前一亮的新方法或深入的理论分析。论文清晰地展示了合并过程中的“坑”和解决方案，对社区有实际价值。但审稿人必须问：这真的够得上一篇顶会论文吗？它没有提出新的预测模型，没有进行任何下游任务的评估，甚至没有验证合并后的数据与原始数据的一致性。其最大的价值（发布的数据集）需要其他研究者用起来才能体现。作者提出的关于“概率目标标签”的观点很有前瞻性，但仅是展望，未在本文实现。因此，它是一篇扎实的、对社区有帮助的资源论文，但学术贡献的“天花板”相对有限。 📌 核心摘要本文介绍了Dilemmadata，一个通过整合和协调两个具有不同编码范式（RomanText和DCML）的主要罗马数字和声标注数据集（AND和DLC）而构建的大型同质化数据集。该数据集包含1621首乐曲，超过280万个音符级别的注释，提供了统一的CSV表示和丰富的元数据。论文详细阐述了从数据解析、特征协调（如和弦类型词汇表统一、将cadential 6/4统一为Cad）到处理重叠作品的完整流程，旨在解决音乐信息检索（MIR）领域在利用现有标注数据时面临的互操作性挑战。最终发布了一个标准化的资源，并呼吁社区开发通用数据模型和基于概率的目标标签。 🔗 开源详情代码：https://github.com/napulen/AugmentedNet (包含AND原始处理脚本)，https://github.com/DCMLab/distant_listening_corpus (包含DLC原始数据)。论文中核心的整合流水线代码未明确提供独立仓库。模型权重：未提及。数据集：Dilemmadata（最终整合数据集）：https://zenodo.org/records/19661224；AugmentedNet Dataset (AND)：https://github.com/napulen/AugmentedNet；Distant Listening Corpus (DLC)：https://github.com/DCMLab/distant_listening_corpus。 Demo：论文中未提及。复现材料：论文提及最终数据集的所有TSV文件、元数据描述符和预计算的测试划分均可从Zenodo下载。论文中引用的开源项目：music21, ms3, dimcat, Frictionless Data标准, 以及多个作为数据源的语料库（TAVERN, Yale-Classical Archives等）。 🏗️ 方法概述和架构论文的核心方法是一个精心设计的多阶段数据对齐与整合流水线，旨在将采用不同编码标准（RomanText与DCML）和存储格式（TSV切片与嵌入MSCX的注解）的两个原始数据集（AND与DLC）统一为一个协调的、逐音符的CSV格式。该流水线的具体架构和实现如下： ...

Improving multichannel speech enhancement through accurate room-acoustic simulations

📄 Improving multichannel speech enhancement through accurate room-acoustic simulations #语音增强 #数据增强 #多通道 #语音识别 6.8/10 | 创新 1.2/2 | 严谨 1.2/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 0.2/1.5 | 复现 0.4/0.5 | 工程 1/1.5 ✅ 6.8/10 | 前50% | #语音增强 | #数据增强 | #多通道 #语音识别 | arxiv 👥 作者与机构 Georg Götz, Alessia Milo, Steinar Guðjónsson, Daniel Gert Nielsen, Jesper Pedersen, Finnur Pind Treble Technologies, Reykjavík, Iceland 邮箱: georg.goetz@treble.tech, am@treble.tech, sg@treble.tech, dgn@treble.tech, jp@treble.tech, fp@treble.tech ...

Linguistic Bias Mitigation for Spoofing Detection via Gradient Reversal and A Variational Information Bottleneck

📄 Linguistic Bias Mitigation for Spoofing Detection via Gradient Reversal and A Variational Information Bottleneck #自监督学习 #数据增强 8.6/10 | 创新 1.5/2 | 严谨 1.3/1.5 | 实验 1.5/1.5 | 清晰 1/1 | 影响 1.3/1.5 | 开源 0.5/1.5 | 复现 0.5/0.5 | 工程 1/1.5 🔥 8.6/10 | 前25% | #自监督学习 | #自监督学习 | #数据增强 | arxiv 👥 作者与机构作者：Anh-Tuan Dao, Driss Matrouf, Mickael Rouvier, Nicholas Evans。机构：Laboratoire Informatique d’Avignon, Avignon Universite, France；EURECOM, Sophia Antipolis, France。邮箱：{anh-tuan.dao, driss.matrouf, mickael.rouvier}@univ-avignon.fr, evans@eurecom.fr。 ...

Listening Between the Lines: Joint Learning of ASR Embeddings and LLM-Augmented Linguistics for Dementia Detection

📄 Listening Between the Lines: Joint Learning of ASR Embeddings and LLM-Augmented Linguistics for Dementia Detection #数据增强 #自监督学习 #多模态模型 7/10 | 创新 1.3/2 | 严谨 1.1/1.5 | 实验 1.3/1.5 | 清晰 1/1 | 影响 0.7/1.5 | 开源 0.8/1.5 | 复现 0.5/0.5 | 工程 0.3/1.5 ✅ 7/10 | 前50% | #数据增强 | #数据增强 | #自监督学习 #多模态模型 | arxiv 👥 作者与机构 Jung, Park, Oh（Jiyoun Jung, Jonghyeon Park, Myungwoo Oh）。机构：1 Division of Communication and Media, Ewha Womans University, South Korea; 2 NAVER Cloud, South Korea。邮箱：olivierjiyounjung@gmail.com, jong-hyeon.park@navercorp.com, myungwoo.oh@navercorp.com。 ...

UniSAE: Unified Speech Attribute Editing on Speaker, Emotion and Low-Level Content via Discrete Phonetic Posteriorgram Modelling

📄 UniSAE: Unified Speech Attribute Editing on Speaker, Emotion and Low-Level Content via Discrete Phonetic Posteriorgram Modelling #语音合成 #语音编辑 #扩散模型 #数据增强 7.3/10 | 创新 1.3/2 | 严谨 1.1/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 0.8/1.5 | 复现 0.5/0.5 | 工程 0.8/1.5 ✅ 7.3/10 | 前50% | #语音合成 | #数据增强 | #语音编辑 #扩散模型 | arxiv 👥 作者与机构第一作者 Chuanbo Zhu 与合作者 Wuyou Zhou, Rongxiu Zhong, Shilei Zhang, Kun Qian 来自上海交通大学。通讯作者 Yike Guo 与 Wei Xue 同样来自上海交通大学，并关联北京通用人工智能研究院（BigAI）。 ...

语音/音乐/音频论文速递 2026-07-01

语音/音乐/音频论文速递 2026-07-01 共分析 35 篇论文 ⚡ 今日概览 📥 抓取 35 篇 → 🔬 深度分析完成 🏷️ 热门方向方向数量分布 #语音识别 8篇 ████████ #语音合成 7篇 ███████ #自监督学习 2篇 ██ #音频分类 2篇 ██ #生成模型 2篇 ██ #语音情感识别 2篇 ██ #数据集 1篇 █ #知识蒸馏 1篇 █ 📊 论文评分排行榜（35 篇，按分数降序）排名论文总分分档主任务 🥇 Dilemmadata: On the Interoperability of Heterogeneous R 10.0分前50% #数据集 🥈 SwiftAudio: Data-Efficient Caption-Only Distillation fo 10.0分前50% #知识蒸馏 🥉 Attacking UTMOS: Probing the Robustness of a Speech Qua 8.6分前25% #语音质量评估 4. Enhancing BEST-RQ Pseudo-Label Quality through Online R 8.6分前50% #语音识别 5. Linguistic Bias Mitigation for Spoofing Detection via G 8.6分前25% #自监督学习 6. Building an ASR Solution for Training and Assessing Chi 8.5分前50% #语音识别 7. Beyond Cross-Reconstruction: Probing-Based Disentanglem 8.1分前50% #语音编码 8. MuseBench: Benchmarking Intent-Level Audiovisual Arts U 7.9分前50% #语音合成 9. Detecting Audio Deepfakes on the Edge:Lightweight SSL-B 7.7分前25% - 10. Beyond Binary Instrument QA: Probing Instrument Groundi 7.6分前25% #音频分类 11. SyncCache: Exploiting Asymmetric Dynamics for Fast Audi 7.5分前25% #语音合成 12. Probing-Guided Layer Selection from Self-Supervised Spe 7.5分前25% #集成学习 13. A First Exploration of Neuromorphic OT-CFM for Multi-Sp 7.5分前25% #生成模型 14. LuxEmo: Expressive Text-to-Speech Corpus for Luxembourg 7.5分前25% #语音合成 15. A Fair and Transparent Framework for Speech-Based Depre 7.4分前50% #语音情感识别 16. ALM2Vec: Learning Audio Embeddings for Universal Audio 7.4分前50% #音频检索 17. ASR-Agnostic Multimodal Spectrotemporal Modeling for Ea 7.4分前50% #多模态模型 18. UniSAE: Unified Speech Attribute Editing on Speaker, Em 7.3分前50% #语音合成 19. Tone-Conditioned Curriculum Learning for Low-Resource B 7.3分前50% #语音识别 20. What Counts as an Error? Dual-Reference Benchmarking fo 7.3分前50% #语音识别 21. Is Natural Always Appropriate? Investigating Naturalnes 7.2分前25% #语音合成 22. FlexiSLM: A Dynamic and Controllable Frame Rate Spoken 7.2分前25% #语音合成 23. ZEBRA: Zero-Shot Entropy-Regularized Prompt Learning fo 7.1分前50% #音频分类 24. Preserving Speech-to-Text LLM Capabilities in Speech-to 7.0分前50% #语音识别 25. Listening Between the Lines: Joint Learning of ASR Embe 7.0分前50% #数据增强 26. BEST-RQ-2: Contextualize-Then-Predict, a Two-Step Appro 6.9分前50% #语音识别 27. Improving multichannel speech enhancement through accur 6.8分前50% #语音增强 28. Amplifying Membership Signal Through Chained Regenerati 6.6分前50% #生成模型 29. AVTok: 1D Unified Tokenization for Holistic Audio-Video 6.5分前25% #语音合成 30. LOPA: Enhancing Spoken Language Assessment via Latent O 6.2分前50% #低资源 31. Adapting Foundation ASR Models to Dysarthric Speech: A 6.2分前50% #语音识别 32. How Bilingual Are SSL Speech Models? Cross-Lingual Prob 5.8分前50% #自监督学习 33. Gated Multi-Graph Fusion via Graph Attention Networks f 5.2分后50% #语音情感识别 34. Building a Multimodal Dataset of Academic Paper for Key 5.2分后50% #语音识别 35. Reference-Based Prosody and Rhythm Evaluation for Spoke 4.7分后50% #语音对话系统 📋 论文列表 🥇 Dilemmadata: On the Interoperability of Heterogeneous Roman Numeral Datasets 10.0/10 | 创新 2/2 | 严谨 1.5/1.5 | 实验 1.5/1.5 | 清晰 1/1 | 影响 1.5/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 ...

AMR: Adaptive Modality Routing for Multimodal Polyglot Speaker Identification

📄 AMR: Adaptive Modality Routing for Multimodal Polyglot Speaker Identification #说话人识别 #多模态模型 #自监督学习 #数据增强 #语音识别 #计算机视觉 7.8/10 | 创新 1/2 | 严谨 1.2/1.5 | 实验 1.5/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 0.3/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 ✅ 7.8/10 | 前25% | #说话人识别 | #自监督学习 | #多模态模型 #数据增强 | arxiv 👥 作者与机构论文作者为 Chuxiao Zuo, Yao Zhu, Minqiang Xu, Manhong Wang, Yunke Zhang, 和 Fei Huang。所有作者均隶属于 Honor Device Co., Ltd.，单位地点包括南京和上海。 ...