低资源

语音/音乐/音频论文速递 2026-06-18 共分析 36 篇论文 ⚡ 今日概览 📥 抓取 36 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 7篇 ███████ #多模态模型 5篇 █████ #语音合成 5篇 █████ #空间音频 1篇 █ #音乐生成 1篇 █ #模型评估 1篇 █ #声源定位 1篇 █ #音频生成 1篇 █ 📊 论文评分排行榜（36 篇，按分数降序） 排名 论文 总分 分档 主任务 🥇 IndicContextEval: A Benchmark for Evaluating Context Ut 9.5分 前25% #语音识别 🥈 Native Active Perception as Reasoning for Omni-Modal Un 9.1分 前10% #语音识别 🥉 Who Wins the Conflict? Mechanistic Interpretability of 8.8分 前25% #多模态模型 4. Generalised Transcoding Framework for Arbitrary Spatial 8.7分 前50% #空间音频 5. Closing the Loop: PID Feedback Control for Interpretabl 8.7分 前50% #音乐生成 6. GRIDEX: Grid-Grounded Forensic Explanations for Deepfak 8.6分 前50% #语音合成 7. Continuous-Speech Parkinson's Disease Detection Usi 8.3分 前25% - 8. Mitigating Scoring Errors and Compensating for Nonverba 8.0分 前25% #多模态模型 9. A Survey of Methods for the Discretization of Phonograp 8.0分 前50% - 10. Adaptive Speech-to-Spike Encoding for Spiking Neural Ne 8.0分 前25% - 11. MagpieTTS-LF: Inference-Time Long-Form Speech Generatio 7.9分 前25% #语音合成 12. Beyond AHI: An Interpretable Causal-Discovery-Guided Fr 7.9分 前25% - 13. Evaluating Dynamic Range Compressor Models Using Contro 7.8分 前50% #模型评估 14. NeuralMUSIC: A Hybrid Neural-Subspace Framework for Rob 7.8分 前50% #声源定位 15. Fair Cognitive Impairment Detection Through Unlearning 7.7分 前25% #多模态模型 16. Audio-to-Audio via Diffusion Warm Initialization 7.6分 前25% #音频生成 17. FineCombo-TTS: Collaborative and Precise Controllable S 7.6分 前25% #语音合成 18. Constraining to Generalize: Subspace Tuning for Few-sho 7.5分 前25% #音频分类 19. Learning Robust Pair Confidence for Multimodal Emotion- 7.5分 前50% #多模态模型 20. Montreal Forced Aligner and the state of speech-to-text 7.5分 前25% #语音识别 21. Scoring Backends Matter More Than Pooling: A Systematic 7.4分 前50% - 22. Reliable Neural-Codec Text-to-Speech by ASR Self-Verifi 7.4分 前50% #语音合成 23. Reference-Driven Multi-Speaker Audio Scene Generation f 7.3分 前50% #语音合成 24. QC-GAN: A Parameter-Efficient Quaternion Conformer GAN 7.1分 前50% #语音增强 25. Augmenting Dysarthric Speech Severity Assessment with M 7.0分 前50% #语音质量评估 26. Continuous Audio Thinking for Large Audio Language Mode 6.9分 前50% - 27. Human-AI Coevolution Dynamics: A Formal Theory of Socia 6.7分 前50% - 28. DASH: Dual-View Self-Distillation with Multi-Layer Hidd 6.6分 前50% #语音识别 29. Reference-Based Recursive Least-Squares Mitigation of R 6.6分 前50% - 30. Responsible ASR: Overcoming Challenges of Foundational 6.5分 前50% #语音识别 31. Risk Stratification for ICU Delirium using Pervasive Am 6.5分 前50% #多模态模型 32. ThinkDeception: A Progressive Reinforcement Learning Fr 6.3分 前50% #强化学习 33. EMORSION: Examining the Impact of Audio Parameters on E 6.0分 前50% - 34. Speech-Driven End-to-End Language Discrimination toward 5.8分 前50% #语音识别 35. Low-resource Language Discrimination Towards Chinese Di 5.5分 前50% #语音识别 36. SingFox: A Multi-Lingual Singfake Detection Corpus 5.4分 后50% #语音伪造检测 📋 论文列表 🥇 IndicContextEval: A Benchmark for Evaluating Context Utilisation in Audio Large Language Models Across 8 Indic Languages 9.5/10 | 创新 1.5/2 | 严谨 1.3/1.5 | 实验 1.5/1.5 | 清晰 1/1 | 影响 1.0/1.5 | 开源 1.4/1.5 | 复现 0.5/0.5 | 工程 1.3/1.5 ...

📄 An Analysis of the Effectiveness of Synthetic Speech Data for ASR Fine-tuning in Selected Indic Languages #语音合成 #语音识别 #数据增强 #低资源 5.7/10 | 创新 1/2 | 严谨 1/1.5 | 实验 0.8/1.5 | 清晰 1/1 | 影响 0.3/1.5 | 开源 0.5/1.5 | 复现 0.5/0.5 | 工程 0.6/1.5 📝 5.7/10 | 前50% | #语音识别 | #数据增强 | #语音合成 #低资源 | arxiv 👥 作者与机构 作者：Pulikodan, Basu, Kumar, Bhat, Sanka, Desai, Kumar Ghosh, Sujith Agneedh, Pavan, Pranav, Visruth, Nihar, Prasanta 机构：1 AI & Robotics Technology Park (ARTPARK), I-Hub @ IISc, Bangalore, India; 2 Department of Electrical Engineering, Indian Institute of Science, Bangalore, India ...

📄 Improving low-resource ASR using bilingual fine-tuning with language identification: a cross-linguistic evaluation #语音识别 #低资源 #自监督学习 #正则化微调 #数据增强 7.5/10 | 创新 1.2/2 | 严谨 1.3/1.5 | 实验 1.3/1.5 | 清晰 1/1 | 影响 0.6/1.5 | 开源 0.4/1.5 | 复现 0.5/0.5 | 工程 1.2/1.5 ✅ 7.5/10 | 前50% | #语音识别 | #自监督学习 | #低资源 #正则化微调 | arxiv 👥 作者与机构 Reihaneh Amooie1, Yun Hao1, Wietse de Vries1, Jelske Dijkstra2, Matt Coler1, Martijn Wieling1,3。机构：1 University of Groningen, 2 Fryske Akademy, 3 Vrije Universiteit Brussel。 ...

📄 JoyAI-VL-Interaction: Real-Time Vision-Language Interaction Intelligence #多模态模型 #语音合成 #强化学习 #低资源 7.7/10 | 创新 1.4/2 | 严谨 1.1/1.5 | 实验 0.6/1.5 | 清晰 1/1 | 影响 0.6/1.5 | 开源 1.2/1.5 | 复现 0.5/0.5 | 工程 1.3/1.5 ✅ 7.7/10 | 前50% | #语音合成 | #强化学习 | #多模态模型 #低资源 | arxiv 👥 作者与机构 作者：Dingyu Yao, Junhao Zhou, Chenxu Yang, Chuanyu Qin, Haowen Hou, Zheming Liang, Congcong Wang, Yuhang Cao, Shenglong Ye, Shuai Xie, Shuhuan Gu, Haoyang Huang, Qingyi Si, Nan Duan, Jiaqi Wang 机构：JD.com ...

📄 When Multiple Scripts Matter: Evaluating ASR in Clinical Settings #语音识别 #多语言 #数据集 #基准测试 #低资源 9.1/10 | 创新 1.4/2 | 严谨 1.2/1.5 | 实验 0.8/1.5 | 清晰 1.1/1 | 影响 1.0/1.5 | 开源 1.3/1.5 | 复现 1.2/0.5 | 工程 1.1/1.5 🔥 9.1/10 | 前10% | #语音识别 | #多语言 | #数据集 #基准测试 | arxiv 👥 作者与机构 Jean Seo (1,2), Minkyu Kim (1), Jeonguk Lee (1), Jisoo Jung (1), Wooseok Han (3), Eunho Yang (1)。机构：1 AITRICS, 2 University of Copenhagen, 3 KAIST。 ...

语音/音乐/音频论文速递 2026-06-17 共分析 35 篇论文 ⚡ 今日概览 📥 抓取 35 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 9篇 █████████ #语音合成 4篇 ████ #音频分类 3篇 ███ #语音增强 2篇 ██ #多模态模型 2篇 ██ #强化学习 1篇 █ #语音活动检测 1篇 █ #说话人验证 1篇 █ 📊 论文评分排行榜（35 篇，按分数降序） 排名 论文 总分 分档 主任务 🥇 One-Step Token-to-Waveform Generation with MeanFlow in 9.3分 前10% #语音合成 🥈 Synergizing Zero-Shot Cross-Lingual Alzheimer Detection 9.1分 前25% - 🥉 When Multiple Scripts Matter: Evaluating ASR in Clinica 9.1分 前10% #语音识别 4. Grounding Spoken LLMs in Multi-Speaker Audio via Diariz 8.5分 前25% #语音识别 5. ELSA: Acoustic Event-Level Semantic Alignment for Fine- 8.5分 前25% - 6. A 399uW 114.3 dB DR Companding Readout ASIC for MEMS Mi 8.2分 前25% - 7. Are you speaking my languages? On spoken language adher 8.0分 后50% #语音识别 8. From Signals to Patterns: Non-Invasive Tuberculosis Det 7.9分 前25% - 9. Next-Turn: Duration-Aware Streaming Endpoint Detection 7.9分 前50% #语音合成 10. Decision-Driven Geosteering Under Uncertainty: A Unifie 7.8分 前50% #强化学习 11. Perceptual compensation for tonal context in self-super 7.7分 前50% #语音识别 12. JoyAI-VL-Interaction: Real-Time Vision-Language Interac 7.7分 前50% #语音合成 13. PhASE-Flow: Phonetic-Conditioned Acoustic Flow Matching 7.6分 前25% #语音增强 14. Non-Autoregressive Minimum Bayes' Risk Decoding for 7.6分 前25% - 15. SpeechDx: A Multi-Task Benchmark for Clinical Speech AI 7.6分 前25% #语音识别 16. Vibrato Expression Control for Singing Voice Conversion 7.5分 前25% - 17. Improving low-resource ASR using bilingual fine-tuning 7.5分 前50% #语音识别 18. Turning music identification into a neural forward pass 7.4分 前50% #音频分类 19. Direction of arrival estimation from distant microphone 7.3分 前50% #语音活动检测 20. DeSRPA: Decoupled Speech Role-Playing Agent via Inferen 7.3分 前50% #语音合成 21. L-Proto: Language-Aware Episodic Prototypical Training 7.1分 前50% #说话人验证 22. Single frequency filtering based multi-speaker directio 7.0分 前50% #语音增强 23. MLLP-VRAIN UPV system for the IWSLT 2026 Simultaneous S 6.9分 前50% #语音识别 24. Reading between the Lines: Leveraging Large Language Mo 6.8分 前50% #语音情感识别 25. A Closer Look at Failure Modes in Temporal Understandin 6.6分 前50% #多模态模型 26. MVEB: Massive Video Embedding Benchmark 6.5分 前50% #基准测试 27. Transductive Zero-Shot Audio Classification with Audio- 6.4分 前50% #音频分类 28. A Neuromorphic Trigger for Efficient Audio Event Detect 6.2分 前50% #音频事件检测 29. Learning task-specific subspaces via interventional pos 6.2分 前50% #自监督学习 30. Embedded Machine Learning for Microcontroller-Class Edg 6.0分 前50% - 31. Descriptor: Certus Caliber Classification Gunshot Datas 5.9分 前50% #音频分类 32. AI-based Cognitive-linguistic Features for Dementia Ass 5.8分 前50% #语音识别 33. An Analysis of the Effectiveness of Synthetic Speech Da 5.7分 前50% #语音识别 34. OlfactProfile: Profile-Conditioned Odor Prediction from 5.6分 前50% #多模态模型 35. Intelligibility of Speech in Noise: Investigating Contr 5.5分 前50% - 📋 论文列表 🥇 One-Step Token-to-Waveform Generation with MeanFlow in Latent Space 9.3/10 | 创新 1.4/2 | 严谨 1.2/1.5 | 实验 1.1/1.5 | 清晰 1/1 | 影响 1.2/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.4/1.5 ...

📄 An Empirical Study on Learning Latent Representations for Emotional Speech Synthesis #语音合成 #情感语音合成 #低资源 #数据增强 #语音增强 8.2/10 | 创新 1/2 | 严谨 1.2/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.2/1.5 🔥 8.2/10 | 后50% | #语音合成 | #数据增强 | #情感语音合成 #低资源 | arxiv 👥 作者与机构 作者：Dang Quang Vinh, Ngo Quang Huy 机构：Aimesoft JSC，河内，越南 💡 毒舌点评 这篇论文就像一次未经充分准备的实验室报告：作者将一个标准模型（FastSpeech 2）稍作修改，便应用于一个竞赛任务，然后汇报了极其糟糕的结果（MOS接近噪音水平，音节错误率超过60%）。然而，在结论中，作者却使用“promisingly”和“favourable”这样的词汇来形容其系统，这与报告的客观数据形成了近乎荒诞的矛盾。论文既没有尝试与基线进行对比以证明修改的有效性，也没有深入分析失败的原因，只是将问题归咎于数据集噪声并简单提及修复过程。作为一篇“实证研究”，其核心价值——对方法有效性的分析——完全缺失，提供的更多是一份失败的系统日志。 📌 核心摘要 本文是针对VLSP 2022情感语音合成竞赛任务的系统描述。作者在FastSpeech 2框架上进行了修改：对于单说话人子任务（Sub-task 1），添加了情感嵌入（查找表）；对于说话人适配子任务（Sub-task 2），同时添加了说话人和情感嵌入，并引入了一个灵感来源于Pan and He (2021)的“韵律瓶颈”（prosody bottleneck）模块。实验使用了竞赛方提供的数据集，经过了降噪、文本修正等预处理。最终系统在官方评估中表现不佳，报告的MOS自然度得分低，音节错误率（SER）高。论文未提供与基线的对比，也未分析失败原因。 ...

📄 ArtBoost: Synthetic Articulatory Data Augmentation for Acoustic-to-Articulatory Inversion #语音识别 #数据增强 #低资源 6.5/10 | 创新 1.2/2 | 严谨 1.1/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 0.6/1.5 | 开源 0.2/1.5 | 复现 0.5/0.5 | 工程 0.9/1.5 ✅ 6.5/10 | 前50% | #语音识别 | #数据增强 | #低资源 | arxiv 👥 作者与机构 论文为匿名提交（Anonymous），作者与机构信息未在提供的原文中披露。 💡 毒舌点评 这篇论文就像是一个聪明的“数据搬运工”，想法直白得可爱：既然高质量的“发音轨迹”（EMA）数据难搞，那我就用现成的“脸动轨迹”（3D面部网格）数据来“假装”是它，先让模型学个皮毛。结果嘛，从实验数据上看，这招在小数据集上“唬人”效果拔群，在大数据集上聊胜于无。审稿人最烦这种“我知道这不够好，但你看数据提升了”的逻辑。核心的“领域差异”问题被轻描淡写地绕过了——用脸的运动去代表舌头、软腭的运动，这中间的物理鸿沟，论文只用两张漂亮的图就想糊弄过去，缺乏定量分析。此外，声称“对不同模型架构有效”，但只测了两个模型，这统计显著性堪忧。总而言之，这是一篇技术上中规中矩、想法上有小亮点但理论深度和实验严谨性都明显不足的工作，适合作为一篇“有启发性的小技巧”发表在workshop，但距离顶级会议（如原文暗示的NeurIPS级别）的标准，差距不小。给分6.2，是看在它确实为AAI领域提供了一个实用（尽管粗糙）的数据增强思路。 📌 核心摘要 ArtBoost 是一种针对声学到发音反转（AAI）任务的数据增强策略，旨在解决电磁 articulography（EMA）数据稀缺且昂贵的问题。其核心思想是利用大规模的语音-3D面部网格数据集（如TFHP），从中提取出代表可见发音器官（上唇、下唇、下切牙）运动轨迹的“伪发音轨迹”，作为额外的监督信号。具体流程包括：通过ASR将长视频分割为语句级片段；从网格中追踪对应面部锚点的三维坐标，构建出符合传统EMA格式的12通道轨迹（仅部分通道非零）；采用两阶段训练：先用带有通道掩码的损失函数在伪轨迹上预训练模型，使其学习可见的发音运动先验，然后在真实EMA数据集上进行全通道微调。实验在HPRC和USC-TIMIT两个数据集上，使用SSL-AAI和SI-AAI两种模型架构进行验证，结果表明该方法能一致性提升预测性能（PCC和RMSE），尤其在数据量更少的USC-TIMIT上增益显著。轨迹可视化进一步证实了伪轨迹的物理可解释性。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：论文中未提及。 数据集：论文中使用了公开数据集HPRC、USC-TIMIT和TFHP，但未提供这些数据集的处理脚本或具体使用方式的代码。 Demo：论文中未提及。 复现材料：论文中未提供训练配置、检查点、附录等具体复现材料。论文中提到了实验设置（如使用单个NVIDIA RTX 3090 GPU，并遵循特定预处理协议），但未提供可直接复用的配置文件。 论文中引用的开源项目：未提及。论文引用了FLAME拓扑模型等文献，但未给出其具体的开源仓库链接。 🏗️ 方法概述和架构 ArtBoost 的方法流程如论文图2所示，是一个从数据准备到模型训练的完整流水线，旨在将大规模语音-网格数据转化为可用于AAI模型预训练的伪监督信号。整个过程分为三个核心步骤：ASR引导的语句分割、伪发音轨迹提取、以及两阶段训练策略。 ...

📄 Beyond Classification: A Cough Regression Benchmark for Respiratory Acoustic Foundation Models #音频事件检测 #自监督学习 #低资源 6/10 | 创新 1.3/2 | 严谨 1.2/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 0.4/1.5 | 开源 0.2/1.5 | 复现 0.5/0.5 | 工程 0.4/1.5 ✅ 6/10 | 前50% | #音频事件检测 | #自监督学习 | #低资源 | arxiv 👥 作者与机构 Mayur Sanap, Prasanna Desikan, Edgar Lobaton 💡 毒舌点评 这篇论文本质上是一项扎实但略显保守的工程性工作：将几个已有的呼吸音基础模型在新的回归任务上进行系统性横评。其价值在于填补了“评估”环节的空白，而非提出新颖的方法或深刻的理论。然而，严谨的实验设计（多头、多目标、多数据集）和对关键现象（如迁移不对称性）的清晰揭示，使其成为该领域一个有用的基准，但不足以称为突破性研究。最大风险在于，评估结论高度依赖于所选模型和任务，且“基准”本身的影响力取决于社区后续是否采纳。 📌 核心摘要 本文针对呼吸音基础模型（FMs）在咳嗽音频上进行连续健康指标（如年龄、BMI）预测能力的评估空白，提出了一个系统性的回归基准。研究冻结了五个主流基础模型（Opera-CT/CE/GT, HeAR, M2D+Resp）的编码器，提取音频嵌入，并与三种不同复杂度的回归头（线性层、MLP-small、完整MLP）结合，在三个公开数据集（CIDRZ, Coswara, CoughVID）的六个回归目标上进行了全面评估。主要发现包括：1）MLP-small作为回归头在性能和泛化性上取得了最佳平衡；2）生成式预训练目标（Opera-GT）在年龄回归任务上持续优于对比式目标；3）跨数据集迁移呈现显著不对称性，大规模、多样化的网络数据可有效迁移到小规模临床数据，反之则不行；4）低数据量场景下的性能主要由预训练数据的多样性而非模型架构决定。论文为社区提供了一个评估呼吸音基础模型回归能力的标准化框架，并揭示了当前模型在回归任务上的潜力与局限。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：论文中未提供可直接下载的模型权重链接。评估的基础模型需参考其原始论文获取： Opera-CT, Opera-CE, Opera-GT: Zhang et al., 2024. HeAR: Baur et al., 2024. M2D+Resp: Niizumi et al., 2025. 数据集： CIDRZ (N=1049): 来自Google Health AI (2024)。描述为智能手机记录的赞比亚TB诊所患者咳嗽录音。 Coswara (N=2560): 来自Bhattacharya et al. (2023)。描述为通过网络应用在印度收集的咳嗽录音。 CoughVID (N=6858): 来自Orlandic et al. (2021)。描述为通过智能手机全球提交的咳嗽录音。 Demo：论文中未提及。 复现材料：论文中未提供训练配置文件、检查点或详细复现脚本。论文在正文中详细描述了基准测试设计、音频预处理流程（重采样至16kHz单声道，填充/截断至2秒）、回归头架构（Linear, MLP-small, MLP）和主要训练超参数（Adam优化器，学习率\(10^{-4}\)，批量大小64，L2正则化\(10^{-5}\)，学习率衰减0.97/epoch，早停耐心10），这提供了复现所需的关键信息，但不足以视为完整的复现材料。 🏗️ 方法概述和架构 本论文的核心方法是构建一个标准化的基准测试框架，用于评估预训练的呼吸音基础模型在咳嗽回归任务上的性能。整个流程（如图1所示）是统一且模块化的，包含数据预处理、特征提取、回归头训练与评估三个主要阶段。 ...

📄 Bridging the SEA Gap: An Initial Benchmark for Neural Audio Codec-Synthesized Speech Deepfakes in South-East Asian Languages #语音合成 #语音识别 #多模态模型 #低资源 8.2/10 | 创新 1.3/2 | 严谨 1/1.5 | 实验 0.9/1.5 | 清晰 1/1 | 影响 1.1/1.5 | 开源 1.3/1.5 | 复现 0.5/0.5 | 工程 1.1/1.5 🔥 8.2/10 | 前25% | #语音合成 | #语音识别 | #多模态模型 #低资源 | arxiv 👥 作者与机构 论文作者为 Orchid Chetia Phukan (IIIT-Delhi, 通讯作者), Girish (IIIT-Delhi, UPES), Mohd Mujtaba Akhtar (IIIT-Delhi, VBSPU), Arun Balaji Buduru (IIIT-Delhi)。所属机构为印度信息技术学院德里分校（IIIT-Delhi）、UPES 和 VBSPU。 ...