语音/音乐/音频论文速递 2026-08-06

语音/音乐/音频论文速递 2026-08-06 共分析 26 篇论文 ⚡ 今日概览 📥 抓取 26 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #音频理解 3篇 ███ #语音增强 2篇 ██ #语音质量评估 2篇 ██ #音乐理解 2篇 ██ #音视频理解 2篇 ██ #音视频生成 2篇 ██ #音频事件检测 2篇 ██ #语音属性识别 1篇 █ 📊 论文评分排行榜(26 篇,按分数降序) 排名 论文 总分 分档 文档类型 主任务 🥇 Equivariant Music Transformer 8.6分 前25% 方法研究 #音乐生成 🥈 Breaking the Curse ofMultilinguality inMany-to-Many Spe 8.2分 前25% 方法研究 #语音翻译 🥉 PASE: Leveraging the Phonological Prior of WavLM for Lo 8.1分 前25% 方法研究 #语音增强 4. Towards Robust Version Identification in the Wild: A Da 8.0分 前25% 数据集与基准 #音乐检索 5. Agogic: Performance-Timed Music Tokens for LLM-Native T 7.9分 前25% 方法研究 #音频理解 6. OmniPack: Unified Token Compression for Efficient Omni- 7.7分 前25% 方法研究 #音视频理解 7. OmniVR: Joint Video-Audio Conditional Generation for Re 7.7分 前25% 方法研究 #音视频生成 8. A Dual Evaluation for Music Transcription 7.7分 前25% 方法研究 #音乐转录 9. Crowdsourced Multilingual Speech Intelligibility Testin 7.5分 前25% 数据集与基准 #语音质量评估 10. MERaLiON-GR: Speech Gender Recognition Model for Englis 7.5分 前25% 模型报告 #语音属性识别 11. HyPASE: Hyperbolic Geometry for Parameter-Efficient Spe 7.2分 前50% 方法研究 #语音情感识别 12. Transfer Learning for Avian Bioacoustics under Sparse P 7.1分 前50% 方法研究 #音频分类 13. Helping Music Co-Creation Agents ‘Listen’ Well: Hierarc 7.1分 前50% 方法研究 #音乐理解 14. EmpaAva: An Open-source Agentic 3D-Avatar Empathetic Li 7.1分 前50% 系统技术报告 #音视频交互 15. StuPASE: Towards Low-Hallucination Studio-Quality Gener 7.0分 前50% 方法研究 #语音增强 16. Identity-Faithful Audio-Visual Target Speaker Extractio 6.8分 前50% 数据集与基准 #音视频语音分离 17. AudioScape-TTA: A Structured Soundscape Benchmark for F 6.8分 前50% 数据集与基准 #音频生成 18. Visual Representation Matters: Exploiting Temporal Diff 6.8分 前50% 方法研究 #音视频生成 19. Spoken Function Calling: A New Perspective on Spoken La 6.7分 前50% 数据集与基准 #音频理解 20. Masked diffusion enables coherent beat tracking 6.5分 前50% 方法研究 #音乐理解 21. InvFlowFD: Reference-Free and Background-Set-Free Perce 6.4分 前50% 方法研究 #音频质量评估 22. Smartphone Audio Based Distress Detection 6.3分 前50% 系统技术报告 #音频事件检测 23. Assessing speech quality metrics for evaluation of neur 6.0分 前50% 数据集与基准 #语音质量评估 24. Modality Agreement- and Conflict-Aware Prototype Hyperg 5.5分 前50% 方法研究 #音频理解 25. Deep Learning for Real-Time Sound Order Recognition in 5.2分 后50% 方法研究 #音频事件检测 26. C\(^2\)MOE: Consistency and Complementarity-guided Mixtur 4.1分 后50% 方法研究 #音视频理解 📋 论文列表 🥇 Equivariant Music Transformer 8.6/10 | 创新 1.4/2 | 严谨 1.5/1.5 | 实验 1.2/1.5 | 清晰 1/1 | 影响 1/1.5 | 开源 1.2/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ...

2026-08-06 · 更新于 2026-08-14 · 23 min · 4884 words

Cross-cultural evaluation of taste-sound correspondences in AI-generated music

📄 Cross-cultural evaluation of taste-sound correspondences in AI-generated music 标签:#音乐理解 #参数高效微调 #模型评估 #多语言 #音频理解 7.5/10 | 创新 1.2/2 | 严谨 1.1/1.5 | 实验 1.3/1.5 | 清晰 0.8/1 | 影响 0.8/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 0.3/1.5 ✅ 7.5/10 | 前25% | 文档类型:应用研究 | 评分置信度:高 | #音乐理解 | #LoRA | #参数高效微调 #模型评估 | arxiv 👥 作者与机构 第一作者:Matteo Spanio(帕多瓦大学) 通讯作者:Matteo Spanio(帕多瓦大学) 作者列表:Matteo Spanio(帕多瓦大学)、Massimiliano Zampini(特伦托大学)、Luisa Torri(美食科学大学)、Riccardo Migliavada(美食科学大学)、Bruno Mesz(国立特雷斯德费布雷罗大学)、Masaki Ohno(立命馆大学)、Yuji Wada(立命馆大学)、Antonio Rodà(帕多瓦大学) 💡 毒舌点评 这是一篇交叉学科研究的扎实之作,通过三地实验和严格的统计处理,干净地把反应风格与真正的感知重组剥开,展现了对AI生成音乐跨文化评估的深入思考。然而,整个工作的天花板受限于单一的MusicGen微调模型,其生成声学空间宽度不足,导致酸苦味在刺激层面就缺乏可分性,这让"跨文化感知重组"的结论更像是对模型缺陷的补偿行为,而不是对人类通感的深刻揭示。 ...

2026-08-05 · 更新于 2026-08-14 · 3 min · 445 words

Language-Specialized Multi-Teacher On-Policy Distillation for Multilingual LLM-Based ASR

📄 Language-Specialized Multi-Teacher On-Policy Distillation for Multilingual LLM-Based ASR 标签:#语音识别 #知识蒸馏 #多语言 #强化学习 #语音大模型 6.9/10 | 创新 1.3/2 | 严谨 1/1.5 | 实验 1.2/1.5 | 清晰 1/1 | 影响 1/1.5 | 开源 0/1.5 | 复现 0.4/0.5 | 工程 1/1.5 ✅ 6.9/10 | 前50% | 文档类型:方法研究 | 评分置信度:中 | #语音识别 | #知识蒸馏 | #多语言 #强化学习 | arxiv 👥 作者与机构 第一作者:Yuan Xie(机构未说明) 通讯作者:未说明 作者列表:Yuan Xie、Jiaqi Song、Xianliang Wang、Ming Lei、Jie Gao、Jie Wu(机构均未说明) 💡 毒舌点评 本文首次将多教师在线策略蒸馏(MOPD)从纯文本LLM移植到LLM‑based ASR,针对性拆解了声学前缀一致性这一领域特有难题,工程洞察颇为扎实,并在多基准上实证学生模型超越最佳教师oracle的“反直觉”收益。但文章通篇回避代码与权重公开,可复现性几乎为零,评估仅限单一backbone和四种语言,且动态前缀的mismatch分析仍停留在经验层面,始终欠缺机制级理解,更像一份漂亮的内部技术验证而非严谨的科学贡献。 ...

2026-08-05 · 更新于 2026-08-14 · 4 min · 821 words

Latent Softmax for Data-Efficient Phoneme-Based Multilingual ASR Across Tonal and Non-Tonal Languages

📄 Latent Softmax for Data-Efficient Phoneme-Based Multilingual ASR Across Tonal and Non-Tonal Languages 标签:#语音识别 #多任务学习 #多语言 #音频理解 #Transformer 6.3/10 | 创新 1.2/2 | 严谨 1.2/1.5 | 实验 0.8/1.5 | 清晰 0.8/1 | 影响 0.8/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 ✅ 6.3/10 | 前50% | 文档类型:方法研究 | 评分置信度:高 | #语音识别 | #多任务学习 | #多语言 #音频理解 | arxiv 👥 作者与机构 第一作者:Saierdaer Yusuyin(TasiTech实习) 通讯作者:Zhijian Ou(TasiTech) 作者列表:Saierdaer Yusuyin(TasiTech实习)、Nanling Jiang(TasiTech实习)、Hao Huang(未说明)、Zhijian Ou(TasiTech) 💡 毒舌点评 这篇论文在一个具体且实际的问题上提出了一个巧妙的微型建模改进:通过边缘化处理非声调语言的基元音标签来共享声调元音的声学空间。亮点是想法整洁,数学推导清晰(链式法则与Fisher恒等式双视角互相印证),并且确实在S2P音素错误率上带来了相对一致的8%-17%的下降。但作为一篇以“数据高效”和“方法”为核心卖点的顶会投稿,短板同样明显:实验规模过小,仅覆盖中英文两种语言且声调语言只涉及普通话;最核心的消融实验完全缺位:无法区分性能提升究竟来源于层级结构建模,还是仅因不同输出层参数量带来的容量/优化差异。代码和模型均未开源,这在当今的社区标准下已成为硬伤。 ...

2026-08-05 · 更新于 2026-08-14 · 2 min · 403 words

语音/音乐/音频论文速递 2026-08-05

语音/音乐/音频论文速递 2026-08-05 共分析 32 篇论文 ⚡ 今日概览 📥 抓取 32 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #音频理解 6篇 ██████ #语音合成 3篇 ███ #音频生成 3篇 ███ #语音识别 2篇 ██ #音乐生成 2篇 ██ #音视频理解 2篇 ██ #音视频问答 2篇 ██ #多任务学习 1篇 █ 📊 论文评分排行榜(32 篇,按分数降序) 排名 论文 总分 分档 文档类型 主任务 🥇 Multi-Task Multi-Frame Visual Piano Transcription 8.8分 前25% 系统技术报告 #音乐转录 🥈 Efficient Audio Enhancement with a Differentiable Psych 8.2分 前25% 系统技术报告 #音频超分辨 🥉 GROW: Group-Relative Advantage-Weighted On-Policy Reinf 8.0分 前25% 方法研究 #语音合成 4. Reinforcement Learning with Evolving Rubrics as Rewards 7.6分 前25% 方法研究 #音频理解 5. Cross-cultural evaluation of taste-sound correspondence 7.5分 前25% 应用研究 #音乐理解 6. dots.tts.edit: Precisely Controlled Speech Editing with 7.4分 前50% 模型报告 #语音编辑 7. Anomalous Sound Detection Meets Noise-Aware Self-Superv 7.2分 前50% 方法研究 #音频事件检测 8. Towards More Expressive Spoken LLMs: Fine-Grained Inten 7.2分 前50% 方法研究 #语音交互 9. CLASVS: Continuous-Latent Autoregression for Melody-Pre 7.1分 前50% 方法研究 #自回归模型 10. Music Restoration via Latent Operator Optimization and 7.0分 前50% 方法研究 #音频修复 11. DDSynth-RL: Audio Synthesizer Inversion via Discrete Di 7.0分 前50% 方法研究 #音频生成 12. Language-Specialized Multi-Teacher On-Policy Distillati 6.9分 前50% 方法研究 #语音识别 13. AI-Based Sound Effect Generation: A Narrative Review of 6.9分 前50% 综述 #音频生成 14. Hear to See: Discerning Stateful Listening for Audio-Vi 6.8分 前50% 方法研究 #音频理解 15. On the Geometry of Music Bandwidth Extension in Latent 6.7分 前50% 方法研究 #音频理解 16. Learning Music Style for Piano Arrangement Through Cros 6.6分 前50% 方法研究 #音乐生成 17. Adaptive Modality Reliability Diagnosis and Restoration 6.4分 前50% 方法研究 #音视频理解 18. Latent Softmax for Data-Efficient Phoneme-Based Multili 6.3分 前50% 方法研究 #语音识别 19. Echo-Aware Modulation for Compact-Latent Frequency-Time 6.3分 前50% 方法研究 #语音增强 20. Geometric Cross-Modal Token Selection for Latency-Const 6.2分 前50% 方法研究 #音视频问答 21. Rethinking Modality Reliability in Multimodal Sentiment 6.2分 前50% 方法研究 #音视频理解 22. Towards Real-world Environment-aware Zero-shot Text-to- 6.1分 前50% 方法研究 #语音合成 23. MeloCodec: Harnessing Melodic Priors for High-Fidelity 6.1分 前50% 方法研究 #歌唱生成 24. Speaker Verification Under Real Classroom Conditions fo 5.7分 前50% 应用研究 #说话人验证 25. Band-Count Dense Modal Estimation with Fixed-Frequency 5.6分 前50% 方法研究 #音频理解 26. Simulation-Based Plate-Reverb Parameter Estimation from 5.5分 前50% 方法研究 #音频理解 27. MEMS Microphones as Ultrasonic Transducers: Nonlinear E 5.5分 前50% 系统技术报告 #音频生成 28. Beyond One-Size-Fits-All: Personalized and Culturally A 5.2分 后50% 方法研究 #语音合成 29. Deep Learning-Based Active Trim Panels for Enhanced Air 5.0分 后50% 方法研究 #多任务学习 30. Calliphony: A Calligraphy-Driven Interface for Real-Tim 5.0分 后50% 系统技术报告 #音乐生成 31. Evidence-Grounded Multimodal Knowledge Graph Constructi 4.7分 后50% 系统技术报告 #音视频问答 32. What Is Sonification? Toward a Philosophy of Sonificati 3.8分 后50% 理论研究 #音频理解 📋 论文列表 🥇 Multi-Task Multi-Frame Visual Piano Transcription 8.8/10 | 创新 1.4/2 | 严谨 1.4/1.5 | 实验 1.2/1.5 | 清晰 1/1 | 影响 0.9/1.5 | 开源 1.5/1.5 | 复现 0.3/0.5 | 工程 1.1/1.5 ...

2026-08-05 · 更新于 2026-08-14 · 24 min · 4991 words

Domain-Specific Evaluation of Text-to-Speech Systems: A Multi-Metric Benchmarking Study

📄 Domain-Specific Evaluation of Text-to-Speech Systems: A Multi-Metric Benchmarking Study 标签:#语音合成 #基准测试 #多语言 #低资源 #音频理解 6.8/10 | 创新 1.2/2 | 严谨 0.8/1.5 | 实验 0.8/1.5 | 清晰 0.8/1 | 影响 1/1.5 | 开源 1/1.5 | 复现 0.3/0.5 | 工程 0.9/1.5 ✅ 6.8/10 | 前50% | 文档类型:数据集与基准 | 评分置信度:高 | #语音合成 | #基准测试 | #多语言 #低资源 | arxiv 👥 作者与机构 第一作者:Ali Jafar(FAST School of Computing, National University of Computer and Emerging Sciences (FAST-NUCES), Lahore, Punjab, Pakistan) 通讯作者:未说明 作者列表:Ali Jafar、Amal Sarmad、Shifa Yousaf、Maryam Bashir(均为FAST-NUCES) 贡献说明:前三作者贡献等同;Maryam Bashir为概念化、方法论、监督、审阅与编辑。 💡 毒舌点评 本文为乌尔都语TTS评估搭了一套领域分层、多指标互补的基准,动机清晰、工程完整,揭露的主客观“倒挂”现象对单指标排名的迷信是一记清醒的耳光。但主观听音仅拉来20人,每域区区10人,还把MUSHRA的连续0-100滑块砍成1-5离散量表,然后全文不给一个p值或置信区间,让人不得不怀疑那些看似漂亮的均值差异多半只是噪声——敢情这结论的稳健性全靠读者自行脑补统计检验。 ...

2026-08-04 · 更新于 2026-08-14 · 3 min · 441 words

The Learning Objective Governs Perceptual Narrowing: A Cross-Lingual, Layer-Wise, Ten-Seed Study of Self-Supervised Speech Encoders

📄 The Learning Objective Governs Perceptual Narrowing: A Cross-Lingual, Layer-Wise, Ten-Seed Study of Self-Supervised Speech Encoders 标签:#语音属性识别 #自监督学习 #对比学习 #多语言 #低资源 7.0/10 | 创新 1.5/2 | 严谨 1.2/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 1.2/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 0.8/1.5 ✅ 7.0/10 | 前50% | 文档类型:方法研究 | 评分置信度:高 | #语音属性识别 | #自监督学习 | #对比学习 #多语言 | arxiv 👥 作者与机构 第一作者:Sejin Yoo(独立研究员) 通讯作者:Sejin Yoo(独立研究员) 作者列表:Sejin Yoo(独立研究员) 💡 毒舌点评 这篇论文以干净且控制良好的实验设计,揭示了自监督语音模型中“学习目标决定跨语言音素判别方向”这一重要现象,尤其是重建目标将非母语辨别能力拉低到输入特征之下的发现令人印象深刻。然而,实验规模过小(仅11小时数据、7M参数),且完全未提供代码与模型,使得结论在大模型和真实婴儿数据上的可推广性存疑;论文自身也未能实现完整的“感知窄化”发育签名。 ...

2026-08-04 · 更新于 2026-08-14 · 2 min · 383 words

Zero-Shot Face-to-Speech Synthesis via Latent Space Adaptation of a Style-Diffusion TTS Model

📄 Zero-Shot Face-to-Speech Synthesis via Latent Space Adaptation of a Style-Diffusion TTS Model 标签:#语音合成 #Adapter #扩散模型 #零样本 #多语言 6.0/10 | 创新 1.2/2 | 严谨 1/1.5 | 实验 0.8/1.5 | 清晰 0.9/1 | 影响 0.8/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ✅ 6.0/10 | 前50% | 文档类型:方法研究 | 评分置信度:高 | #语音合成 | #Adapter | #扩散模型 #零样本 | arxiv 👥 作者与机构 第一作者:Carlos Muñoz-Romero(Universitat Oberta de Catalunya (UOC), Spain / Monoceros Labs, Spain) 通讯作者:未明确标注(论文中提供了邮箱 carlosmr@uoc.edu, joseangl@ugr.es,未指定通讯作者) 作者列表:Carlos Muñoz-Romero(Universitat Oberta de Catalunya (UOC), Spain / Monoceros Labs, Spain)、Jose A. Gonzalez-Lopez(Department of Signal Theory, Telematics and Communications, University of Granada, Spain) 💡 毒舌点评 本文的“Freeze-Align”框架巧妙地将人脸到语音的任务转化为预训练声学空间的语义对齐问题,避免了从零训练语音生成器,思路干净。然而,在仅有24个未见说话人上的检索结果微弱且无统计显著性,身份保真度严重依赖TTS先验,使得“从人脸生成可信声音”这一核心卖点更像是在一个强先验上的微调整形。 ...

2026-07-30 · 更新于 2026-08-14 · 3 min · 434 words

语音/音乐/音频论文速递 2026-07-30

语音/音乐/音频论文速递 2026-07-30 共分析 19 篇论文 ⚡ 今日概览 📥 抓取 19 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 2篇 ██ #音频伪造检测 2篇 ██ #CNN 1篇 █ #声源定位 1篇 █ #语音交互 1篇 █ #语音伪造检测 1篇 █ #语音合成 1篇 █ #语音增强 1篇 █ 📊 论文评分排行榜(19 篇,按分数降序) 排名 论文 总分 分档 文档类型 主任务 🥇 ThinkOmni: A Reasoning-Driven Omni-Modal LLM Framework 8.3分 前25% 方法研究 #音频伪造检测 🥈 A large-scale corpus of religious radio broadcast trans 8.2分 前25% 数据集与基准 #说话人日志 🥉 Voice Memory for Agentic Speech Recognition 8.2分 前25% 方法研究 #语音识别 4. Less is More: Modality-Decoupling for General AIGC Audi 7.5分 前25% 方法研究 #音频伪造检测 5. MPEcho: A Melody and Phoneme-Aware Generative Framework 7.4分 前50% 方法研究 #音乐生成 6. Prosody-driven Jailbreaks in Audio LLMs: A Controlled S 7.0分 前50% 方法研究 #音频交互 7. Few-Shot Open-Set Audio Classification via Transductive 6.8分 前50% 方法研究 #音频分类 8. TaoMate: Anchor-Guided Memory Bridging Evolving and Ref 6.7分 前50% 方法研究 #音视频生成 9. Symphony of Bias: Exploring Gender Associations with Mu 6.6分 前50% 数据集与基准 #音乐理解 10. Audio-Anchored Fusion of Multi-Ratio DiT Reconstruction 6.6分 前50% 方法研究 #语音伪造检测 11. DuplexGen: Adaptive Synthesis of Human-AI Turn-Taking D 6.5分 前50% 方法研究 #语音交互 12. Dissecting Sensitivity to Training Language in Self-Sup 6.3分 前50% 方法研究 #语音识别 13. Detection of AI-generated stems within hybrid human-AI 6.3分 前50% 方法研究 #CNN 14. MMAC: A Massive Multi-dimensional Benchmark for Audio C 6.3分 前50% 数据集与基准 #音频字幕生成 15. Explicit Note-Event Tokenization and Pitch-Validity Con 6.1分 前50% 方法研究 #音乐转录 16. Zero-Shot Face-to-Speech Synthesis via Latent Space Ada 6.0分 前50% 方法研究 #语音合成 17. A Study on Online Mask-based Beamforming Using Per-chan 5.7分 前50% 方法研究 #语音增强 18. Qwen-Audio-3.0-Gen-Preview Technical Report 5.6分 前50% 模型报告 #音频生成 19. Unfolded Recursive Expectation-Maximization Neural Netw 5.4分 后50% 方法研究 #声源定位 📋 论文列表 🥇 ThinkOmni: A Reasoning-Driven Omni-Modal LLM Framework for Audio Forgery Detection and Localization 8.3/10 | 创新 1.3/2 | 严谨 1/1.5 | 实验 1.3/1.5 | 清晰 0.9/1 | 影响 1/1.5 | 开源 1.5/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ...

2026-07-30 · 更新于 2026-08-14 · 15 min · 3188 words

A Cross-lingual Comparison of Human and Classification Model Entrainment Behavior in Code-switched Speech Settings

📄 A Cross-lingual Comparison of Human and Classification Model Entrainment Behavior in Code-switched Speech Settings 标签:#Transformer #多语言 #音频理解 #模型评估 5.1/10 | 创新 1.2/2 | 严谨 1/1.5 | 实验 0.8/1.5 | 清晰 0.8/1 | 影响 0.7/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 0.3/1.5 📝 5.1/10 | 后50% | 文档类型:方法研究 | 评分置信度:中 | #Transformer | #多语言 #音频理解 | arxiv 👥 作者与机构 第一作者:Debasmita Bhattacharya(哥伦比亚大学计算机系) 通讯作者:Debasmita Bhattacharya(哥伦比亚大学计算机系) 作者列表:Debasmita Bhattacharya(哥伦比亚大学计算机系)、Siying Ding(哥伦比亚大学计算机系)、Alayna Nguyen(Instagram,工作完成于哥伦比亚大学本科期间)、Julia Hirschberg(哥伦比亚大学计算机系) 💡 毒舌点评 本文首次跨语言验证口语语码转换的entrainment规律,并把人类统计模式作为镜子拷问分类模型的决策依据,思路清晰、分析细致。但整体仍属对已知框架的增量式扩展,模型分析的结论也因标签构造与显著性特征高度耦合而陷入“用定义寻找不匹配”的尴尬,削弱了批判的力度。 ...

2026-07-29 · 更新于 2026-08-14 · 2 min · 418 words