参数高效微调

语音/音乐/音频论文速递 2026-07-31 共分析 16 篇论文 ⚡ 今日概览 📥 抓取 16 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 3篇 ███ #语音交互 2篇 ██ #音频理解 2篇 ██ #医疗音频 1篇 █ #歌唱生成 1篇 █ #语音伪造检测 1篇 █ #语音分离 1篇 █ #语音属性识别 1篇 █ 📊 论文评分排行榜（16 篇，按分数降序） 排名 论文 总分 分档 文档类型 主任务 🥇 SKY-Piano: A Multimodal Piano Performance Dataset 8.3分 前25% 数据集与基准 #音频理解 🥈 ACE-Data-0: Human-Centric Ambient Capture as Embodied D 8.3分 前25% 数据集与基准 #音视频理解 🥉 Improved Robustness in AI-Generated Music Detection 8.0分 前25% 方法研究 #音频伪造检测 4. Integrating Contextual Embeddings into Evaluation of Ex 7.7分 前25% 方法研究 #音乐理解 5. VocalRender: Score-Native Singing Voice Synthesis for R 7.5分 前25% 模型报告 #歌唱生成 6. WeSep: A Modular and Cue-Composable Framework for Targe 7.4分 前50% 系统技术报告 #语音分离 7. CrowdioSet and PaRIRset: Two Datasets Towards Live Musi 7.3分 前50% 数据集与基准 #音乐源分离 8. Cocktail-Talker: Multi-Speaker Dialog Modeling in Noisy 7.2分 前50% 系统技术报告 #语音交互 9. RIPPLE: Generating Multi-Channel Phase, Not Recovering 7.1分 前50% 方法研究 #音频理解 10. AgenticASR: Refining Speech Recognition in Real-World S 6.8分 前50% 系统技术报告 #语音识别 11. Teffic-Audio: Tell Fact from Fiction 6.8分 前50% 系统技术报告 #语音伪造检测 12. Does EEG Foundation Models Transfer to Speech? A Benchm 6.5分 前50% 数据集与基准 #语音识别 13. The MADRS Pipeline: Supporting Depression Assessment in 5.8分 前50% 系统技术报告 #医疗音频 14. Digital Harf: A Clinically Integrated Multimodal AI Sys 5.6分 前50% 系统技术报告 #语音交互 15. Enhancing Law-Enforcement Audio Transcription: A LoRA-B 4.8分 后50% 应用研究 #语音识别 16. Correlation between prosody and pragmatics: A case stud 4.4分 后50% 应用研究 #语音属性识别 📋 论文列表 🥇 SKY-Piano: A Multimodal Piano Performance Dataset 8.3/10 | 创新 1.4/2 | 严谨 1.2/1.5 | 实验 0.6/1.5 | 清晰 0.8/1 | 影响 1/1.5 | 开源 1.5/1.5 | 复现 0.3/0.5 | 工程 1.5/1.5 ...

📄 DuplexGen: Adaptive Synthesis of Human-AI Turn-Taking Dialogues 标签：#语音交互 #参数高效微调 #音频理解 #Transformer #模型评估 6.5/10 | 创新 1.2/2 | 严谨 1/1.5 | 实验 1/1.5 | 清晰 0.8/1 | 影响 0.9/1.5 | 开源 0.2/1.5 | 复现 0.3/0.5 | 工程 1.1/1.5 ✅ 6.5/10 | 前50% | 文档类型：方法研究 | 评分置信度：中 | #语音交互 | #LoRA | #参数高效微调 #音频理解 | arxiv 👥 作者与机构 第一作者：Takyoung Kim（University of Illinois Urbana-Champaign） 共同一作：Kang-wook Kim（Seoul National University / University of California, Berkeley） 通讯作者：未说明 作者列表：Takyoung Kim（University of Illinois Urbana-Champaign）、Kang-wook Kim（Seoul National University / University of California, Berkeley）、Sang Hoon Woo（Seoul National University / Georgia Institute of Technology）、Julia Hirschberg（Columbia University）、Gunhee Kim（Seoul National University）、Dilek Hakkani-Tür（University of Illinois Urbana-Champaign） 💡 毒舌点评 论文将人类偏好校准引入全双工对话的轮次切换合成中，通过少量标注让模型学到场景自适应的行为，这一思路简洁有效且实验设计全面（涵盖六个场景及人类评估）。然而，核心校准仍然依赖封闭式 API 和单一 LLM 家族，生成的对话在声学层面缺乏真实的韵律、停顿和重叠建模，文本级的软标签能否真正迁移到语音交互尚存疑问。 ...

语音/音乐/音频论文速递 2026-07-30 共分析 19 篇论文 ⚡ 今日概览 📥 抓取 19 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 2篇 ██ #音频伪造检测 2篇 ██ #CNN 1篇 █ #声源定位 1篇 █ #语音交互 1篇 █ #语音伪造检测 1篇 █ #语音合成 1篇 █ #语音增强 1篇 █ 📊 论文评分排行榜（19 篇，按分数降序） 排名 论文 总分 分档 文档类型 主任务 🥇 ThinkOmni: A Reasoning-Driven Omni-Modal LLM Framework 8.3分 前25% 方法研究 #音频伪造检测 🥈 A large-scale corpus of religious radio broadcast trans 8.2分 前25% 数据集与基准 #说话人日志 🥉 Voice Memory for Agentic Speech Recognition 8.2分 前25% 方法研究 #语音识别 4. Less is More: Modality-Decoupling for General AIGC Audi 7.5分 前25% 方法研究 #音频伪造检测 5. MPEcho: A Melody and Phoneme-Aware Generative Framework 7.4分 前50% 方法研究 #音乐生成 6. Prosody-driven Jailbreaks in Audio LLMs: A Controlled S 7.0分 前50% 方法研究 #音频交互 7. Few-Shot Open-Set Audio Classification via Transductive 6.8分 前50% 方法研究 #音频分类 8. TaoMate: Anchor-Guided Memory Bridging Evolving and Ref 6.7分 前50% 方法研究 #音视频生成 9. Symphony of Bias: Exploring Gender Associations with Mu 6.6分 前50% 数据集与基准 #音乐理解 10. Audio-Anchored Fusion of Multi-Ratio DiT Reconstruction 6.6分 前50% 方法研究 #语音伪造检测 11. DuplexGen: Adaptive Synthesis of Human-AI Turn-Taking D 6.5分 前50% 方法研究 #语音交互 12. Dissecting Sensitivity to Training Language in Self-Sup 6.3分 前50% 方法研究 #语音识别 13. Detection of AI-generated stems within hybrid human-AI 6.3分 前50% 方法研究 #CNN 14. MMAC: A Massive Multi-dimensional Benchmark for Audio C 6.3分 前50% 数据集与基准 #音频字幕生成 15. Explicit Note-Event Tokenization and Pitch-Validity Con 6.1分 前50% 方法研究 #音乐转录 16. Zero-Shot Face-to-Speech Synthesis via Latent Space Ada 6.0分 前50% 方法研究 #语音合成 17. A Study on Online Mask-based Beamforming Using Per-chan 5.7分 前50% 方法研究 #语音增强 18. Qwen-Audio-3.0-Gen-Preview Technical Report 5.6分 前50% 模型报告 #音频生成 19. Unfolded Recursive Expectation-Maximization Neural Netw 5.4分 后50% 方法研究 #声源定位 📋 论文列表 🥇 ThinkOmni: A Reasoning-Driven Omni-Modal LLM Framework for Audio Forgery Detection and Localization 8.3/10 | 创新 1.3/2 | 严谨 1/1.5 | 实验 1.3/1.5 | 清晰 0.9/1 | 影响 1/1.5 | 开源 1.5/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ...

📄 From Semantics to Readout: Mechanistic Understanding of Audio Tokens after Fine-Tuning for Temporal Audio Grounding 标签：#参数高效微调 #音频理解 #Transformer #模型评估 5.1/10 | 创新 1/2 | 严谨 1.1/1.5 | 实验 0.8/1.5 | 清晰 0.8/1 | 影响 0.5/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 0.6/1.5 📝 5.1/10 | 后50% | 文档类型：方法研究 | 评分置信度：高 | #音频理解 | #LoRA | #参数高效微调 #Transformer | arxiv 👥 作者与机构 第一作者：Yujian Ma（未说明） 通讯作者：Jinqiu Sang（未说明）、Ruizhe Li（未说明） 作者列表：Yujian Ma（未说明）、Jinqiu Sang（未说明）、Ruizhe Li（未说明）、Jiaao Yu（未说明）、Ang Li（未说明） 💡 毒舌点评 这篇论文把“微调让解码器更会读音频 token 已有证据”这个直觉拆解成了一套规矩的分析流水线，交叉 checkpoint 的交换实验把收益归因到解码器端，干净利落。但故事走到最后依然是“base 模型原本就有，微调只是改善读出”，结论并不出人意料。实验绑死在自建的小数据集和 LoRA 一种策略上，既没跨域验证也没碰全参微调，这让它的“机制理解”看起来更像单点观察而非稳健结论。 ...

📄 Text-Prompted CLAP: Learning Query-Conditioned Audio Representations via Contrastive Learning 标签：#音频理解 #对比学习 #参数高效微调 #音频检索 #Transformer 6.6/10 | 创新 1.2/2 | 严谨 1.2/1.5 | 实验 1.1/1.5 | 清晰 0.8/1 | 影响 1/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ✅ 6.6/10 | 前50% | 文档类型：方法研究 | 评分置信度：高 | #音频理解 | #对比学习 | #参数高效微调 #音频检索 | arxiv 👥 作者与机构 第一作者：Mohan Li（未说明） 通讯作者：未说明 作者列表：Mohan Li（未说明）、Rama Doddipatla（未说明）、Philip C. Woodland（未说明） 💡 毒舌点评 本文在 CLAP 上嫁接交叉注意力以实现查询条件化音频表示，思路直观且训练方案务实，利用 Audio-MCQ 数据监督训练也颇具巧思，在多个基准上取得了稳健提升。但所谓“轻量级”方案本质上是对 pretrained backbone 做后装式改造，创新深度有限；更致命的是完全不开源，方法细节虽写了但关键实现（如融合模块与原有 encoder 的精确对接、池化策略等）存在模糊地带，复现门槛高，难以推动后续工作。 ...

语音/音乐/音频论文速递 2026-07-29 共分析 27 篇论文 ⚡ 今日概览 📥 抓取 27 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音交互 2篇 ██ #语音属性识别 2篇 ██ #语音识别 2篇 ██ #音视频理解 2篇 ██ #音视频问答 2篇 ██ #音频理解 2篇 ██ #Transformer 1篇 █ #声源定位 1篇 █ 📊 论文评分排行榜（27 篇，按分数降序） 排名 论文 总分 分档 文档类型 主任务 🥇 faster-enhancer.c: A Dependency-Free int8 Runtime for S 8.7分 前25% 系统技术报告 #语音增强 🥈 OmniScope: Modality-Decoupled Token Compression for Omn 8.3分 前25% 方法研究 #音视频问答 🥉 AVE-Compass: Towards Holistic Evaluation for Audio-Vide 8.3分 前25% 数据集与基准 #多模态模型 4. Extracting Voice Styles from Frozen TTS Models via Grad 7.9分 前25% 方法研究 #语音克隆 5. CARE: A Multimodal Corpus for Studying Speech and Non-V 7.9分 前25% 数据集与基准 #音视频理解 6. GraphIDyOM: A graph-native Python reimplementation of I 7.8分 前25% 系统技术报告 #音乐理解 7. VAD to the Bone: Ultra-Tiny Speech Activity Detection f 7.4分 前50% 系统技术报告 #语音活动检测 8. Unlocking Spatial Grounding in Large Audio-Visual Retri 7.2分 前50% 方法研究 #声源定位 9. SpeechLLM Meets Federated Learning for End-to-End ASR: 7.1分 前50% 方法研究 #语音识别 10. Joint Text-Audio Alignment for EEG-to-Text Decoding in 7.0分 前50% 方法研究 #语音交互 11. OmniDelta: Skill-Driven Budget Allocation for Token Com 7.0分 前50% 方法研究 #音视频问答 12. Text-Prompted CLAP: Learning Query-Conditioned Audio Re 6.6分 前50% 方法研究 #音频理解 13. Towards Operational Conversational Intelligence: A Spee 6.4分 前50% 系统技术报告 #说话人日志 14. Parallel Decoding Distillation for Fast Image and Video 6.2分 前50% 方法研究 #音视频生成 15. Spacing Out: On the Reliability of Binaural Music Sourc 6.1分 前50% 方法研究 #音乐源分离 16. MyMentorLLM: A psychotherapy GenAI environment with mul 5.9分 前50% 系统技术报告 #语音交互 17. MusiChat: Vibe Composing for Music Creation 5.8分 前50% 系统技术报告 #音乐生成 18. AMRD: Adaptive Multi-Teacher Relational Distillation fo 5.6分 前50% 方法研究 #语音情感识别 19. Multi-Phonation Graph Learning with Self-Supervised Spe 5.5分 前50% 方法研究 #语音属性识别 20. Evaluation of forced alignment of code-mixed speech: th 5.4分 后50% 方法研究 #语音识别 21. A Cross-lingual Comparison of Human and Classification 5.1分 后50% 方法研究 #Transformer 22. From Semantics to Readout: Mechanistic Understanding of 5.1分 后50% 方法研究 #音频理解 23. Finding the noise: Zero-shot AI Music Detection 5.1分 后50% 方法研究 #无监督学习 24. Depression Markers in Speech: An Approach based on Trac 5.1分 后50% 应用研究 #语音属性识别 25. Self-Supervised Audio Representation Learning for Pedia 5.0分 后50% 应用研究 #音频分类 26. DynaBridge: Dynamic Summary-Guided Cross-Task Multimoda 4.9分 后50% 方法研究 #音视频理解 27. Device Invariance using Domain Adaptation on Acoustic S 4.2分 后50% 方法研究 #领域适应 📋 论文列表 🥇 faster-enhancer.c: A Dependency-Free int8 Runtime for Streaming Speech Enhancement on Commodity CPUs 8.7/10 | 创新 1.2/2 | 严谨 1.3/1.5 | 实验 1/1.5 | 清晰 0.9/1 | 影响 0.8/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 ...

📄 Automatic Audio Equalization with Semantic Embeddings 标签：#语音增强 #对比学习 #参数高效微调 #鲁棒性 #音频理解 5.8/10 | 创新 1.2/2 | 严谨 0.8/1.5 | 实验 0.7/1.5 | 清晰 0.8/1 | 影响 0.8/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 📝 5.8/10 | 前50% | 文档类型：方法研究 | 评分置信度：中 | #语音增强 | #对比学习 | #参数高效微调 #鲁棒性 | arxiv 👥 作者与机构 第一作者：Eloi Moliner（Acoustics Lab, Department of Information and Communications Engineering, Aalto University, Espoo, Finland） 通讯作者：Eloi Moliner（eloi.moliner@aalto.fi） 作者列表：Eloi Moliner（Aalto University）、Vesa Välimäki（Aalto University）、Konstantinos Drossos（Nokia Technologies）、Matti S. Hämäläinen（Nokia Technologies） 💡 毒舌点评 这篇论文把一个干净的想法——“用预训练语义嵌入来猜频谱并以逆滤波做盲均衡”——实现得还算扎实，尤其是主观测试能在统计上追平Oracle，说明路子基本对。但硬伤也很明显：编码器冻死后只训练一个0.34M参数的MLP，本质上是在学一个从CLAP嵌入到log-mel谱的静态映射，对噪声和混响的所谓“鲁棒性”其实是靠外挂DeepFilterNet2兜底，并非方法本身够硬。实验规模偏小、基线比较陈旧、关键消融缺失、只给了4个音乐片段做主观测试，距离开源落地还有一段路。 ...

📄 MoLGE: Mixture of Language Group Experts for Efficient Scaling of Massively Multilingual Speech Recognition 标签：#语音识别 #LoRA #多语言 #参数高效微调 #音频理解 6.7/10 | 创新 1.2/2 | 严谨 1.2/1.5 | 实验 1/1.5 | 清晰 0.8/1 | 影响 1/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 ✅ 6.7/10 | 前50% | 文档类型：方法研究 | 评分置信度：高 | #语音识别 | #LoRA | #多语言 #参数高效微调 | arxiv 👥 作者与机构 第一作者：Sangmin Lee（延世大学 电子电气工程系） 通讯作者：Hong-Goo Kang（延世大学 电子电气工程系） 作者列表：Sangmin Lee（延世大学 电子电气工程系）、Woojin Chung（延世大学 电子电气工程系）、Woongjib Choi（延世大学 电子电气工程系）、Hong-Goo Kang（延世大学 电子电气工程系） 💡 毒舌点评 论文将语言分组与 Mixture of LoRA Experts 结合，对 495 种语言做了相当系统的分组策略研究，实验设计扎实，洞察到语言先验在复杂正字法空间中的收益大于简化音素空间。但整体架构仍是对已有 PEFT 与 MoE 技术的组合，缺乏真正颠覆性的新组件；且仅基于 300M 量级的 wav2vec2 类骨干，未与当前主流的数十亿参数大模型直接对标，限制了其在产业界的说服力。 ...

📄 Music-Source-Separation-Training (MSST): A Unified Framework for Training and Evaluating Music Demixing Models 标签：#音乐源分离 #开源工具 #模型融合 #参数高效微调 #音频理解 5.7/10 | 创新 0.8/2 | 严谨 1/1.5 | 实验 0.5/1.5 | 清晰 0.8/1 | 影响 1/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 1.3/1.5 📝 5.7/10 | 前50% | 文档类型：系统技术报告 | 评分置信度：高 | #音乐源分离 | #模型融合 | #开源工具 #参数高效微调 | arxiv 👥 作者与机构 第一作者：Roman Solovyev (MVSep.com) 第二作者：Ilya Kiselev (National Research University Higher School of Economics, MIEM HSE) 第三作者：Alexander Stempkovskiy (AlphaChip LLC) 第四作者：Tatiana Gabruseva (独立研究员) 通讯作者：未明确说明，按惯例可能为第一作者。 💡 毒舌点评 这是一份内容详尽、工程实现度极高的系统技术报告，其形态更接近一份高质量的“超级用户手册”和“开源项目白皮书”。它为音乐源分离领域提供了一个“全家桶式”的解决方案，将多种热门模型、训练技巧和部署工具打包进一个YAML配置驱动的框架中，精准解决了“跑通不同模型需要折腾不同代码库”的核心痛点。然而，作为一篇顶会投稿，它在学术贡献上极度薄弱：通篇没有提出任何新算法、新模型架构或新的理论洞察。其实验部分不包含任何与现有框架（如Asteroid、Open-Unmix）在统一基准上的系统性对比，所有声称的改进均来自孤立的、选择性展示的案例（如TTA带来0.00-0.06 dB SDR提升），缺乏严格的统计检验和消融实验作为支撑。如果你是一个需要快速训练、部署和集成的工程师，这个库是无价之宝；但如果你在NeurIPS/ICML寻找推动领域前沿的科学发现，这篇文章只能提供工程参考，其学术价值不足以支撑一篇顶级会议论文。 ...

语音/音乐/音频论文速递 2026-07-28 共分析 31 篇论文 ⚡ 今日概览 📥 抓取 31 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音合成 5篇 █████ #语音交互 3篇 ███ #语音属性识别 3篇 ███ #声源定位 2篇 ██ #语音识别 2篇 ██ #音乐生成 2篇 ██ #音视频生成 2篇 ██ #对比学习 1篇 █ 📊 论文评分排行榜（31 篇，按分数降序） 排名 论文 总分 分档 文档类型 主任务 🥇 StanceBench: A Benchmark for Audio LLM-Based Interperso 8.6分 前25% 数据集与基准 #语音属性识别 🥈 Expose Your Disguise: Recovering Source Speaker Identit 7.5分 前25% 方法研究 #对比学习 🥉 Leveraging Gradient Reversal Loss and Multitask Learnin 7.3分 前50% 方法研究 #语音伪造检测 4. PathRIR: Physics-Guided Acoustic Path Selection and Lat 7.2分 前50% 方法研究 #空间音频 5. Indic DiarBench: A Multilingual Joint Diarization and A 7.1分 前50% 数据集与基准 #说话人日志 6. Earnings25: A Comprehensive 500-Hour Speech Benchmark f 7.1分 前50% 数据集与基准 #语音识别 7. OmniVAE: An Audio-Video VAE with Cross-Modal Alignment 7.1分 前50% 方法研究 #音视频生成 8. Revisiting Vocos: That Phasiness Business in Time-Frequ 7.1分 前50% 方法研究 #语音合成 9. Qwen-Audio-3.0-TTS: Freely Controllable and Highly Robu 7.0分 前50% 系统技术报告 #语音合成 10. Towards High-Level Semantic Intelligence 7.0分 前50% 综述 #音视频理解 11. Speech Signals Complement LLMs for Predicting Interpers 6.9分 前50% 应用研究 #语音交互 12. Let Me Look at You: Advanced Facial Expression Modeling 6.9分 前50% 模型报告 #语音合成 13. Simple Language Normalization Wins: Cross-Lingual Speak 6.8分 前50% 系统技术报告 #说话人验证 14. Memory Efficient Audio Synthesis with Decoupled Tempora 6.8分 前50% 系统技术报告 #语音合成 15. Explainable AI through the Lens of Material Agency: Ena 6.7分 前50% 应用研究 #音乐生成 16. MoLGE: Mixture of Language Group Experts for Efficient 6.7分 前50% 方法研究 #语音识别 17. Mind the Microphone Gap: Benchmarking Array Upsampling 6.6分 前50% 方法研究 #声源定位 18. Multimodal Domain Generalization for Depression Detecti 6.4分 前50% 方法研究 #音频分类 19. Infinite Canons: Maximally Self-Similar Melodic Lines a 6.4分 前50% 理论研究 #音乐生成 20. Singlish, Can or Not? Fine-Tuning and Evaluating Zero-S 6.3分 前50% 应用研究 #语音合成 21. JarvisHub: An Open Harness for Canvas-Native Multimodal 6.2分 前50% 系统技术报告 #音视频生成 22. Low-Latency Turn-Taking via Context-Aware Preface Gener 6.1分 前50% 系统技术报告 #语音交互 23. Do Visual Features Improve Other-Initiated Repair Detec 5.9分 前50% 方法研究 #音视频交互 24. Automatic Audio Equalization with Semantic Embeddings 5.8分 前50% 方法研究 #语音增强 25. Music-Source-Separation-Training (MSST): A Unified Fram 5.7分 前50% 系统技术报告 #音乐源分离 26. Disentangling Acoustic Cues in Alzheimer’s Pathology an 5.4分 后50% 应用研究 #语音属性识别 27. Speech Entrainment in Multi-Party Conversations with a 5.3分 后50% 应用研究 #语音交互 28. Improving Zero-Shot Phonetic Classification through Lan 5.3分 后50% 方法研究 #语音属性识别 29. Looking for Affect in Spontaneous Finnish Speech throug 5.3分 后50% 应用研究 #语音情感识别 30. Modeling Stylistic Co-evolution in Symbolic Music Herit 4.9分 后50% 方法研究 #音乐理解 31. Resource-Aware Topology Management for ISAC-Enabled TDO 4.1分 后50% 方法研究 #声源定位 📋 论文列表 🥇 StanceBench: A Benchmark for Audio LLM-Based Interpersonal Stance Evaluation from Speech 8.6/10 | 创新 1.5/2 | 严谨 1.2/1.5 | 实验 1/1.5 | 清晰 0.9/1 | 影响 1/1.5 | 开源 1.5/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 ...