低资源

语音/音乐/音频论文速递 2026-05-12 共分析 39 篇论文 ⚡ 今日概览 📥 抓取 39 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 3篇 ███ #音乐生成 2篇 ██ #语音合成 2篇 ██ #语音增强 2篇 ██ #音频深度伪造检测 2篇 ██ #基准测试 2篇 ██ #语音质量评估 1篇 █ #音频编码 1篇 █ 📊 论文评分排行榜（39 篇，按分数降序） 排名 论文 评分 分档 主任务 🥇 Polyphonia: Zero-Shot Timbre Transfer in Polyphonic Mus 7.5分 前30% #音乐生成 🥈 PoDAR: Power-Disentangled Audio Representation for Gene 7.3分 前25% #语音合成 🥉 Evaluating the Expressive Appropriateness of Speech in 7.2分 前25% #语音质量评估 4. Reducing Linguistic Hallucination in LM-Based Speech En 7.2分 前25% #语音增强 5. Encoding and Decoding Temporal Signals with Spiking Ban 7.0分 前25% #音频编码 6. Mitigating Multimodal Inconsistency via Cognitive Dual- 7.0分 前50% #意图识别 7. SF-Flow: Sound field magnitude estimation via flow matc 6.8分 前25% #空间音频 8. Probing Cross-modal Information Hubs in Audio-Visual LL 6.5分 前25% #模型分析 9. Towards Trustworthy Audio Deepfake Detection: A Systema 6.5分 前25% #音频深度伪造检测 10. Unison: Harmonizing Motion, Speech, and Sound for Human 6.5分 前30% #音视频生成 11. CORTEG: Foundation Models Enable Cross-Modality Represe 6.5分 前25% #脑机接口 12. Omni-Persona: Systematic Benchmarking and Improving Omn 6.5分 前25% #基准测试 13. DiffVQE: Hybrid Diffusion Voice Quality Enhancement Und 6.2分 前30% #语音增强 14. A Cold Diffusion Approach for Percussive Dereverberatio 6.2分 前35% #音频修复 15. APEX: Audio Prototype EXplanations for Classification T 6.2分 前25% #音频分类 16. How Should LLMs Listen While Speaking? A Study of User- 6.0分 前25% #语音对话系统 17. RADAR Challenge 2026: Robust Audio Deepfake Recognition 6.0分 前50% #音频深度伪造检测 18. ShipEcho – An Interactive Tool for Global Mapping of U 6.0分 前25% #水下声学 19. Rethinking Entropy Minimization in Test-Time Adaptation 6.0分 前40% #语音识别 20. Separate First, Fuse Later: Mitigating Cross-Modal Inte 6.0分 前50% #音视频问答 21. ChladniSonify: A Visual-Acoustic Mapping Method for Chl 6.0分 前50% #音频生成 22. Omni-DeepSearch: A Benchmark for Audio-Driven Omni-Moda 6.0分 前25% #基准测试 23. Online Segmented Beamforming via Dynamic Programming 6.0分 前25% #声源定位 24. FLARE: Full-Modality Long-Video Audiovisual Retrieval B 6.0分 前25% #音频检索 25. Speech-based Psychological Crisis Assessment using LLMs 5.8分 前25% #语音情感识别 26. EAR: Enhancing Uni-Modal Representations for Weakly Sup 5.8分 前25% #音频事件检测 27. Kinetic-Optimal Scheduling with Moment Correction for M 5.5分 前50% #语音合成 28. Dolphin-CN-Dialect: Where Chinese Dialects Matter 5.5分 前50% #语音识别 29. Latent Secret Spin: Keyed Orthogonal Rotations for Blin 5.5分 前50% #音频水印 30. Bangla-WhisperDiar: Fine-Tuning Whisper and PyAnnote fo 5.5分 前50% #语音识别 #说话人日志 31. Remix the Timbre: Diffusion-Based Style Transfer Across 5.5分 前30% #音色迁移 32. Low-Cost Detection of Degraded Voice Clones via Source- 5.3分 前50% #语音伪造检测 33. Single-Microphone Audio Point Source Discriminative Loc 5.0分 前50% #说话人分离 34. Responsible Benchmarking of Fairness for Automatic Spee 5.0分 前50% #语音识别 35. Sub-JEPA: Subspace Gaussian Regularization for Stable E 5.0分 前50% #世界模型 36. AllocMV: Optimal Resource Allocation for Music Video Ge 4.8分 前50% #音乐视频生成 37. Multi-layer attentive probing improves transfer of audi 4.0分 中等偏上 #生物声学 #音频分类 38. Drum Synthesis from Expressive Drum Grids via Neural Au 4.0分 前50% #音乐生成 39. Voice Biomarkers for Depression and Anxiety 1.0分 后50% #语音生物标志物 📋 论文列表 🥇 Polyphonia: Zero-Shot Timbre Transfer in Polyphonic Music with Acoustic-Informed Attention Calibration ✅ 7.5/10 | 前30% | #音乐生成 | #扩散模型 | #注意力机制 #零样本 | arxiv ...

📄 Automated Clinical Report Generation for Remote Cognitive Remediation: Comparing Knowledge-Engineered Templates and LLMs in Low-Resource Settings #临床报告生成 #低资源 #零样本 #大语言模型 #认知康复 #人类评估 ✅ 7.5/10 | 扎实工作，位于前列 | #临床报告生成 | #零样本 | #低资源 #大语言模型 | arxiv 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Yongxin Zhou（Univ. Grenoble Alpes, CNRS, Grenoble INP, LIG） 通讯作者：论文未明确指定唯一通讯作者。三位作者（Yongxin Zhou, Fabien Ringeval, François Portet）的邮箱地址格式相同（firstname.lastname@univ-grenoble-alpes.fr），且位于同一机构，可视为对等贡献者或共同联系人。 作者列表： Yongxin Zhou（Univ. Grenoble Alpes, CNRS, Grenoble INP, LIG, 38000 Grenoble, France） Fabien Ringeval（Univ. Grenoble Alpes, CNRS, Grenoble INP, LIG, 38000 Grenoble, France） François Portet（Univ. Grenoble Alpes, CNRS, Grenoble INP, LIG, 38000 Grenoble, France） 💡 毒舌点评 亮点：论文展现了严谨的“专家在环”系统工程方法论，从领域知识提取、特征分类到评估设计都深度依赖并回馈给临床专家，确保了生成报告的临床相关性。这种迭代合作模式为医疗AI应用提供了优秀的范例。 短板：对GPT-4的“零样本”控制存在不完全性——即使提示词明确指定了格式，模型仍经常性地忽略生成表格和附录。这暴露了当前LLM在严格遵循结构化输出指令上的不稳定性，也使得两种生成范式之间的“受控对比”在输出结构层面打了折扣。此外，8名评估者的规模限制了统计结论的强度，论文也承认了这一局限性。 ...

📄 Linear Semantic Segmentation for Low-Resource Spoken Dialects #语义分割 #大语言模型 #多语言 #低资源 #基准测试 #阿拉伯语方言 ✅ 7.5/10 | 前25% | #语义分割 | #大语言模型 | #多语言 #低资源 | arxiv 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Kirill Chirkunov（Mohamed bin Zayed University of Artificial Intelligence） 通讯作者：Hanan Aldarmaki（Mohamed bin Zayed University of Artificial Intelligence） 作者列表：Kirill Chirkunov（Mohamed bin Zayed University of Artificial Intelligence），Younes Samih（IBM Research AI），Abed Alhakim Freihat（Mohamed bin Zayed University of Artificial Intelligence），Hanan Aldarmaki（Mohamed bin Zayed University of Artificial Intelligence） 💡 毒舌点评 亮点：论文的贡献是系统性的，而非单一的模型突破。其核心价值在于填补了一个关键空白：首次为低资源口语阿拉伯方言提供了经过严格人工标注的、涵盖多种口语体裁的线性语义分割基准（DialSeg-Ar），并在此基础上证明了现有强大模型（包括监督模型和“开箱即用”的LLM）在该任务上的系统性失效。论文提出的解决方案——在多语言LLM基础上进行领域自适应的微调，并引入辅助的分割恢复任务——有效且实用，为该领域设立了可靠的基线。短板：核心模型的创新确实更多体现在“领域适配”而非“架构发明”上，即对现有Gemma-3模型进行任务特异性微调。此外，研究完全基于文本转录，忽略了音频中的韵律、停顿等声学线索，这在处理真实口语对话时是一个明确的局限性，作者也在文末承认了这一点。评估也局限于分割任务本身，未验证对下游任务的影响。 ...

📄 Quantum Kernels for Audio Deepfake Detection Using Spectrogram Patch Features #音频深度伪造检测 #量子内核 #时频分析 #低资源 #音频安全 ✅ 6.5/10 | 前50% | #音频深度伪造检测 | #量子内核 | #时频分析 #低资源 | arxiv 学术质量 5.0/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 中 👥 作者与机构 第一作者：Lisan Al Amin（论文原文上标“1”指示其所属机构） 通讯作者：未说明 作者列表：Lisan Al Amin^1， Rakib Hossain^1， Mahbubul Islam^2， Faisal Quader^3， Thanh Thi Nguyen^4^5 注意：原文中作者姓名后附有上标数字（如^1, ^2等），通常对应于文末或首页脚注的机构列表，表明每位作者的所属单位。但所提供的论文原文片段未包含具体的机构列表，因此无法明确各作者的具体机构信息。 💡 毒舌点评 本文提出了一种将量子内核与音频频谱图的局部时频补丁结构相结合的新颖框架，其设计动机清晰，且为在NISQ时代构建硬件高效的量子电路提供了务实的思路。然而，其核心论证建立在一个规模极小（仅100个样本）、伪造生成方式极为简单（高斯噪声与频谱失真）且完全基于理想模拟的受控实验之上。这使得其声称的性能提升和实用价值显得非常初步，更像一个在严格控制条件下的概念验证，距离解决真实世界音频伪造检测的复杂性和鲁棒性挑战还非常遥远。 📌 核心摘要 解决的问题：现有的音频深度伪造检测方法常将频谱图视为通用图像，忽略了其独特的时间-频率结构。此外，在数据有限、新攻击频发的低资源场景下，现有检测器的泛化能力面临挑战。 方法核心：提出了Q-Patch框架。该方法首先从音频生成对数梅尔频谱图，然后将其划分为4×4的非重叠“补丁”，每个补丁被压缩为一个四维声学描述向量（平均激活、频谱质心、带宽、帧间相干性）。基于能量（平均激活）选择最显著的两个补丁，其8维特征被直接用作量子电路的旋转角度，通过一个浅层（深度≤3）、具有邻域纠缠的量子电路编码为量子态。最终，通过计算量子态的保真度作为量子内核，输入到量子支持向量机（QSVM）中进行分类。 与已有方法相比新在哪里： 表示层面：首次为量子内核学习设计了明确针对音频频谱图时间-频率结构的“补丁”表示，而非将其视为通用图像。 量子电路层面：设计了轻量级、硬件高效的量子特征映射，限制了量子比特数（8个）和电路深度（≤3层），并引入了模拟空间邻接性的纠缠结构，更适合近期的NISQ设备。 框架层面：提出了一种在低资源音频安全任务中应用量子内核的端到端框架，并系统地与规模匹配的基线进行对比分析。 主要实验结果：在从LJ Speech数据集构建的100个样本的平衡子集（训练集80个样本，开发集20个样本）上，Q-Patch在开发集取得了0.87的AUROC和14.8%的EER，优于使用相同补丁特征的RBF-SVM（0.82 AUROC, 18.2% EER）和一个参数量≤100k（具体为98.4k）的微型CNN（0.85 AUROC, 16.3% EER）。内核分析显示，同类样本间相似度（约0.62-0.68）高于跨类相似度（约0.61-0.62），表明量子内核能捕捉与真实/伪造相关的结构。 方法 AUROC EER (%) 复杂度 RBF-SVM 0.82 18.2 支持向量机 Tiny CNN 0.85 16.3 98.4K参数 Q-Patch 0.87 14.8 8量子比特 图4展示了开发集上量子内核的相似度矩阵。图中样本按类别排序，可见同一类别内（对角线附近块）颜色更亮（相似度更高），不同类别间颜色较暗（相似度更低），直观证实了量子内核能诱导出与真实/伪造类别一致的相似性结构。 ...

语音/音乐/音频论文速递 2026-05-08 共分析 23 篇论文 ⚡ 今日概览 📥 抓取 23 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #多模态压缩 1篇 █ #语音增强 1篇 █ #音频事件检测 1篇 █ #语音大模型 1篇 █ #语音克隆 1篇 █ #语音情感识别 1篇 █ #语音生成 1篇 █ #数据集 1篇 █ 📊 论文评分排行榜（23 篇，按分数降序） 排名 论文 评分 分档 主任务 🥇 LiVeAction: a Lightweight, Versatile, and Asymmetric Ne 8.5分 前25% #多模态压缩 🥈 Predictive-Generative Drift Decomposition for Speech En 8.5分 前25% #语音增强 🥉 MultiLinguahah : A New Unsupervised Multilingual Acoust 8.5分 前25% #音频事件检测 4. Minimizing Modality Gap from the Input Side: Your Speec 8.0分 前25% #语音大模型 5. X-Voice: Enabling Everyone to Speak 30 Languages via Ze 8.0分 前25% #语音克隆 6. Modality-Aware Contrastive and Uncertainty-Regularized 8.0分 前25% #语音情感识别 7. WavCube: Unifying Speech Representation for Understandi 7.5分 前25% #语音生成 8. PianoCoRe: Combined and Refined Piano MIDI Dataset 7.5分 前25% #数据集 9. Do Melody and Rhythm Coevolve? 7.5分 前25% #音乐认知 10. Automated Clinical Report Generation for Remote Cogniti 7.5分 扎实工作，位于前列 #临床报告生成 11. Linear Semantic Segmentation for Low-Resource Spoken Di 7.5分 前25% #语义分割 12. Edge-specific signal propagation on mature chromophore- 7.5分 前25% #蛋白质工程 13. Cross-Modal Navigation with Multi-Agent Reinforcement L 7.5分 前25% #具身导航 14. Pro-KLShampoo: Projected KL-Shampoo with Whitening Reco 7.5分 前25% #大语言模型 15. Optimal Transport Audio Distance with Learned Riemannia 7.0分 前10% #音频质量评估 16. PairAlign: A Framework for Sequence Tokenization via Se 7.0分 前25% #音频编码 17. Topological Signatures of Grokking 7.0分 前25% #模型可解释性 18. Task-Aware Answer Preservation under Audio Compression 6.5分 前25% #音频问答 19. NDF+: Joint Neural Directional Filtering and Diffuse So 6.5分 前30% #空间音频 20. Quantum Kernels for Audio Deepfake Detection Using Spec 6.5分 前50% #音频深度伪造检测 21. More Than Can Be Said: A Benchmark and Framework for Pr 6.5分 前25% #基准测试 22. PersonaKit (PK): A Plug-and-Play Platform for User Test 6.0分 前50% #全双工对话系统评估 23. Preliminary Insights in Chronos Frequency Data Understa 6.0分 前25% #模型评估 📋 论文列表 🥇 LiVeAction: a Lightweight, Versatile, and Asymmetric Neural Codec Design for Real-time Operation 🔥 8.5/10 | 前25% | #多模态压缩 | #神经网络编解码器 | #实时处理 #边缘计算 | arxiv ...

📄 The TTS-STT Flywheel: Synthetic Entity-Dense Audio Closes the Indic ASR Gap Where Commercial and Open-Source Systems Fail #语音识别 #数据增强 #迁移学习 #多语言 #低资源 🔥 8.5/10 | 前25% | #语音识别 | #数据增强 | #迁移学习 #多语言 | arxiv 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 1.0 | 置信度 高 👥 作者与机构 第一作者：Venkata Pushpak Teja Menta（论文中未明确说明其所属机构） 通讯作者：未说明（论文中未提及通讯作者信息） 作者列表：Venkata Pushpak Teja Menta（所属机构未说明） 💡 毒舌点评 亮点：这篇论文最聪明的地方在于，它用近乎“土法炼钢”的合成数据方法（TTS生成）解决了一个高端商业系统都搞不定的垂直痛点（实体密集型ASR），并给出了令人信服的量化提升（Telugu EHR提升17倍），成本却低到令人发指（<$50）。短板：其核心验证集仍然是合成的，虽然作者用少量原生人类录音做了补充验证，但这20条录音的样本量和单一说话人条件，对于宣称的“解决真实场景问题”来说，说服力稍显不足，存在“用魔法打败魔法”但魔法本身是否足够真实的疑问。 📌 核心摘要 要解决的问题：现有开源和商业的印度语言（Indic）ASR系统在识别实体密集型内容（如电话号码、货币金额、地址、品牌名、英印语码混）时表现极差，与其在标准朗读文本上的性能形成巨大差距。 方法核心：提出一个自包含的“TTS↔STT飞轮”框架。利用多种开源/商业TTS系统合成约22,000条实体密集、跨语言的印度英语码混语音，并设计了针对实体识别的评估指标EHR（实体命中率）。在此合成数据上对现有的开源SOTA模型（vasista22/Whisper）进行LoRA微调。 与已有方法相比新在哪里：(1) 提出并验证了使用多系统TTS合成数据来专门提升ASR在特定垂直领域性能的完整方法论。(2) 设计并开源了EHR指标，更公平地评估实体识别的语义准确性。(3) 发现并诊断了Whisper在特定语言（Telugu）上的“脚本坍塌”问题，并给出了条件性的修复方案。 主要实验结果：在Telugu（泰卢固语）上，其微调模型（Praxy-STT-rb）的实体密集型测试集EHR达到0.473，相比开源SOTA（vasista22的0.027）提升17倍，相比商业系统（Deepgram的0.160）提升3倍。在Tamil（泰米尔语）上EHR为0.543（比两者均高22倍），在Hindi（印地语）上为0.337（比开源高7倍，但低于Deepgram的0.485）。所有结果均未达到预设的0.65-0.75 EHR目标。标准朗读文本（FLEURS）上的WER回退在Telugu上控制在+6.6个百分点。 实际意义：证明了一种低成本（<$50边际成本）、可复现的路径，能够高效提升ASR系统在缺乏数据的垂直领域的特定能力，对工业应用（如IVR、客服）具有直接参考价值。 主要局限性：(1) 核心评估仍基于合成音频（尽管进行了人类录音验证，但样本量小）；(2) 在商业系统已深耕的语言（如Hindi）上优势不明显；(3) 微调会导致在标准朗读文本集上性能轻微回退；(4) 所有语言的实体识别性能均未达到预设的高标准目标。 🔗 开源详情 代码：https://github.com/praxelhq/stt-flywheel 模型权重： 基于 vasista22 的实体密集识别适配器 (Praxy-STT-rb, 主要结果)： Telugu: https://huggingface.co/Praxel/praxy-stt-te-rb Hindi: https://huggingface.co/Praxel/praxy-stt-hi-rb Tamil: https://huggingface.co/Praxel/praxy-stt-ta-rb 基于 Whisper-large-v3 的语言条件适配器 (Praxy-STT-r2)： Telugu: https://huggingface.co/Praxel/praxy-stt-te-r2 Hindi: https://huggingface.co/Praxel/praxy-stt-hi-r2 Tamil: https://huggingface.co/Praxel/praxy-stt-ta-r2 数据集： EDSA 语料库：合成的实体密集音频及对应文本。包含在代码仓库中，采用 CC-BY-4.0 协议。 实体字典：用于生成 EDSA 的种子实体。包含在代码仓库中，采用 CC-BY-4.0 协议。 评估数据集 (Holdouts)：包括 FLEURS、Common Voice 25.0、IndicVoices-General 以及用于实体密集评估的 Cartesia 合成数据的留出集。具体 JSONL 文件包含在代码仓库中。 Demo：论文中未提及在线演示链接。 复现材料： 预测结果：每个评估系统在每个数据集上的逐条假设 JSONL 文件，位于代码仓库的 evaluation/scorecards/stt_flywheel/ 目录下。 训练配置：论文第 III-C 节详细描述了 LoRA 微调的超参数、步骤、数据混合比例等。具体的训练脚本和配置应在代码仓库中。 评估脚本：论文中提到的 eval_ehr.py（EHR 指标）和 data_pipeline.py（数据生成管道）均包含在代码仓库中。 论文中引用的开源项目： vasista22/whisper-{te,ta,hi}-large-v2: 论文中使用的开源印地语 ASR 基线模型。许可证为 Apache-2.0。HuggingFace 地址未在论文中给出。 AI4Bharat 项目: IndicWhisper / Vistaar: 论文中提到的开源印地语 ASR 模型集，但在 HuggingFace 上为 gated 状态，未提供直接链接。 IndicConformer-600M: 同上，为 gated 模型。 Praxy Voice: 项目组开源的跨脚本印地语 TTS 模型。论文中提到其 arXiv 链接为 arXiv:2604.25441。其 GitHub/HuggingFace 链接未在论文中给出。 Whisper-large-v3: 由 OpenAI 开发的基础模型。论文中引用为 [14]。 评估数据集: FLEURS: 论文中引用为 [13]。数据集本身为开源，但论文未提供链接。 Common Voice 25.0: 论文中引用为 [12]。数据集本身为开源，但论文未提供链接。 IndicVoices: 论文中引用为 [11]。 TTS 后端: Vanilla Chatterbox Multilingual IndicF5: 用于合成代码混合语音频。 ElevenLabs v3 (商业) Cartesia sonic-3 (商业) 其他论文中引用的开源工具/库: torchaudio: 用于音频重采样。 transformers 和 peft: 用于模型微调。论文指定了特定版本 (transformers==4.36.2， peft==0.10.0)。 🏗️ 模型架构 本论文并非提出一种全新的模型架构，而是提出了一种基于现有架构的适应（Adaptation）框架。其核心是TTS-STT飞轮，可以理解为一个两阶段的数据生成与模型微调流水线。 ...

语音/音乐/音频论文速递 2026-05-07 共分析 22 篇论文 ⚡ 今日概览 📥 抓取 22 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #音频分类 3篇 ███ #音乐信息检索 2篇 ██ #音乐生成 2篇 ██ #音频质量评估 1篇 █ #语音识别 1篇 █ #语音情感识别 1篇 █ #标签分布学习 1篇 █ #视频编辑 1篇 █ 📊 论文评分排行榜（22 篇，按分数降序） 排名 论文 评分 分档 主任务 🥇 JASTIN: Aligning LLMs for Zero-Shot Audio and Speech Ev 8.5分 前10% #音频质量评估 🥈 PHALAR: Phasors for Learned Musical Audio Representatio 8.5分 前10% #音乐信息检索 🥉 The TTS-STT Flywheel: Synthetic Entity-Dense Audio Clos 8.5分 前25% #语音识别 4. To Fuse or to Drop? Dual-Path Learning for Resolving Mo 8.0分 前25% #语音情感识别 5. Trustworthy Federated Label Distribution Learning under 8.0分 前25% #标签分布学习 6. AVI-Edit: Audio-sync Video Instance Editing with Granul 8.0分 前25% #视频编辑 7. Empirical Study of Pop and Jazz Mix Ratios for Genre-Ad 7.5分 前50% #音乐生成 8. Hearing the Ocean: Bio-inspired Gammatone-CNN framework 7.5分 前25% #音频分类 9. Sparse Tokens Suffice: Jailbreaking Audio Language Mode 7.5分 前25% #音频安全 10. SEI-SHIELD: Robust Specific Emitter Identification Unde 7.5分 前25% #信号处理 11. OceanPile: A Large-Scale Multimodal Ocean Corpus for Fo 7.5分 前25% #音频分类 12. MiniMind-O Technical Report: An Open Small-Scale Speech 7.5分 前25% #语音对话系统 13. APEX: Large-scale Multi-task Aesthetic-Informed Popular 7.5分 前25% #音乐评估 14. Spatial-Magnifier: Spatial upsampling for multichannel 7.0分 前25% #语音增强 15. VocalParse: Towards Unified and Scalable Singing Voice 7.0分 前25% #音乐转录 16. Benchmarking LLMs on the Massive Sound Embedding Benchm 7.0分 前50% #音频分类 17. Stage-adaptive audio diffusion modeling 7.0分 前25% #音频生成 18. Adaptive Diagonal Loading for Norm Constrained Beamform 7.0分 前25% #波束成形 19. RenCon 2025: Revival of the Expressive Performance Rend 7.0分 前50% #音乐生成 20. Beyond Seeing Is Believing: On Crowdsourced Detection o 7.0分 前25% #音频深度伪造检测 21. Stage Light is Sequence^2: Multi-Light Control via Imit 7.0分 前25% #舞台技术 22. Library learning with e-graphs on jazz harmony 6.5分 前50% #音乐信息检索 📋 论文列表 🥇 JASTIN: Aligning LLMs for Zero-Shot Audio and Speech Evaluation via Natural Language Instructions 🔥 8.5/10 | 前10% | #音频质量评估 | #大语言模型 | #多模态模型 #零样本 | arxiv ...

📄 AfriVox-v2: A Domain-Verticalized Benchmark for In-the-Wild African Speech Recognition #语音识别 #基准测试 #多语言 #低资源 #模型评估 🔥 8.0/10 | 前25% | #语音识别 | #模型评估 | #基准测试 #多语言 | arxiv 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 中 👥 作者与机构 第一作者：Busayo Awobade（Intron Health） 通讯作者：未明确说明（论文提供了两个邮箱：research@intron.io 和 tobi@intron.io） 作者列表：Busayo Awobade（Intron Health）、Gabrial Zencha Ashungafac（Intron Health）、Tobi Olatunji（Intron Health） 💡 毒舌点评 亮点：论文成功地将评估从“读稿”推向“真实场景”，并首次系统性地进行了10大领域的垂直化分析，这比单纯报告一个平均WER要实用得多，为非洲本地化语音AI开发提供了清晰的性能地图。短板：域标签的自动标注精度只有42%，这意味着所有关于“哪个领域更难”的结论都需要打个折扣；同时，论文中表现最好的模型Sahara-v2来自作者所在机构，但其训练数据和架构细节却语焉不详，这让公平对比和结果分析打了点折扣。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：论文中未提及模型权重链接。 数据集：论文中提到了以下数据集，但未提供具体的下载链接或开源协议信息： Intron-YT：论文中提及为本研究引入的新语料库，由公开的多媒体源构建，但未提供具体获取链接。 Africa Next Voices (AFN)：论文中提及为一个去中心化的非洲会话语音语料库，由盖茨基金会资助，但未提供具体获取链接。 Waxal：论文中提及为一个多语言会话语音语料库，由谷歌资助，但未提供具体获取链接。 基准测试本身 (AfriVox-v2)：论文中未提及该基准数据集的具体公开获取链接。 Demo：论文中未提及。 复现材料：论文中未提及训练配置、检查点或详细的复现附录。 论文中引用的开源项目： wav2vec 2.0：论文中引用了自监督模型。其官方GitHub仓库链接为：https://github.com/facebookresearch/wav2vec。 Whisper：论文中引用了多任务模型。其官方GitHub仓库链接为：https://github.com/openai/whisper。 Omni-ASR (论文中指 Omni-CTC 模型)：论文中引用了该开源多语种ASR模型，参考文献标记为 [omnilingualasrteam2025omnilingualasropensourcemultilingual]，但未在论文中提供直接的项目链接。 Sahara-v2：论文中引用了由作者机构 (Intron Health) 开发的区域性调优ASR模型，但未提供开源链接。 补充信息 经过对比分析结果与论文原文，发现已有分析在核心内容上已相当全面。但仍有以下几个方面可进行补充，以使分析更完整： ...

📄 Mixed-Precision Information Bottlenecks for On-Device Trait-State Disentanglement in Bipolar Agitation Detection #语音生物标志物 #预训练 #边缘计算 #低资源 🔥 8.0/10 | 前25% | #语音生物标志物 | #预训练 | #边缘计算 #低资源 | arxiv 学术质量 6.5/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 中 👥 作者与机构 第一作者：Joydeep Chandra（论文中未说明其所属机构） 通讯作者：论文中未明确指定通讯作者。 作者列表：Joydeep Chandra（未说明机构） 💡 毒舌点评 这篇论文最大的亮点在于其巧妙且极具工程洞察力的核心思想：将数值精度本身作为信息瓶颈来实现特征解耦，这比传统对抗训练或维数缩减更直接、更利于边缘部署。然而，其短板也同样明显：在临床验证这一核心环节上，仅基于单个数据集（Bridge2AI-Voice）的算法验证，距离证明其真正的临床效用（作为监测工具）还有很长一段路，且论文未提供任何可复现的代码或模型。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：论文中未提及模型权重的共享链接（如 HuggingFace 或 ModelScope）。 数据集：论文中使用了 Bridge2AI-Voice v3.0 数据集（论文中标注为公开数据集，但未给出获取链接）和 CREMA-D 数据集。论文中未提及作者发布的自定义数据集或获取链接。 Demo：论文中未提及。 复现材料：论文中未提供完整的训练配置、检查点或独立的复现材料包。关键训练参数（如优化器、学习率、批量大小）已在论文第3.8节中给出。 论文中引用的开源项目： TensorFlow Lite：论文中使用了 TensorFlow Lite 2.13 进行边缘部署推理。链接：https://www.tensorflow.org/lite ARM NEON：论文中提到了用于加速 INT4 计算的自定义 NEON 内核（ARMv8-A 架构）。这是 ARM 处理器的指令集架构，相关文档和开发指南请参考 ARM 官方网站：https://developer.arm.com/architectures/instruction-sets/simd-isas/neon XNNPACK：论文中提到了 TensorFlow Lite 使用的 XNNPACK 委托进行加速。链接：https://github.com/google/xnnpack Monsoon Power Monitor：论文中使用该硬件进行能耗测量。链接：https://www.msoon.com/ sklearn：论文中使用了来自 scikit-learn 的 k-NN 互信息估计器实现。链接：https://scikit-learn.org/ Perf 和 ARM Streamline：论文中提到了使用这些性能分析工具进行延迟测量。Perf 是 Linux 性能分析工具；ARM Streamline 是 ARM 官方性能分析器，链接：https://developer.arm.com/tools-and-software/graphics-and-gaming/arm-mobile-studio/streamline 补充信息 [核心摘要] 补充：MP-IB 在树莓派 Zero 2W 上实现的 23.4ms 延迟和 617KB 大小是“端到端”性能，明确包含 STFT 前端处理（15.2ms）。同时，论文报告了系统的年能耗约 318 Wh，与典型的云-移动管道（约 45 kWh/年）相比，实现了 140 倍的能耗降低。 [模型架构] 补充：1. 特征头的使用场景：论文明确指出，特征头仅在一次性注册（onboarding）阶段使用，用于生成存档的特征嵌入；持续监测阶段不使用它。2. 模型大小表格细节：表 1 中，“Total (Full)” 包含 Agitation MLP (FP16)，总计 678.7 KB；“Total (Monitoring)” 包含 Agitation MLP (INT8)，总计 617.1 KB。论文在部署分析中采用后者。 [细节详述] 补充：训练细节中，论文明确说明采用“全局均值-方差归一化”，该统计量在训练折的全部数据上计算，并应用于所有折，以避免在说话人独立交叉验证中产生信息泄露。此外，训练硬件为单块 NVIDIA A100 GPU，训练约 4 小时。 [实验结果] 补充：1. 表 5 补充基线：论文中的表 5 包含了“Uniform INT4 SER”（ρ=0.061）和“Adversarial-MLP”（ρ=0.072）两个基线，已有分析未提及。2. 临床效用具体指标：论文在分析 ρ=0.117 的临床效用时，给出了在阈值=2.5 下的具体指标：敏感性 0.72，特异性 0.68，精度 0.34，召回率 0.72，F1 分数 0.46。此外，患者水平 ROC 分析显示 AUC=0.71。这些量化指标对于评估系统的实际临床潜力至关重要。 [毒舌点评] 补充：点评中“相关性数值不高”的具体背景是：在 Bridge2AI 数据集中，MP-IB 的 ρ=0.117 作为躁动预测的绝对值属于中等，但作为首个在此严苛设定（说话人独立、边缘部署）下的方法，其相对改进是显著的（见表 5）。 [模型架构] 补充：归一化协议：论文在附录 3.8 和实现部分明确，使用全局均值-方差归一化（基于训练折计算），而非按说话人归一化，以严格保证说话人独立性。 [作者与机构] 补充：论文明确说明第一作者 Joydeep Chandra 的机构是 Indian Institute of Technology Patna（印度理工学院巴特那分校）。 [细节详述] 补充：训练中使用的损失函数权重与已有分析（λ1=0.5, λ2=0.3, λ3=1.0, λ4=1.0）一致，但论文在另一处（第 3.8 节）也给出了权重（λ_stab=2.0, λ_orth=1.0, λ_agit=3.0）。根据上下文，前者应为最终使用的网格搜索结果。 [开源详情] 补充：论文中使用的 Bridge2AI-Voice v3.0 数据集，其获取链接已在论文中提供（https://aiBridge.ai/voice），但已有分析中标注为“未给出获取链接”。 [论文自我声明的局限性] 补充：现有分析已指出临床验证不足和未开源。论文中还明确列出了其他局限性：1. 数据集时间跨度短：Bridge2AI-Voice 提供 4 次录音，跨 6 周；超过 6 个月的稳定性需要前瞻性随访。2. 硬件验证局限性：在树莓派（Cortex-A53）上的测量是实测，但在微控制器（Cortex-M7）上的 INT4 支持是实现的，未经物理硬件验证。3. 隐私分析的非正式性：隐私分析是经验性的，无法保证形式化的（ε, δ）-差分隐私。4. 年龄分层差异：分析显示年龄<35 岁组的性能（ρ=0.095）略低于年龄>50 岁组（ρ=0.124）。 📌 核心摘要 这篇论文旨在解决双相情感障碍躁动连续监测中特征解耦（分离稳定说话人特征与波动的情绪状态）与边缘部署（低延迟、小体积、隐私保护）的双重挑战。其核心方法MP-IB提出，通过为不同特征头分配不对称的数值精度（FP16的特征头编码身份，INT4的状态头编码躁动）来实现硬件级别的信息瓶颈，并辅以正交精度损失、动态精度调度和多尺度时间融合。与已有方法相比，其新意在于将混合精度量化从一种单纯的压缩工具，升华为一种原理性的解耦机制，并首次为此类应用设计了严格的边缘设备部署方案。实验主要在Bridge2AI-Voice数据集上进行，采用严格的说话人独立交叉验证。MP-IB在躁动预测上达到了 ρ=0.117 的Spearman相关性，显著优于WavLM-Adapter (ρ=-0.042)、β-VAE解耦 (ρ=0.089) 等基线；在身份泄漏抑制上，EER=0.42，接近随机水平；在边缘设备（树莓派Zero 2W）上实现了23.4ms的端到端延迟和617KB的部署大小；在零样本跨语料库（CREMA-D）迁移中，达到AUC=0.817。该工作的实际意义是为低成本、隐私保护的实时心理健康监测提供了可行的技术路径。主要局限性在于临床验证不足（相关性数值不高，作为独立监测工具精度有限），且未开源代码与模型。 ...

📄 Smart Passive Acoustic Monitoring: Embedding a Classifier on AudioMoth Microcontroller #生物声学 #音频分类 #信号处理 #低资源 ✅ 7.5/10 | 前25% | #生物声学 | #信号处理 | #音频分类 #低资源 | arxiv 学术质量 5.0/7 | 选题价值 1.5/2 | 复现加成 1.0 | 置信度 中 👥 作者与机构 第一作者：未说明 通讯作者：未说明 作者列表：Louis Lerbourg（未说明）、Paul Peyret（未说明）、Juliette Linossier（未说明）、Marielle Malfante（未说明） 💡 毒舌点评 本文直击生态监测中“数据洪水”与“设备贫电”的核心矛盾，将轻量化CNN模型塞进仅有毫瓦功耗的AudioMoth并实现91%的识别率，工程导向的创新非常务实；然而，仅凭摘要无法判断其模型是否真的优于传统数字信号处理方法或更简单的机器学习模型，且“智能”的边界——误报对野外记录的影响——似乎未被充分讨论。 🔗 开源详情 代码：论文中未提及明确的代码仓库链接。但论文全文提到了一个关于模型优化和导出的开源教程，以及修改后的AudioMoth固件代码。具体链接需在完整论文正文中查找。 模型权重：论文中未提及模型权重的公开托管平台（如HuggingFace或ModelScope）链接。模型训练于一个真实世界数据集，并优化后嵌入了设备。 数据集：论文中提及使用“一个真实世界的数据集（a real-world dataset）”进行训练，但未提供数据集的具体名称、获取链接或开源协议信息。 Demo：论文中未提及在线演示（Demo）地址。 复现材料：论文全文提到了一个开源的“教程（tutorial）”，详细说明了模型优化和导出策略，这可作为重要的复现材料。具体链接需在完整论文正文中查找。 论文中引用的开源项目： AudioMoth：一个开源的低成本声学记录仪。论文作者对其固件进行了修改。论文正文中引用的两个相关GitHub仓库为： https://github.com/OpenAcousticDevices/AudioMoth-Firmware https://github.com/OpenAcousticDevices/AudioMoth-Firmware-API （注：以上链接为论文中明确提及的AudioMoth官方开源项目地址，作者基于其进行了开发。） 📌 核心摘要 要解决什么问题：传统的被动声学监测（PAM）虽然高效，但自主录音机会产生海量数据，受限于设备的功耗和存储，限制了监测活动的持续时间与规模。 方法核心是什么：提出一个智能PAM系统，在AudioMoth微控制器上直接嵌入一个优化的1D卷积神经网络（1D-CNN）分类器，实现对音频的原位分析。 与已有方法相比新在哪里：新在“边缘智能”范式：不再先采集所有原始数据再回传处理，而是在采集设备端实时识别目标声学事件（濒危海鸟Scopoli Shearwater的叫声），仅记录有价值的数据或实时输出分类日志。 主要实验结果如何：该优化模型在真实数据集上达到91%的分类准确率（平衡准确率89%），内存占用仅约10kB，单次推理时间约20ms。论文未提供与其他具体基线模型的详细数值对比表格。 实际意义是什么：大幅降低了PAM系统的功耗和数据存储需求，使大规模、长时间、低成本的生态声学监测成为可能，并为其他领域的智能传感器开发提供了开源优化流程。 主要局限性是什么：论文摘要未明确说明，可能包括：模型仅针对单一物种的特定叫声，泛化能力未知；未讨论在复杂声学环境（如风雨声、其他动物声音干扰）下的鲁棒性；未提供完整固件的功耗实测数据。 🏗️ 模型架构 基于摘要描述，模型架构的详细信息有限。 ...