音频分类

📄 Better Together: Leveraging Unpaired Multimodal Data for Stronger Unimodal Models #多模态模型 #音频分类 #自监督学习 #迁移学习 #少样本学习 ✅ 7.0/10 | 前25% | #音频分类 | #自监督学习 #迁移学习 | #多模态模型 #自监督学习 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0 | 置信度 高 👥 作者与机构 第一作者：Sharut Gupta (MIT CSAIL) 通讯作者：未说明（论文中未明确标注通讯作者） 作者列表：Sharut Gupta (MIT CSAIL), Shobhita Sundaram (MIT CSAIL), Chenyu Wang (MIT CSAIL), Stefanie Jegelka (TU Munich, MIT CSAIL), Phillip Isola (MIT CSAIL) 💡 毒舌点评 亮点在于其理论部分严谨地证明了无配对多模态数据在信息论层面的价值，为“跨模态知识蒸馏无需配对”提供了坚实论据，实验也相当全面。短板是UML的框架（共享权重，交替训练）相对直观，并非一个复杂的“新模型”，且其实验验证主要围绕视觉分类，对理论承诺的“适用于音频”只做了初步展示，深度稍显不足。 ...

📄 Entropy-Monitored Kernelized Token Distillation for Audio-Visual Compression #音视频事件检测 #知识蒸馏 #多模态模型 #音频分类 #模型压缩 🔥 8.5/10 | 前25% | #音视频事件检测 | #知识蒸馏 | #多模态模型 #音频分类 学术质量 6.2/7 | 选题价值 1.6/2 | 复现加成 0.5 | 置信度 中 👥 作者与机构 第一作者：Hyoungseob Park (Yale University, Amazon AGI 实习期间完成) 通讯作者：未明确说明（论文未标注通讯作者信息） 作者列表： Hyoungseob Park (Yale University) Lipeng Ke (Amazon AGI) Pritish Mohapatra (Amazon AGI) Huajun Ying (Amazon AGI) Sankar Venkataraman (Amazon AGI) Alex Wong (Yale University) 💡 毒舌点评 亮点：将蒸馏对象从“特征本身”或“输出概率”巧妙地转换为“特征间的成对关系矩阵”（核化令牌），从而绕开了师生模型维度必须匹配的硬约束，这个思路非常实用且有效。短板：尽管实验全面，但核心方法（计算Gram矩阵 + 熵加权）更像是经典技术（核方法、信息熵）在现代Transformer蒸馏场景下的工程化应用组合，理论创新深度有限，更像是一个优秀、扎实的“系统解决方案”。 ...

📄 From Birdsong to Rumbles: Classifying Elephant Calls with Out-of-Species Embeddings #音频分类 #生物声学 #迁移学习 #预训练 #低资源 ✅ 6.5/10 | 前50% | #音频分类 | #迁移学习 | #生物声学 #预训练 | arxiv 学术质量 6.0/7 | 选题价值 1.0/2 | 复现加成 -0.5 | 置信度 高 👥 作者与机构 第一作者：Christiaan M. Geldenhuys（南非斯泰伦博斯大学电气与电子工程系） 通讯作者：Thomas R. Niesler（南非斯泰伦博斯大学电气与电子工程系） 作者列表：Christiaan M. Geldenhuys（南非斯泰伦博斯大学电气与电子工程系）、Thomas R. Niesler（南非斯泰伦博斯大学电气与电子工程系） 💡 毒舌点评 亮点：这是一篇异常扎实的“系统性比较”论文，像一份详尽的调研报告，将二十多种预训练音频嵌入模型在大象叫声分类上测了个遍，实验规模和对比维度令人印象深刻。短板：其核心贡献是“验证了一个大家觉得大概率可行的想法”（即预训练嵌入能跨物种迁移），而非提出新架构或新范式；且由于最强模型（Perch 2.0）的训练数据可能包含大象录音，严格意义上的“跨物种”结论打了折扣。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：论文中未提及模型权重链接。 数据集：论文中未提及数据集获取链接。 Demo：论文中未提及。 复现材料：论文附录A提供了完整的实验结果表格（Table 3），但论文中未提及训练配置、检查点等具体复现材料。 论文中引用的开源项目： Xeno-canto：鸟类声音数据库，用于BirdNET和Perch 1.0等模型的训练。链接：https://xeno-canto.org/ Macaulay Library of Natural Sounds：康奈尔鸟类学实验室的自然声音库。链接：https://search.macaulaylibrary.org/ AudioSet：由Google维护的音频事件数据集，用于VGGish、BEATs等模型的预训练。链接：https://research.google.com/audioset/ LibriSpeech ASR：用于wav2vec 2.0和HuBERT预训练的语音数据集。链接：https://www.openslr.org/12 FSD50k：音频事件检测数据集，用于AVES和Perch 2.0的训练。链接：https://zenodo.org/record/4060432 VGGSound：视听数据集，用于AVES的训练。链接：https://www.robots.ox.ac.uk/~vgg/data/vggsound/ iNaturalist：自然观察平台，用于Perch 2.0的训练。链接：https://www.inaturalist.org/ Tierstimmenarchiv：德国的动物声音档案馆，用于Perch 2.0的训练。链接：https://www.tierstimmenarchiv.de/ MeerKAT数据集：用于animal2vec预训练的猫鼬叫声数据集。链接：https://zenodo.org/record/3834810 LDC：语言数据联盟，托管本研究中使用的亚洲象数据集。链接：https://www.ldc.upenn.edu/ Hugging Face：多个预训练模型权重的官方托管平台。链接：https://huggingface.co/ BEATs：预训练音频嵌入模型。相关论文与代码：https://arxiv.org/abs/2112.06607；代码仓库：https://github.com/microsoft/unilm/tree/master/beats wav2vec 2.0：自监督语音表示学习模型。相关论文与代码：https://arxiv.org/abs/2006.11477；代码仓库：https://github.com/facebookresearch/wav2vec2 HuBERT：自监督语音表示学习模型。相关论文与代码：https://arxiv.org/abs/2106.07447；代码仓库：https://github.com/facebookresearch/hubert XLS-R：多语言语音表示学习模型。相关论文与代码：https://arxiv.org/abs/2111.09296；代码仓库：https://github.com/facebookresearch/fairseq/tree/main/examples/wav2vec/xls_r BirdNET：鸟类声音识别模型。链接：https://birdnet.cornell.edu/；代码仓库：https://github.com/kahst/BirdNET-Analyzer Perch 1.0：鸟类声音嵌入模型。代码仓库：https://github.com/google-research/perch Perch 2.0：多物种声音嵌入模型。代码仓库：https://github.com/google-research/perch AVES：动物声音嵌入模型。代码仓库：https://github.com/earthspecies-project/aves BirdAVES：鸟类声音嵌入模型。代码仓库：https://github.com/earthspecies-project/aves animal2vec：动物声音嵌入模型。代码仓库：https://github.com/google-research/google-research/tree/master/animal2vec 补充信息 [细节详述] 补充：论文明确说明批次大小未具体说明，训练硬件也未提及（原文：“The batch size is not specified.” “The training hardware is not stated.”）。这属于关键训练细节的缺失。 [细节详述] 补充：在模型架构部分，论文对各嵌入模型的预训练数据集有更详细的说明与对比。例如： Perch 2.0：其训练数据包含来自Tierstimmenarchiv和iNaturalist的录音，这两个数据源可能包含大象录音。论文作者手动验证了评测数据未出现在公开可访问的源语料库中，但无法确定Perch 2.0的完整训练集。这直接影响了对其“跨物种”结论的纯粹性评估。 Speech Models：论文明确指出，XLS-R 在LDC数据集上优于wav2vec2.0，归因于其在更大、更多样化的多语言语音数据集上预训练，而wav2vec2.0和HuBERT在LibriSpeech（高质量、近录音棚条件）上预训练，与野外录音环境不匹配。论文推测，wav2vec2.0使用的量化码本目标可能使其产生的表示对非语音信号的信息量较少。 [实验结果] 补充：论文在讨论部分（Section 7） 明确指出，AERD在mAP指标上相比最佳嵌入模型具有更明显的优势。例如，在LDC数据集上，AERD的AP曲线在大部分召回率范围内都位于嵌入模型之上，AP差距约为0.18。这一观察解释了为何AUC接近而mAP差距较大的现象，并强调了不同评估指标的重要性。 [评分理由] 补充：论文自我声明的局限性（Section 8） 除了已提及的“缺乏细粒度呼叫标注”和“未开源”外，还包括：“缺乏上下文信息（环境、社会背景、时间模式），这些信息可能提升下游性能和生态相关性。” [核心摘要/评分理由] 补充：论文在引言和结论中强调了实际应用场景与权衡。例如，指出预训练嵌入分类器在需要高精度、允许一定召回率损失的场景下（如人工审核初筛、存在-不存在调查、人象冲突早期预警）可能优于端到端微调模型，因为后者可能产生更多假警报，影响社区信任。这是对选题价值（1.0分）的补充，表明其应用不仅在于“即插即用”，还涉及特定部署场景下的性能权衡。 [创新点] 补充：论文的层分析（Section 6.2）设计动机明确包含实际部署考量：如果中间层表征足以进行分类，则只需保留预训练模型的一小部分参数（如wav2vec2.0和HuBERT的第二层，仅占全网络约10%的参数），从而满足远程保护环境中计算资源有限的设备端处理需求。分析中已提及此结论，但未明确其“设计动机”部分。 📌 核心摘要 本文研究了在数据稀缺的生物声学领域，能否利用在非目标物种或非生物声学领域预训练的音频嵌入模型，无需微调即可有效分类大象叫声。 方法核心：采用“固定嵌入+轻量分类器”范式。研究者从通用音频（VGGish， BEATs）、语音（wav2vec2.0， HuBERT， XLS-R）和生物声学（Perch， BirdNET等）领域的预训练模型中提取固定声学嵌入向量，并在其上训练逻辑回归、多层感知机（MLP）、循环神经网络（RNN/GRU/LSTM）等轻量级监督分类器。 与已有方法的新颖之处：这是首次对如此广泛的预训练模型（特别是语音Transformer）在大象叫声分类任务上进行全面、系统的跨物种迁移学习评估。它严格评估了“域外”和“跨物种”嵌入的有效性，并提供了详细的层分析。 主要实验结果：在非洲 bush 大象（EV数据集）和亚洲大象（LDC数据集）的呼叫分类任务上，不微调的预训练嵌入性能可接近从头训练的端到端监督模型（AERD）。最佳模型Perch 2.0在EV数据集上AUC达0.849，在LDC数据集上AUC达0.935，与AERD的差距在2.2个百分点以内。严格意义上的“跨物种”模型Perch 1.0表现也很强。层分析发现，对于语音Transformer模型（如wav2vec2.0），中间层（如第2层）表征就能取得有竞争力的性能，意味着模型可大幅压缩。主要实验结果表格见下： ...

📄 Human Behavior Atlas: Benchmarking Unified Psychological And Social Behavior Understanding #多模态模型 #音频分类 #音视频 #预训练 #模型评估 🔥 8.5/10 | 前25% | #多模态模型 | #预训练 | #音频分类 #音视频 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 1.0 | 置信度 高 👥 作者与机构 第一作者：Keane Ong（MIT；National University of Singapore） 通讯作者：未说明 作者列表：Keane Ong（MIT；National University of Singapore）、Wei Dai（MIT）、Carol Li（MIT）、Dewei Feng（MIT）、Hengzhi Li（MIT；Imperial College London）、Jingyao Wu（MIT）、Jiaee Cheong（Harvard University）、Rui Mao（Nanyang Technological University）、Gianmarco Mengaldo（National University of Singapore）、Erik Cambria（Nanyang Technological University）、Paul Pu Liang（MIT） 💡 毒舌点评 亮点：在行为理解领域，该工作首次系统性地将分散在情感、认知、病理和社会过程等多个维度的异构数据集、任务和评估指标统一成一个标准化基准，为构建行为基础模型提供了至关重要的“数据-任务-评估”三位一体的基础设施。短板：论文更像是一个扎实的工程整合工作，其核心创新在于“统一”而非提出解决行为理解某一具体子任务（如深度讽刺识别或复杂社交推理）的新算法或架构，对于寻求领域内技术深度突破的读者来说，可能略显“广而不深”。 ...

ICLR 2026 - 音频分类 共 6 篇论文 ← 返回 ICLR 2026 总览 排名 论文 评分 分档 🥇 MindMix: A Multimodal Foundation Model for Auditory Percepti 9.0分 前10% 🥈 Resp-Agent: An Agent-Based System for Multimodal Respiratory 9.0分 前10% 🥉 PACE: Pretrained Audio Continual Learning 9.0分 前10% 4. Unmute the Patch Tokens: Rethinking Probing in Multi-Label A 7.5分 前25% 5. SNAP-UQ: Self-supervised Next-Activation Prediction for Sing 7.5分 前25% 6. Better Together: Leveraging Unpaired Multimodal Data for Str 7.0分 前25% 📋 论文详情 🥇 MindMix: A Multimodal Foundation Model for Auditory Perception Decoding via Deep Neural-Acoustic Alignment 🔥 9.0/10 | 前10% | #音频分类 | #多模态模型 | #预训练 #对比学习 ...

📄 MindMix: A Multimodal Foundation Model for Auditory Perception Decoding via Deep Neural-Acoustic Alignment #多模态模型 #音频分类 #预训练 #对比学习 #跨模态 🔥 9.0/10 | 前10% | #音频分类 | #多模态模型 | #预训练 #对比学习 学术质量 6.5/7 | 选题价值 1.8/2 | 复现加成 0.7 | 置信度 高 👥 作者与机构 第一作者：Rui Liu（香港理工大学） 通讯作者：Jibin Wu（香港理工大学），Kay Chen Tan（香港理工大学） 作者列表：Rui Liu（香港理工大学），Zhige Chen（香港理工大学），Shu Peng（香港理工大学），Wenlong You（香港理工大学），Zhi-An Huang（香港城市大学（东莞）），Jibin Wu（香港理工大学），Kay Chen Tan（香港理工大学） 💡 毒舌点评 亮点：这篇论文最大的亮点是“用事实说话”——它不像许多基础模型论文那样只提理论创新，而是直接用一套横跨注意力解码、情感分析、音乐检索的“组合拳”实验结果，无可辩驳地证明了其提出的CALRA模块在建立深度神经-声学对齐上的巨大威力，尤其是在AAD任务上近乎100%的准确率堪称惊艳。 短板：然而，论文也坦承了“配对数据稀缺”这一阿喀琉斯之踵。当前实验所用的100多小时对齐数据量，相对于其宣称的“基础模型”定位和庞大的单模态预训练数据（3500+小时）而言仍显单薄，这限制了我们对模型在更复杂、更嘈杂的真实世界声学场景下是否依然如此“全能”且“鲁棒”的判断。 📌 核心摘要 这篇论文旨在解决现有EEG基础模型在听觉感知解码任务中效果有限的问题，其根源在于模型缺乏与声学刺激信息的深度耦合。作者提出了MindMix，一个专门为学习神经-声学对齐表征而设计的多模态基础模型。与以往方法相比，MindMix的创新在于：1) 采用两阶段训练，先用大规模单模态EEG数据预训练一个高容量编码器，再用配对的EEG-音频数据进行跨模态对齐；2) 引入了一个新颖的“跨注意力低秩对齐”（CALRA）模块，该模块包含类型特定对齐器、双向跨注意力机制和共享低秩融合，实现了模态间细粒度的深度交互。在听觉注意力解码（AAD）、听觉情感识别和跨模态音乐检索等多个任务上的实验表明，MindMix显著超越了现有的任务特定模型和单模态基础模型。例如，在KUL数据集上的AAD任务，MindMix达到了99.82%的平衡准确率，远超最强基线DARNet的94.81%。该工作为多模态脑解码和听觉脑机接口的研究奠定了重要基础。其主要局限性在于，当前领域内大规模配对EEG-音频语料库的稀缺，限制了对模型性能缩放定律的进一步探索。 详细分析 01.模型架构 MindMix采用双流架构，通过对比学习目标在共享嵌入空间中对齐EEG和音频表征。整体流程如图1所示：输入一对EEG片段（\(S_{EEG}\)）和音频片段（\(S_{Audio}\)），分别通过各自的编码器生成初始嵌入（\(E_{proj}, A_{proj}\)），然后输入核心的CALRA模块进行深度交互和对齐，输出最终对齐嵌入（\(E_{aligned}, A_{aligned}\)），用于对比损失计算。 ...

📄 PACE: Pretrained Audio Continual Learning #音频分类 #持续学习 #预训练 #自监督学习 #参数高效微调 🔥 9.0/10 | 前10% | #音频分类 | #持续学习 | #预训练 #自监督学习 学术质量 6.5/7 | 选题价值 1.8/2 | 复现加成 0.8 | 置信度 高 👥 作者与机构 第一作者：Chang Li (清华大学心理与认知科学系) 通讯作者：Liyuan Wang (liyuanwang@tsinghua.edu.cn， 清华大学心理与认知科学系) 作者列表：Chang Li（清华大学心理与认知科学系）、Kanglei Zhou（清华大学心理与认知科学系）、Liyuan Wang†（清华大学心理与认知科学系） （注：*表示共同第一作者，†表示通讯作者） 💡 毒舌点评 亮点：这是一篇问题定义清晰、实验极其扎实的“工程科学”论文。它首次将音频持续学习（ACL）问题系统化，并通过精巧的分析（如图1、图3）揭示了音频域与视觉域CL的根本差异，提出的PACE方法在6个差异巨大的基准上均显著刷新SOTA，特别是将性能逼近了联合训练上界。 短板：方法设计虽然有效，但各模块（改进FSA、子空间正交PEFT、边界感知扰动）组合起来略显复杂，调参空间可能不小。此外，对于计算资源敏感的场景，其多会话自适应（MSA）阶段的额外开销是否总能接受，论文讨论略显不足。 🔗 开源详情 代码：论文中提及“we will release all constructed benchmarks and reproduced baselines along with our codebase upon acceptance”，但未在当前文本提供具体代码仓库链接。 模型权重：未提及公开预训练EAT模型的权重获取方式（可能默认为已有公开模型）。 数据集：论文构建的CL基准分割将随代码发布。原始数据集（ESC-50, US8K等）均为公开可用。 Demo：未提及在线演示。 复现材料：提供了详细的超参数设置（表5）、训练硬件（NVIDIA A800 GPU）、关键算法伪代码（Algorithm 1）以及大量的消融实验结果和敏感性分析，复现细节充分。 引用的开源项目：论文依赖或对比的开源项目包括：EAT模型、SSLAM模型、RanPAC、ACL、L2P、DualPrompt等持续学习基线方法。 📌 核心摘要 本文针对预训练音频模型在数据分布动态变化的现实场景中面临灾难性遗忘的问题，首次系统研究了音频持续学习（Audio Continual Learning， ACL）。论文的核心工作包括： ...

📄 Resp-Agent: An Agent-Based System for Multimodal Respiratory Sound Generation and Disease Diagnosis #音频分类 #多模态模型 #流匹配 #数据增强 #生物声学 🔥 9.0/10 | 前10% | #音频分类 | #多模态模型 | #流匹配 #数据增强 学术质量 6.5/7 | 选题价值 1.5/2 | 复现加成 1.0 | 置信度 高 👥 作者与机构 第一作者：Pengfei Zhang (香港科技大学（广州）) 通讯作者：Li Liu (香港科技大学（广州）， avrillliu@hkust-gz.edu.cn) 作者列表：Pengfei ZHANG (香港科技大学（广州）)， Tianxin Xie (香港科技大学（广州）)， Minghao Yang (香港科技大学（广州）)， Li Liu* (香港科技大学（广州）) 💡 毒舌点评 亮点：这篇论文最漂亮的地方在于它提出了一个“分析-生成”闭环的智能体系统，用LLM（Thinker-A2CA）动态决定“合成什么”来弥补诊断器的短板，把数据增强从一个被动的预处理步骤变成了主动的、对抗性的课程学习，这个系统设计思想很有启发性。 短板：不过，整个系统有点像个精心组装的乐高，依赖多个重型组件（LLM， BEATs， Longformer， 流匹配模型），对于呼吸音这个相对垂直的应用场景，其工程复杂度和算力需求是否与性能增益完全匹配，值得商榷。另外，生成的“合成临床音频”虽然用于训练有效，但缺乏真实生理细节的验证，其临床保真度仍需医生在严格双盲测试中评判。 📌 核心摘要 要解决的问题：深度学习在呼吸音分析中面临两大挑战：一是将音频信号转为频谱图会导致瞬态事件（如啰音）的信息损失；二是缺乏大规模、高质量的多模态（音频+临床文本）标注数据，且存在严重的类别不平衡。 方法核心：提出Resp-Agent，一个由中央控制器（Thinker-A2CA）编排的多智能体闭环系统。该系统能主动分析诊断器的弱点，并调度生成器进行针对性合成，从而将诊断与生成任务统一。诊断器采用“模态编织”将文本与音频token融合，并用稀疏音频锚点捕捉瞬态事件；生成器采用两阶段设计，先用LLM在文本诊断和参考音频风格条件下生成离散音频单元，再用流匹配解码器重建波形。 新在何处：1) 系统范式：首次将呼吸音的分析（诊断）和生成整合到一个由LLM驱动的闭环智能体框架中。2) 诊断器架构：提出基于稀疏全局注意力的“模态编织”和“音频锚点”机制，实现高效且精细的文本-音频跨模态对齐。3) 生成器设计：将文本LLM改造为可控的多模态音频单元生成器，并采用流匹配进行波形重建。4) 基准数据：构建并开源了首个大规模、多来源、跨机构的多模态呼吸音基准Resp-229k（22.9万条记录）。 主要实验结果：在ICBHI基准上，Resp-Agent的诊断性能（ICBHI Score 72.7%）超越先前最佳音频模型超过5个百分点。在自建的跨机构Resp-229k基准上，使用Thinker指导合成的平衡数据后，多模态诊断器的宏观F1从0.212大幅提升至0.598，证实了闭环生成策略的有效性。生成器在可控性（风格/内容解耦）和保真度（FAD 1.13）上也优于强基线（如微调的StableAudio Open）。关键实验结果见下表： 模型/方法 数据集 指标 原始（不平衡） 平衡后 诊断器对比 Conformer (音频基线) Resp-229k Test-CD Macro-F1 0.1935 0.5360 Resp-Agent Diagnoser (Ours) Resp-229k Test-CD Macro-F1 0.2118 0.5980 生成器策略对比 No-Synth (基线) Resp-229k Test-CD Macro-F1 0.212 - Class-Prior Rebalancing Resp-229k Test-CD Macro-F1 - 0.512 Thinker-A2CA (Ours) Resp-229k Test-CD Macro-F1 - 0.598 生成器音频保真度对比 StableAudio Open (微调) 个体化重建 FAD ↓ 1.54 - Resp-Agent Generator (Ours) 个体化重建 FAD ↓ 1.13 - 实际意义：为数据稀缺且不平衡的医疗音频分析提供了一种强大的范式，即通过智能体驱动的闭环生成来主动构建更鲁棒的模型。开源的Resp-229k基准和代码将加速呼吸音领域的多模态研究。 主要局限性：1) 系统复杂度高，涉及多个大模型的训练与协调。2) 生成的合成音频虽用于训练有效，但其真实性和临床细节（如相位、微结构）仍需更严格的评估。3) 评估主要集中在诊断性能，对生成音频的直接临床效用（如用于教学或模拟）验证不足。 🏗️ 模型架构 Resp-Agent是一个由中央控制器协调的多智能体系统，包含三个核心模块：Thinker（规划者）、Generator（生成器） 和 Diagnoser（诊断器），形成一个“诊断->发现问题->指导合成->改进诊断”的闭环。 ...

📄 SNAP-UQ: Self-supervised Next-Activation Prediction for Single-Pass Uncertainty in TinyML #音频分类 #自监督学习 #低资源 #模型评估 ✅ 7.5/10 | 前25% | #音频分类 | #自监督学习 | #低资源 #模型评估 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Ismail Lamaakal（Mohammed First University, Multidisciplinary Faculty of Nador） 通讯作者：未说明（论文中未明确标注通讯作者） 作者列表： Ismail Lamaakal*（Mohammed First University, Multidisciplinary Faculty of Nador） Chaymae Yahyati*（Mohammed First University, Multidisciplinary Faculty of Nador） Khalid El Makkaoui（Mohammed First University, Multidisciplinary Faculty of Nador） Ibrahim Ouahbi（Mohammed First University, Multidisciplinary Faculty of Nador） Yassine Maleh（Sultan Moulay Slimane University, Laboratory LaSTI） （*表示共同第一作者） 💡 毒舌点评 论文的亮点在于将“不确定性”这个通常需要复杂计算的概念，巧妙地转化为对网络内部“可预测性”的衡量，并以此构建了一个极度轻量、无需额外状态、完美适配MCU的单次推理方案，实用性极强。但其短板是“自监督”的标签略有牵强，更像是为不确定性估计任务设计的辅助回归损失；此外，论文对tap位置选择、rank大小等关键设计选择的敏感性分析不够深入，给实际部署时的调优留下了“黑箱”。 ...

📄 Unmute the Patch Tokens: Rethinking Probing in Multi-Label Audio Classification #音频分类 #自监督学习 #探针评估 #模型评估 #基准测试 ✅ 7.5/10 | 前25% | #音频分类 | #探针评估 | #自监督学习 #模型评估 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Lukas Rauch (卡塞尔大学) 通讯作者：未说明 作者列表：Lukas Rauch (卡塞尔大学), René Heinrich (卡塞尔大学, 弗劳恩霍夫IEE), Houtan Ghaffari (根特大学), Lukas Miklautz (MPI of Biochemistry), Ilyass Moummad (INRIA Montpellier), Bernhard Sick (卡塞尔大学), Christoph Scholz (卡塞尔大学, 弗劳恩霍夫IEE) 💡 毒舌点评 亮点：这篇论文做了一件“对”且“必要”的事——它系统性地指出并验证了音频SSL领域普遍存在的“用线性探针评估却不靠���”的核心症结（池化瓶颈），并给出了一个简洁有效的解决方案，让探针评估重获可信度。实验规模和设计的严谨性也值得称赞。 短板：其提出的“二值化原型探针”本质上是现有原型网络的变体和简化，在方法创新深度上稍显不足，更像是一个工程上优化得很好的“修补”方案。研究完全基于冻结的声谱图编码器，其结论在更广泛的音频表示（如波形、离散token）上的普适性有待验证。 ...