生物声学

📄 Decoding Insect Song: A Multitask Semisupervised Orthoptera Bioacoustic Classifier #音频分类 #生物声学 #多任务学习 #知识蒸馏 #自监督学习 #数据集 8.7/10 | 创新 1.4/2 | 严谨 1.2/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 1.3/1.5 | 开源 0.8/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 🔥 8.7/10 | 前50% | #音频分类 | #多任务学习 | #生物声学 #知识蒸馏 | arxiv 👥 作者与机构 奥尔加·伊苏波娃（Olga Isupova），丹尼尔·库津（Danil Kuzin），埃拉·布朗宁（Ella Browning），汤姆·米尔斯（Tom Mills），史蒂文·里斯（Steven Reece）。 作者团队来自剑桥大学（University of Cambridge）。 💡 毒舌点评 这篇论文像一份精心包装的“集成学习套餐”，将多任务、自监督、知识蒸馏等流行技术打包成一个针对特定生态监测问题的解决方案。其优点在于目标明确、工程实现完整，并提供了新的数据集。然而，其主要短板在于方法论创新性不足——本质上是现有技术的组合，缺乏机器学习层面的理论或架构突破。实验对比过于单一，仅与一个通用模型比较，未能充分验证框架内各组件的贡献和必要性。绝对性能（F1=0.34）虽然对比基线有提升，但在实际野外多物种重叠场景下仍然很低，论文对此瓶颈分析不足。此外，关于“迁移能力”的声明（测试集来自未见站点）可能因训练数据来自同一地区（牛津郡）的少量站点而存在潜在偏倚，实际泛化能力有待在更广泛地理和生态条件下验证。 📌 核心摘要 针对被动声学监测（PAM）中直翅目昆虫自动分类面临的标注数据稀缺、领域偏移以及现有工具非通用等问题，本文提出了PULSE，一个半监督、多任务学习框架。该框架联合优化三个损失函数：1）基于弱标签数据的监督分类损失（多标签二元交叉熵）；2）通过知识蒸馏与预训练的通用鸟声模型（BirdNET）嵌入对齐的生态先验损失（L2距离）；3）利用大量无标签野外录音进行自监督学习（Bootstrap Your Own Latent, BYOL）以适应本地声景的损失。通过主动学习，从野外数据中获取少量标签，进一步提升了模型性能。实验表明，PULSE在仅使用“物种库”标签时，其宏F1分数（0.21）显著优于直接使用通用模型Perch 2.0（0.07）；当加入少量野外标注数据后，其宏F1达到0.34，性能与使用同样数据微调的Perch 2.0（0.33）持平。论文还展示了学习到的嵌入空间编码了有意义的生态结构，并提供了交互式可视化工具用于生态发现。 ...

📄 Dolph2Vec: Self-Supervised Representations of Dolphin Vocalizations #音频分类 #自监督学习 #生物声学 #信号处理基础 7.2/10 | 创新 1.5/2 | 严谨 1.2/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 0.5/1.5 | 开源 0.5/1.5 | 复现 0.5/0.5 | 工程 1/1.5 ✅ 7.2/10 | 前50% | #音频分类 | #自监督学习 | #生物声学 #信号处理基础 | arxiv 👥 作者与机构 作者： Chiara Semenzin (École Normale Supérieure, Paris, France) Faadil Mustun (École Normale Supérieure, Paris, France) Roberto Dessì (Not Diamond, San Francisco, USA) Pierre Orhan (Institut du Cerveau, Paris, France) Alexis Emanuelli (École Normale Supérieure, Paris, France) Yair Lakretz (École Normale Supérieure, Paris, France) Gonzalo de Polavieja (Champalimaud Foundation, Lisbon, Portugal) Germán Sumbre (École Normale Supérieure, Paris, France) 机构：École Normale Supérieure (巴黎高等师范学院)， Not Diamond， Institut du Cerveau， Champalimaud Foundation。 💡 毒舌点评 这篇论文的出发点——为特定物种构建自监督学习（SSL）模型——是生物声学中一个有价值且清晰的方向。然而，其“顶会级”的呈现背后存在明显短板。首先，核心宣称的“首个大规模物种特异性SSL模型”和“发布数据集”存在水分。论文仅在一个来源、环境高度特定（半圈养红海宽吻海豚）的种群数据上训练，其“大规模”仅指相对过去的小数据集，但数据的生态多样性和泛化能力存疑。宣称“发布”数据集，但正文和附录均未提供任何实际链接，这削弱了可复现性和影响力声明。其次，实验评估相对基础且避重就轻。仅使用线性探测（逻辑回归）评估冻结表征，这是SSL的初步评估标准，但论文未进行任何微调实验以证明模型潜力，也未在更广泛的海豚声音数据集或与其他物种的交叉评估上验证其主张的“物种特异性优势”。在检测任务上，Dolph2Vec与BioLingual几乎持平（67.8 vs 67.6 mAP），但在分类任务上的提升（82.0% vs 74.5%）虽显著，却未通过统计检验论证其显著性。最后，对代码本（codebook）的可解释性分析流于表面。虽然展示了单元与哨声类别的关联，但未能提供令人信服的证据表明这些单元真正编码了“亚哨声结构”而非仅仅是统计上的高频片段，也未设计实验来验证这些单元的预测性或功能性作用。总而言之，这是一篇扎实的系统论文，但创新声明需更多实质性证据支撑，评估深度有待加强。 ...

📄 A conceptual framework for learning to listen by reward: Curiosity-driven search for novel sources #声源定位 #音频事件检测 #强化学习 #模拟环境 #生物声学 📝 4.0/10 | 后50% | #声源定位 | #强化学习 | #音频事件检测 #模拟环境 | arxiv 学术质量 3.3/7 | 影响力 0.6/2 | 可复现性 0.1/2 | 置信度 中 👥 作者与机构 第一作者：Andreas Triantafyllopoulos（慕尼黑工业大学健康信息学系，慕尼黑机器学习中心） 通讯作者：未明确说明（论文未提供明确的通讯作者标识） 作者列表：Andreas Triantafyllopoulos（慕尼黑工业大学健康信息学系，慕尼黑机器学习中心）、Jakub Šťastný（未说明具体机构）、Alexios Terpinas（未说明具体机构）、Tianyi Liu（未说明具体机构）、Yuanqi Wang（未说明具体机构）、Björn W. Schuller（慕尼黑工业大学健康信息学系，慕尼黑机器学习中心，慕尼黑数据科学研究所；伦敦帝国理工学院语言、音频和音乐组） 💡 毒舌点评 本文提出一个将强化学习（RL）系统性引入音频“聆听”任务的概念框架，其核心动机——通过好奇心驱动的探索学习——具有启发性。然而，其作为一篇定位为“概念框架”的论文，实验验证却仅限于一个极为简化的单声源导航场景，且未提供任何开源代码、预训练模型或数据集，这严重削弱了其作为一篇顶会论文所应有的严谨性和可复现性，使其更接近于一篇技术报告而非完整的学术贡献。 📌 核心摘要 要解决什么问题：论文旨在解决强化学习（RL）在音频领域应用匮乏的问题，提出一个概念框架，指导智能体如何仅通过听觉奖励来学习探索和定位环境中的声源。 方法核心是什么：核心是构建一个好奇心驱动的音频探索框架。智能体在一个模拟环境中移动，通过麦克风阵列接收声音，目标是找到新的、未访问过的声源（novel sources）。智能体每成功接近一个新声源就获得正奖励，否则获得负奖励或零奖励，以此激励其探索。 与已有方法相比新在哪里：与以往将音频作为辅助模态（如音视频导航）或仅优化下游任务指标的工作不同，本文提出一个专注于纯音频输入的、端到端的RL概念框架。它不预设“好/坏”声源，采用模块化的、基于新奇性的目标，并明确讨论了音频RL特有的环境模拟、奖励设计等挑战。 主要实验结果如何：论文提供了一个概念验证实验。在一个10x10x5m的模拟鞋盒房间内，智能体需定位一个静止声源。实验比较了随机策略、无记忆CNN（CNN6）和有记忆的CNN-Transformer模型。结果显示，CNN-Transformer在“准确率”（选择最优行动的比例，74%）、“可达性”（成功到达目标的比例，52%）和“平均总奖励”（0.89）上均优于CNN6（68%，36%，0.08）和随机策略（41%，8%，-0.89）。 Q-network Accuracy Reachability Reward Random 41% 8% -.89 CNN6 68% 36% .08 CNN-Transformer 74% 52% .89 实际意义是什么：该工作为将RL应用于音频分析领域（如机器人听觉、环境感知）提供了一个初步的理论蓝图和实践思路，可能对推动音频领域的自主智能体研究有启发价值。 主要局限性是什么：实验场景过于简单（单个静止声源），与框架描述的多源、移动源探索目标相去甚远；缺乏与相关音频RL工作的直接对比；未提供开源代码和详细实现，可复现性差；框架的泛化能力和在实际复杂声学环境中的有效性未得到验证。 🔗 开源详情 代码：论文中未提及代码链接 模型权重：论文中未提及 数据集：论文中未提及数据集链接。论文在Related Work部分引用了Soundspaces数据集，但仅作为背景介绍，未提供其开源获取链接。 Demo：论文中未提及 复现材料：论文中未提及训练配置、检查点等复现材料的下载链接。论文在第四节详细描述了实验设置（如环境尺寸、模型架构CNN6和CNN-Transformer、训练超参数等），可作为复现指导，但未提供额外的附录或配置文件。 论文中引用的开源项目： Soundspaces数据集：https://github.com/facebookresearch/sound-spaces （论文在引用 [undefm] 时提及） Habitat模拟器：https://github.com/facebookresearch/habitat-lab （论文在引用 [undefn] 时提及） pyroomacoustics：https://github.com/LCAV/pyroomacoustics （论文在引用 [undefac] 时提及） gpuRIR：论文中仅提及名称，未提供链接。 Unity引擎：论文中仅提及名称，未提供链接。 ViZDoom：论文中仅提及名称，未提供链接。 音频神经辐射场（audio neural radiance fields）：论文中仅提及概念和相关文献 [undefaf, undefag]，未提供具体开源项目链接。 🏗️ 方法概述和架构 本文提出的“通过奖励学习聆听”是一个概念框架，旨在指导如何构建能够在环境中通过听觉奖励进行探索和学习的强化学习（RL）智能体。其核心流程是：智能体在模拟环境中移动 → 通过麦克风接收声音信号作为状态 → 基于听觉状态选择行动（移动方向） → 环境根据行动结果（是否找到新声源）给予奖励 → 智能体通过RL算法（如深度Q学习）更新策略。 ...

📄 A strongly annotated passive acoustic dataset for tropical bird monitoring #生物声学 #数据集 #音频事件检测 #标注数据 #领域适应 ✅ 7.2/10 | 前50% | #生物声学 | #数据集 | #音频事件检测 #标注数据 | arxiv 学术质量 4.0/7 | 影响力 1.2/2 | 可复现性 2.0/2 | 置信度 高 👥 作者与机构 第一作者：Daniela Ruiz（Microsoft AI for Good Research Lab, Redmond, Washington, United States；Universidad de Los Andes, Bogotá, Colombia, Center for Research and Formation in Artificial Intelligence） 通讯作者：论文中未明确指定通讯作者。作者列表最后一位为Juan Lavista（Microsoft AI for Good Research Lab），通常末位资深作者可能为通讯作者，但论文未明确说明。 作者列表：Daniela Ruiz（Microsoft AI for Good Research Lab, Redmond, Washington, United States；Universidad de Los Andes, Bogotá, Colombia, Center for Research and Formation in Artificial Intelligence）、Juan Sebastián Ulloa（Instituto de Investigación de Recursos Biológicos Alexander von Humboldt, Bogotá, Colombia）、Zhongqi Miao（Microsoft AI for Good Research Lab, Redmond, Washington, United States）、Nicolás Betancourt（Instituto de Investigación de Recursos Biológicos Alexander von Humboldt, Bogotá, Colombia）、Maria Paula Toro-Gómez（Instituto de Investigación de Recursos Biológicos Alexander von Humboldt, Bogotá, Colombia）、Andrés Hernández（Microsoft AI for Good Research Lab, Redmond, Washington, United States；Universidad de Los Andes, Bogotá, Colombia, Center for Research and Formation in Artificial Intelligence）、Bruno Demuro（Microsoft AI for Good Research Lab, Redmond, Washington, United States）、Eliana Barona-Cortés（Instituto de Investigación de Recursos Biológicos Alexander von Humboldt, Bogotá, Colombia）、Angela M. Mendoza-Henao（Fundación Manacus, Red Ecoacústica Colombiana, Cali, Colombia）、Andrés Sierra-Ricaurte（Instituto de Investigación de Recursos Biológicos Alexander von Humboldt, Bogotá, Colombia）、Sebastian Pérez-Peña（Louisiana State University, Baton Rouge, United States, Museum of Natural Sciences）、Rahul Dodhia（Microsoft AI for Good Research Lab, Redmond, Washington, United States）、Pablo Arbeláez（Universidad de Los Andes, Bogotá, Colombia, Center for Research and Formation in Artificial Intelligence）、Juan Lavista（Microsoft AI for Good Research Lab, Redmond, Washington, United States） 💡 毒舌点评 亮点：论文在生物多样性热点但数据稀缺的热带地区，系统构建并开源了一个高质量、强标注（时间-频率）的鸟类声学数据集（PteroSet），并通过基线实验明确揭示了热带声景的现实挑战。其类COCO的JSON标注格式设计具有实用性和前瞻性。短板：作为以数据集为核心的工作，其技术验证部分过于薄弱。基线模型选择经典但过时的ResNet-18，且仅完成基础的二元检测任务，实验完全未与当前音频领域的SOTA方法对比，也未探索更具生态价值的多标签分类等任务，严重低估了数据集的潜力，也未能充分验证其“强标注”的优势。 ...

📄 CoarseSoundNet: Building a reliable model for ecological soundscape analysis #音频分类 #生物声学 #迁移学习 #数据增强 #领域适应 🔥 8.5/10 | 前25% | #音频分类 | #迁移学习 | #生物声学 #数据增强 | arxiv 学术质量 5.3/7 | 影响力 1.2/2 | 可复现性 2.0/2 | 置信度 高 👥 作者与机构 第一作者：Alexander Gebhard（慕尼黑工业大学医院，健康信息学系） 通讯作者：未明确说明（论文未指定通讯作者） 作者列表：Alexander Gebhard（慕尼黑工业大学医院，健康信息学系）、Andreas Triantafyllopoulos（慕尼黑工业大学医院，健康信息学系；慕尼黑机器学习中心）、Dominik Arend（弗莱堡大学，生物学院，地植物学系）、Sandra Müller（弗莱堡大学，生物学院，地植物学系）、Svenja Schmidt（弗莱堡大学，生物学院，地植物学系）、Michael Scherer-Lorenzen（弗莱堡大学，生物学院，地植物学系）、Björn W. Schuller（帝国理工学院，GLAM小组；慕尼黑工业大学医院，健康信息学系） 💡 毒舌点评 亮点：论文的核心价值在于其系统性和工程化方法论。它并非提出一种新颖的声学模型架构，而是为生态声景分析这一实际任务，提供了一套经过充分消融实验验证的“模型构建指南”。从架构选择、沉默类训练、跨域数据组合到基于声学特性的后处理策略，其研究路径清晰，实验设计严谨，为生态学家提供了一个可靠的预处理工具（CoarseSoundNet）。 短板：作为一篇应用导向的方法论文，算法创新性确实有限。最终性能提升（宏观F1从0.683到0.797）的绝对值在跨域场景下虽有价值，但模型在最具挑战性的“人类声”类别上F1仍不足0.7，表明其远未解决该领域的核心难题。此外，生态案例研究中所关联的声学指数与生物多样性的相关性本身就很弱（ρ<0.4），模型过滤后的效果与人工过滤趋势相似但并未显著提升相关性，这使得其实际应用价值的论证略显薄弱。 📌 核心摘要 问题：生态声景分析（区分生物声、地球声、人类声）缺乏可靠的自动化工具。现有模型在嘈杂的真实被动声学监测（PAM）录音上泛化能力差。 方法核心：本文系统性地构建并评估了一个名为CoarseSoundNet的多标签深度学习模型。研究涵盖模型架构选择、引入“沉默”类训练的影响、多种补充数据集的组合效果，以及基于类别特定阈值和持续时间约束的评估策略优化。 创新点：主要创新在于提供了一套系统性的、可复现的模型构建方法论，并深入分析了影响模型跨域性能的关键因素（如数据域相似性、沉默类作用）。论文明确了CoarseSoundNet作为预处理工具的价值。 主要结果：在目标域BEsound测试集上，通过优化策略（PDA+CST），模型的宏观F1分数从基线0.683提升至0.797。生态案例研究表明，使用CoorseSoundNet过滤数据后计算声学指数，其与鸟类α多样性的相关性与使用人工标注过滤后的结果趋势一致，但相关性本身较弱。 实际意义：CoarseSoundNet为生态学家提供了一个公开可用的预处理工具，可用于过滤PAM录音中的非生物声和人类声，以提高后续分析的可靠性。 主要局限性：模型在识别低强度、远距离的人类声以及区分昆虫声与某些地球声/沉默方面存在挑战；性能对训练数据的域相似性高度依赖；合成数据引入未带来提升。 🔗 开源详情 代码：https://github.com/CHI-TUM/CoarseSoundNet 模型权重：https://huggingface.co/HearTheSpecies/CoarseSoundNet 数据集： Edansa-2019：公开可用，但论文中未提供直接链接。 BEsound, BE-Ambient, HTS-Forest, BrPAM：可通过 BExIS 平台请求获取，链接为 https://www.bexis.uni-jena.de。 PublicMix：为本研究公开混合的定制数据集，其混合脚本在代码仓库中提供。 Demo：论文中未提及。 复现材料： 论文提供了训练配置文件和所有实验的详细超参数设置，这些信息在附录 A.1.1 和 A.1.2 的表格（Table 11, Table 12）中。 训练使用了 autrainer 库。 论文中引用的开源项目： autrainer: https://github.com/danikhan632/autrainer BirdNET: https://birdnet-team.github.io/BirdNET-Analyzer/ AudioSet: https://research.google.com/audioset/ FSD50K: https://zenodo.org/record/4060432 xeno-canto: https://xeno-canto.org/ IDMT-Traffic: 论文中未提及链接。 MAVD: https://zenodo.org/record/3380140 AeroSonicDB: https://github.com/DCASE-RC/aerosonicdb WindNoiseDataset: https://github.com/yangy597/WindNoiseDataset WindNet-data: https://github.com/MitchellOrenstein/WindNet-data CNN10/CNN14: https://github.com/qiuqiangkong/audioclassification_cnn14 ResNet-50, EfficientNet-B7: 通用架构，无特定链接。 AST: https://github.com/YuanGongND/ast SSAST: https://github.com/YuanGongND/ssast PaSST: https://github.com/kkoutini/passt_de_finetuned_dcase22 AVES: https://github.com/YifeiZhuang/aves W2V2: https://github.com/facebookresearch/wav2vec2 Whisper: https://github.com/openai/whisper CLAP-HTSAST: https://github.com/LAION-AI/CLAP Qwen2-Audio: https://github.com/QwenLM/Qwen2-Audio Biodiversity Exploratories (BE): https://www.biodiversity-exploratories.de/ 🏗️ 方法概述和架构 整体流程概述：本文是一个多阶段、以方法论探索为导向的模型构建与评估工作流。核心流程是：首先基于公开数据集（Edansa-2019）训练并选择一个基础模型架构；然后通过引入额外训练类别（沉默）、融合多源补充数据、以及设计针对目标域（BEsound）的优化评估策略，逐步迭代提升模型在目标域的性能；最后，将最终模型（CoarseSoundNet）应用于生态声学案例研究，验证其作为预处理工具的有效性。 ...

📄 SEABAD: A Tropical Bird Activity Detection Dataset for Passive Acoustic Monitoring #生物声学 #音频事件检测 #数据集 #低资源 #模型评估 #边缘计算 🔥 8.1/10 | 前50% | #生物声学 #音频事件检测 | #数据集构建 #模型评估 | #生物声学 #音频事件检测 | arxiv 学术质量 5.1/7 | 影响力 1.0/2 | 可复现性 2.0/2 | 置信度 高 👥 作者与机构 第一作者：Muhammad Mun’im Ahmad Zabidi（马来亚大学计算机科学与信息技术学院；马来西亚工艺大学电气工程学院） 通讯作者：未说明 作者列表：Muhammad Mun’im Ahmad Zabidi（马来亚大学计算机科学与信息技术学院；马来西亚工艺大学电气工程学院），Mohd Yamani Idna Idris（马来亚大学计算机科学与信息技术学院），Norisma Idris（马来亚大学计算机科学与信息技术学院） 💡 毒舌点评 这篇论文是一份标准的、执行得不错的“数据集构建”工作。它清晰地识别了生物声学领域一个实际的痛点（缺乏东南亚热带数据集），并系统性地提出了一个解决方案。其核心价值在于提供了一个经过整理、开源、并配有详细构建流程的资源，对特定生态区域的研究者有用。然而，它本质上是应用现有技术进行数据工程，而非算法创新。基线实验设计过于简单，导致性能数字“爆表”，反而可能引发对任务真实难度的怀疑。论文最大的隐患在于负样本生态代表性的不足，这为其“适用于真实部署”的声称埋下了伏笔。 📌 核心摘要 问题：现有鸟类活动检测（BAD）数据集与模型主要基于温带地区，无法适应物种丰富、背景噪声复杂的东南亚热带生态系统，尤其是对于资源受限的边缘设备部署。 方法核心：提出SEABAD数据集（50,000个3秒片段）及其双分支自动化整理流程。正样本分支通过从Xeno-Canto提取录音，经过元数据获取、下载转换、声学去重、分段提取、多样性感知物种平衡和质量保证六个阶段生成25,000个鸟鸣片段。负样本分支从六个不同的环境声音数据集中提取非鸟类声音片段，共同构成平衡的数据集。 新颖之处：主要贡献是一个为东南亚热带生态系统构建的、面向边缘部署（3秒，16kHz）的BAD数据集。提出了结合声学显著性评分、聚类和优先队列回填的“多样性感知物种平衡”方法，以减少长尾分布（Gini系数降低13.7%）并保持声学多样性。 主要结果：在基线实验中，多个预训练CNN模型在测试集上均达到了99.49%以上的准确率和0.998以上的AUC。其中，轻量级模型MobileNetV3-Small（1.1M参数）的准确率为99.57% ± 0.25%。零样本通用模型BirdNET在该数据集上准确率仅为68.62%，凸显了领域迁移的挑战。人工审计确认了97.8% ± 0.9%的正样本标签准确率。 实际意义：为东南亚热带地区的被动声学监测提供了关键的基础数据资源，支持开发节能、高效的边缘AI鸟类检测模型。 主要局限：数据集地理范围限于东南亚五国；负样本主要来源于全球或温带数据集，可能未充分覆盖热带特有的环境噪声（如密集蝉鸣、灵长类叫声），影响模型在真实热带部署时的鲁棒性；数据集专注于二分类检测，不适用于物种分类任务。 🔗 开源详情 代码：https://github.com/mun3im/seabad 模型权重：包含在数据集发布包中，可通过 Zenodo (https://zenodo.org/records/18290494) 或 GitHub 仓库获取。 数据集：SEABAD，可从 Zenodo 获取：https://zenodo.org/records/18290494 Demo：论文中未提及 复现材料：论文中提及了以下复现材料，均包含在开源代码和数据集发布中： 完整的双分支数据策展流水线代码（包含预处理、去重、物种平衡算法）。 预处理和去重脚本。 多样性感知平衡算法。 训练好的基线模型权重（如MobileNetV3-Small等）。 完整的溯源元数据（包括Xeno-Canto ID、坐标、许可证）。 训练/验证/测试集划分。 基线验证的完整实验代码：https://github.com/mun3im/mybad/tree/main/validation 论文中引用的开源项目： Xeno-Canto（数据来源）：https://xeno-canto.org/ AudioMoth（硬件平台）：https://www.openacousticdevices.info/audiomoth BirdNET（用于零样本评估的通用模型）：https://birdnet.cornell.edu/ FAISS（用于近似最近邻搜索和声学去重）：https://github.com/facebookresearch/faiss librosa（用于音频处理）：https://librosa.org/ TinyChirp（引用的边缘部署框架）：https://github.com/earthspeciesproject/tinybird 🏗️ 方法概述和架构 本文的核心贡献是SEABAD数据集及其构建方法论，而非一个端到端的推理模型。其方法架构是一个多阶段、双分支的自动化数据整理流水线，旨在从原始、杂乱的社区贡献录音和多源环境声音中，系统化地产出高质量、平衡的鸟类活动检测训练数据。 ...

📄 BeeVe: Unsupervised Acoustic State Discovery in Honey Bee Buzzing #生物声学 #自监督学习 #音频事件检测 #预训练 #表示学习 ✅ 6.5/10 | #生物声学 #自监督学习 | arxiv 👥 作者与机构 第一作者：Hamze Hammami（Heriot-Watt University Dubai, School of Engineering and Physical Sciences） 通讯作者：未说明 作者列表：Hamze Hammami（Heriot-Watt University Dubai）、Nidhal Abdulaziz（Heriot-Watt University Dubai） 💡 毒舌点评 论文巧妙地将成熟的自监督特征提取（PaSST）与无监督离散表征学习（VQ-VAE）相结合，应用于非发声的蜜蜂蜂鸣信号，在小数据量（5小时）上展示了清晰的模式分离（JSD>0.6），这是其亮点。然而，核心方法（PaSST+VQ-VAE）是已有技术的直接堆叠，创新性有限；且缺乏与最直接、最强有监督基线的对比（如文中引用的作者先前工作[9]），使得“无监督性能”的说服力大打折扣。 📌 核心摘要 解决什么问题：现有生物声学方法通常假设发声模型或预定义语义单元，无法处理像蜜蜂蜂鸣这种非发声、由肌肉集体振动产生的生物信号。本文旨在探索能否在不使用任何标签或先验假设的情况下，从这类信号中自动发现可重复的、有意义的声学状态结构。 方法核心：采用两阶段流水线。首先，使用在AudioSet上预训练的Patchout Spectrogram Transformer (PaSST) 作为冻结的特征提取器，将原始音频转化为高维嵌入向量。然后，在这些嵌入上训练一个向量量化变分自编码器（VQ-VAE），通过重建损失和量化损失学习一个离散的、可复用的声学“码本”（codebook），每个码本条目代表一个反复出现的声学模式（令牌）。 与已有方法相比新在哪里：与大多数针对发声动物（如鲸鱼、鸣禽）的工作不同，BeeVe首次将无监督离散码本学习应用于非发声生物信号（蜜蜂蜂鸣）。它完全不依赖语音或发声假设，直接从集体机械振动中学习离散状态表示，填补了非发声物种在计算生物声学研究中的空白。 主要实验结果如何：在5小时蜜蜂音频上训练后，学习到的令牌能够无监督地分离蜂后存在（queenright）和蜂后缺失（queenless）状态，两者的令牌分布Jensen-Shannon散度（JSD）达到0.609-0.688。更重要的是，蜂后缺失状态内部进一步被发现存在三个稳定的子状态，其大小和主要令牌在不同代码本大小和随机种子下保持一致。令牌序列分析表明其时间结构非随机（卡方检验 p « 0.001）。关键数据见下表： 实验配置 训练数据 代码本大小 随机种子 重构损失 困惑度 活跃令牌数 E1_baseline 350k帧 (5h) 64 0 0.91 15.82 19/64 E1_baseline_seed1 350k帧 (5h) 64 1 0.93 14.54 17/64 E2_small_codebook 210k帧 (3h) 32 0 1.30 16.64 18/32 实验 条件 JSD 活跃令牌数 熵 (bits) 主导令牌占比 轮廓分数 QNL异常值占比 E1_baseline queenright 0.609 13/64 2.042 39.04% 0.046 1.57% queenless 5/64 1.134 58.00% E1_baseline_seed1 queenright 0.688 13/64 2.210 27.68% 0.016 1.57% queenless 6/64 1.187 56.30% E2_small_codebook queenright 0.663 16/32 2.398 19.94% 0.188 1.70% queenless 6/32 1.247 56.45% ...

📄 Ecologically-Constrained Task Arithmetic for Multi-Taxa Bioacoustic Classifiers Without Shared Data #生物声学 #任务算术 #模型合并 #零样本 #数据集 🔥 8.0/10 | 前25% | #生物声学 | #任务算术 | #模型合并 #零样本 | arxiv 学术质量 4.0/7 | 选题价值 4.0/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Ragib Amin Nihal（东京科学研究所，系统与控制工程） 通讯作者：未明确说明（根据邮箱 ragib@ra.sc.e.titech.ac.jp 推断，可能为第一作者） 作者列表： Ragib Amin Nihal（东京科学研究所，系统与控制工程；RIKEN BDR） Benjamin Yen（东京科学研究所，系统与控制工程） Runwu Shi（东京科学研究所，系统与控制工程；RIKEN BDR） Takeshi Ashizawa（东京科学研究所，系统与控制工程） Kazuhiro Nakadai（东京科学研究所，系统与控制工程；RIKEN BDR） 💡 毒舌点评 亮点在于将生态学中的“声学生态位假说”巧妙映射到模型参数空间，为“为什么简单的模型合并（平均）在生物声学任务上有效，而复杂的冲突解决方法（如TIES）反而失效”提供了一个优雅的几何解释（任务向量近正交）。短板是应用场景相对垂直（多物种生物声学监测），其核心发现（基于频谱距离预测合并效果）的普适性有待在更广泛的音频任务（如通用声音事件检测）中验证，且合并后的模型精度（59.2%）相比联合训练基线（68.3%）仍有近10个百分点的明显差距。 🔗 开源详情 代码：论文中未提及代码链接。论文摘要下方有“Code Link”字样，但后文未给出具体URL。 模型权重：论文中未提及具体权重链接，但文中使用的预训练模型为BEATs (iter3+ AS2M) [chen2023beats]。 数据集：论文使用了多个开源数据集，具体获取链接未在论文中给出，但引用中指明了来源平台： BirdCLEF 2023/2024/2025：来源为Kaggle竞赛数据集。 Watkins Marine Mammal Sound Database：来源为WHOI（伍兹霍尔海洋研究所）。 AnuraSet：来源为Zenodo。 BirdSet POW：来源为HuggingFace Datasets。 （注：论文附录C和表格S3中提供了详细描述，但未给出具体项目主页URL。） Demo：论文中未提及。 复现材料：论文附录提供了详细的训练协议。具体包括： 完整超参数配置（附录D，表S2）。 任务向量计算方法和存储格式（附录D.3）。 复现所需的配置哈希（SHA-256前缀 c4c3cf3b）和随机种子设置（附录H）。 所有实验的附加分析（附录E，包括数据效率、层级分析、持续学习等）。 （注：论文未提供预训练检查点或具体代码的下载链接。） 论文中引用的开源项目： BEATs：预训练音频模型。论文中引用[chen2023beats]，未提供具体链接。 Task arithmetic：模型合并方法。论文中引用[ilharco2023editing]，未提供具体链接。 TIES-Merging：冲突解决型合并方法。论文中引用[yadav2023ties]，未提供具体链接。 DARE：基于丢弃的合并方法。论文中引用[yu2024dare]，未提供具体链接。 DELLA：结合DARE和TIES的合并方法。论文中引用[panigrahi2024della]，未提供具体链接。 AudioSet：BEATs的预训练数据集。论文中引用[audioset]，未提供具体链接。 补充信息 [细节详述] 补充：模型架构的关键设计动机之一是BEATs使用了LayerNorm，这使得合并后的编码器无需进行权重重新校准（原文2.5节：“BEATs uses LayerNorm, so merged encoders do not require recalibration."）。 ...

📄 Learning Generalizable Action Representations via Pre-training AEMG #生物声学 #自监督学习 #预训练 #零样本 #信号处理 ✅ 7.5/10 | 前25% | #生物声学 | #预训练 | #自监督学习 #零样本 | arxiv 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 0.2 | 置信度 中 👥 作者与机构 第一作者：Zhenghao Huang (华南理工大学) 通讯作者：Lin Shu (华南理工大学) 作者列表：Zhenghao Huang (华南理工大学)、Huilin Yao (华南理工大学)、Kaikai Wang (华南理工大学)、Lin Shu (华南理工大学) 💡 毒舌点评 亮点：将EMG信号巧妙类比为“生理语言”并设计了完整的“分词-造句-预训练”管线，在跨被试识别任务上取得了令人信服的性能提升（平均准确率提升近6个百分点），为EMG基础模型研究提供了有价值的范式探索。 短板：核心创新更多是工程集成与范式迁移（NLP的VQ-GPT思路到EMG），而非原理性突破；论文声称“首次”大规模预训练，但对“大规模”的量化描述模糊（如预训练token总数、FLOPs），且关键超参数和训练细节在正文中完全缺失，严重损害了工作的可复现性和说服力。 🔗 开源详情 代码：https://github.com/AEMG-series/AEMG 模型权重：论文中未提及模型权重的具体下载链接（如 HuggingFace/ModelScope 等）。 数据集：论文中提及使用了八个公开的 EMG 数据集（包括 ULB-MLG, EMG-EPN, Ninapro DB4, Toro-Ossaba 等），但未提供这些数据集的统一获取链接。具体数据集名称和来源详见论文附录 B.1 和附录表 2。 Demo：论文中提及“demos”资源与代码一同在 GitHub 仓库提供（见上述代码链接）。 复现材料：论文中详细描述了算法（如算法 1：神经收缩分词器）、模型架构（NST）、训练损失（公式 8）以及消融实验的配置，但未提供具体的训练脚本、配置文件或预训练检查点下载方式。相关信息主要在论文正文中。 论文中引用的开源项目：论文中未提及任何第三方开源项目/工具的具体名称和链接。论文主要引用了相关学术研究（如 Transformer 架构本身）。 补充信息 [训练细节] 补充：论文在附录D.6中提供了预训练的具体训练配置，而非正文中所述完全缺失。包括：优化器为AdamW，学习率为2e-4，批大小为32，训练了100个epoch，硬件环境为4张NVIDIA A100 80GB GPU。这些信息对于完整复现预训练过程至关重要。 [模型架构] 补充：论文在NST骨干网络部分明确说明，为每个收缩词注入的“联合时空条件嵌入”显式编码了三个属性：解剖学来源（电极布局）、激活相位和时序顺序。这一设计是应对异构电极拓扑、增强模型对肌肉协同位置信息理解的关键。 [实验结果] 补充：关于信号切分视角对比实验（表3），论文指出一个有趣现象：使用传统固定窗口方法时，掩码预训练阶段的预测准确率反而更高。作者分析这是因为传统切片包含大量可预测的零填充或静态噪声片段，降低了预训练难度，但这也佐证了NCT分词迫使模型学习更复杂、更有挑战性的生理语义，从而在下游任务中表现更好。 [论文自述的局限性] 补充：论文在摘要和结论中自述的局限性还包括：1）EMG信号本身的高度个性化可能限制通用词汇表对所有用户的完美适用性；2）当前工作专注于手势识别这一特定任务，未来可扩展至其他运动意图解码。 [与SOTA的具体差距数值] 补充：分析中已提及AEMG-Large与SOTA方法的平均准确率差距（5.85%）。此外，在特定数据集上（如Ninapro DB4），AEMG-Large (88.10%) 相比表现最好的SOTA方法SCDEM (82.33%)，提升达到了 5.77%，具体数字可更精确对应。 📌 核心摘要 这篇论文旨在解决肌电图（EMG）信号在跨被试、跨设备场景下泛化能力差的核心问题。其方法核心是提出了AEMG框架，首次将大规模自监督预训练范式引入EMG领域，核心创新在于：1）提出“EMG即语言”范式，通过神经收缩分词器（NCT）将连续EMG信号分割为离散的“肌肉收缩词”，再组合成“EMG句子”；2）构建跨设备的统一表示空间，以处理异构数据；3）通过向量量化（VQ）学习一个通用的“EMG词汇表”，并通过掩码预测进行预训练，以捕捉肌肉协同模式。与已有基于特定数据集和有监督学习的方法相比，AEMG的新在于其大规模、无监督的预训练范式以及模拟语言结构的信号处理思路。主要实验结果表明，在严格的跨被试（LOSO）手势分类任务中，AEMG-Large模型在四个数据集上的平均准确率达到89.81%，比六种现有SOTA方法中最好的（84.02%）高出5.85个百分点；在少样本适应中，仅用5%的目标用户数据即可达到约90%的微调性能。其实际意义在于为构建通用、强健的EMG解码基础模型奠定了基础，有望减少对个体校准的依赖。主要局限性包括：框架核心组件（分词、VQ、掩码建模）并非全新；论文未提供预训练的具体数据规模、计算资源和关键训练参数，影响了复现；对比的基线方法并非该领域最新的基础模型工作。 ...

📄 Smart Passive Acoustic Monitoring: Embedding a Classifier on AudioMoth Microcontroller #生物声学 #音频分类 #信号处理 #低资源 ✅ 7.5/10 | 前25% | #生物声学 | #信号处理 | #音频分类 #低资源 | arxiv 学术质量 5.0/7 | 选题价值 1.5/2 | 复现加成 1.0 | 置信度 中 👥 作者与机构 第一作者：未说明 通讯作者：未说明 作者列表：Louis Lerbourg（未说明）、Paul Peyret（未说明）、Juliette Linossier（未说明）、Marielle Malfante（未说明） 💡 毒舌点评 本文直击生态监测中“数据洪水”与“设备贫电”的核心矛盾，将轻量化CNN模型塞进仅有毫瓦功耗的AudioMoth并实现91%的识别率，工程导向的创新非常务实；然而，仅凭摘要无法判断其模型是否真的优于传统数字信号处理方法或更简单的机器学习模型，且“智能”的边界——误报对野外记录的影响——似乎未被充分讨论。 🔗 开源详情 代码：论文中未提及明确的代码仓库链接。但论文全文提到了一个关于模型优化和导出的开源教程，以及修改后的AudioMoth固件代码。具体链接需在完整论文正文中查找。 模型权重：论文中未提及模型权重的公开托管平台（如HuggingFace或ModelScope）链接。模型训练于一个真实世界数据集，并优化后嵌入了设备。 数据集：论文中提及使用“一个真实世界的数据集（a real-world dataset）”进行训练，但未提供数据集的具体名称、获取链接或开源协议信息。 Demo：论文中未提及在线演示（Demo）地址。 复现材料：论文全文提到了一个开源的“教程（tutorial）”，详细说明了模型优化和导出策略，这可作为重要的复现材料。具体链接需在完整论文正文中查找。 论文中引用的开源项目： AudioMoth：一个开源的低成本声学记录仪。论文作者对其固件进行了修改。论文正文中引用的两个相关GitHub仓库为： https://github.com/OpenAcousticDevices/AudioMoth-Firmware https://github.com/OpenAcousticDevices/AudioMoth-Firmware-API （注：以上链接为论文中明确提及的AudioMoth官方开源项目地址，作者基于其进行了开发。） 📌 核心摘要 要解决什么问题：传统的被动声学监测（PAM）虽然高效，但自主录音机会产生海量数据，受限于设备的功耗和存储，限制了监测活动的持续时间与规模。 方法核心是什么：提出一个智能PAM系统，在AudioMoth微控制器上直接嵌入一个优化的1D卷积神经网络（1D-CNN）分类器，实现对音频的原位分析。 与已有方法相比新在哪里：新在“边缘智能”范式：不再先采集所有原始数据再回传处理，而是在采集设备端实时识别目标声学事件（濒危海鸟Scopoli Shearwater的叫声），仅记录有价值的数据或实时输出分类日志。 主要实验结果如何：该优化模型在真实数据集上达到91%的分类准确率（平衡准确率89%），内存占用仅约10kB，单次推理时间约20ms。论文未提供与其他具体基线模型的详细数值对比表格。 实际意义是什么：大幅降低了PAM系统的功耗和数据存储需求，使大规模、长时间、低成本的生态声学监测成为可能，并为其他领域的智能传感器开发提供了开源优化流程。 主要局限性是什么：论文摘要未明确说明，可能包括：模型仅针对单一物种的特定叫声，泛化能力未知；未讨论在复杂声学环境（如风雨声、其他动物声音干扰）下的鲁棒性；未提供完整固件的功耗实测数据。 🏗️ 模型架构 基于摘要描述，模型架构的详细信息有限。 ...