音频深度伪造检测

📄 Hanui: Harnessing Distributional Discrepancies for Singing Voice Deepfake Detection #音频深度伪造检测 #生成模型 #自监督学习 #音频分类 #鲁棒性 🔥 8.0/10 | 前10% | #音频深度伪造检测 | #生成模型 | #自监督学习 #音频分类 学术质量 5.8/7 | 选题价值 1.5/2 | 复现加成 0.7 | 置信度 高 👥 作者与机构 第一作者：未说明（论文标题后并列列出三位作者，无明确标注） 通讯作者：未说明 作者列表：Seyun Um（延世大学电气电子工程系）、Doyeon Kim（延世大学电气电子工程系）、Hong-Goo Kang（延世大学电气电子工程系） 💡 毒舌点评 亮点：将自编码器在异常检测中的“分布差异”思想巧妙地迁移到深度伪造检测，通过一个简单而深刻的假设（真实声音比伪造声音更难被自编码器准确重建）驱动整个模型设计，思路清晰且有效，泛化性能突出。 短板：整个框架依赖一个精心设计且训练好的自编码器，其计算和训练开销可能高于一些单阶段的判别模型；此外，方法对“伪造声音分布更简单”这一假设的有效性，可能依赖于当前主流伪造技术的水平，面对未来更复杂、更接近真实分布的伪造方法，其优势是否会减弱尚待验证。 🔗 开源详情 代码：是，论文明确提供了GitHub代码仓库链接：https://github.com/sam-0927/Hanui 模型权重：论文中未提及是否公开预训练模型权重。 数据集：论文使用的SingFake和CtrSVDD数据集是公开的，但作者说明因版权限制无法直接分发其重新下载的数据，建议读者自行从YouTube和Bilibili下载原始歌曲。 Demo：未提及。 复现材料：论文提供了相当详细的训练细节，包括优化器设置、学习率、训练轮次、batch size、损失函数权重等，以及完整的模型架构描述，有助于复现。 论文中引用的开源项目：论文提到了多个作为基线的开源工作或模型，如LFCC+ResNet [3], AASIST [12], wav2vec2 [15], wav2vec2+AASIST [14]，以及用于音频压缩的Descript Audio Codec [27]。 📌 核心摘要 要解决什么问题：现有歌唱语音深度伪造检测（SVDD）方法在面对未见过的歌手、音乐风格和语言时，泛化能力不足，性能下降明显。 方法核心是什么：提出名为Hanui的新框架，其核心思想源自异常检测：利用自编码器（AE）重建输入信号，然后通过判别器提取特征图来衡量原始信号与重建信号之间的分布差异。核心假设是：真实歌声的分布更复杂，因此其原始-重建差异大于伪造歌声的差异。 与已有方法相比新在哪里：不同于以往直接学习分类特征的方法，Hanui显式地建模并利用了真实与伪造信号在“可重建性”上的分布差异。具体创新包括：1）提出基于分布差异的SVDD新范式；2）采用两阶段训练（先训练仅用真实数据的自编码器，再训练用真实+伪造数据的检测器）；3）设计了基于多频段判别器中间特征图的检测器融合策略。 主要实验结果如何：在SingFake和CtrSVDD数据集上，Hanui取得了最优的等错误率（EER）。例如，在最挑战的未见条件T04（未见歌手、语言、风格）上，Hanui的EER为21.36%，相比最强基线wav2vec2+AASIST（34.18%）绝对降低了12.82个百分点，相对降低约37.5%。消融实验证实了分布差异假设（图2）和中间层融合策略的有效性。 实际意义是什么：该方法显著提升了在真实、复杂场景下（歌手、语言、风格均未知）检测伪造歌声的鲁棒性，对于构建可靠的内容安全系统具有直接应用价值。 主要局限性是什么：1）模型训练分为两个阶段，且需要训练多个判别器和检测器模块，整体计算成本可能较高；2）对“伪造声音分布更简单”这一核心假设的验证，依赖于当前生成模型的特性，其长期有效性有待观察；3）论文中未提及模型权重是否开源，且因版权限制无法分发训练数据，这限制了完全的复现。 🏗️ 模型架构 Hanui的整体架构如图1所示，主要由两个阶段、两大模块构成：自编码器（含判别器）和深度伪造检测器。 ...

📄 How to Label Resynthesized Audio: The Dual Role of Neural Audio Codecs in Audio Deepfake Detection #音频深度伪造检测 #数据集 #模型评估 #语音合成 ✅ 7.5/10 | 前25% | #音频深度伪造检测 | #数据集 | #模型评估 #语音合成 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Yixuan Xiao (斯图加特大学自然语言处理研究所) 通讯作者：未说明（论文未明确指出） 作者列表：Yixuan Xiao (斯图加特大学自然语言处理研究所)、Florian Lux (AppTek GmbH)、Alejandro Pérez-González-de-Martos (AppTek GmbH)、Ngoc Thang Vu (斯图加特大学自然语言处理研究所) 💡 毒舌点评 论文精准地抓住了“编解码器重合成音频既像好人又像坏人”这个痛点，并用一套严谨的实验给出了“看它心是为压缩而跳还是为合成而跳”的诊断思路，实用性拉满。不过，作者似乎更满足于揭示“病症”和提出“用药建议”，而对如何从根源上（即检测器架构层面）提升对这类模糊样本的鲁棒性，着墨甚少。 🔗 开源详情 代码：提供。论文中给出了GitHub仓库链接：https://github.com/XIAOYixuan/IMS-ADD/tree/codec-add，包含了训练脚本和代码库。 模型权重：未明确提及是否开源预训练的检测器权重。 数据集：公开。提供了两个获取途径：HuggingFace (https://huggingface.co/datasets/Flux9665/CodecDeepfakeDetection) 和 Zenodo (https://zenodo.org/records/17225924)。 Demo：未提及。 复现材料：提供了详细的训练超参数、数据增强策略、��据集划分统计等关键复现信息。 论文中引用的开源项目：引用了多个开源TTS系统和NAC模型作为攻击源，包括Llasa (XCodec2), MARS5 (EnCodec), CSM (Mimi), OpenAudio S1-mini (DAC), CosyVoice2/Chatterbox (S3Tokenizer)，以及检测器AASIST。 📌 核心摘要 本文针对音频深度伪造检测领域中神经音频编解码器（NAC）的双重角色问题展开研究。NAC既可用于音频压缩传输（产生编解码器重合成音频CoRS），又可作为语音合成系统的声码器（产生编解码器语音合成音频CoSG）。这使得训练检测器时面临困境：CoRS应标注为真实还是伪造？为解决此问题，本文构建了一个基于ASVspoof 5协议的扩展数据集CodecDeepfakeDetection，包含多种TTS系统（Llasa, MARS5等）和NACs（EnCodec, Mimi, DAC等）。核心创新在于系统性地评估了将CoRS标注为“真实”或“伪造”对不同检测器（X-AASIST, LWBN）性能的影响。实验发现，标注策略的有效性取决于NAC的设计目标：对于以压缩为导向的NAC（如EnCodec, DAC），将其重合成音频标注为伪造会导致检测器过度学习编解码器伪影，从而错误拒绝经该NAC压缩的真实音频；而对于以合成为导向的NAC（如Mimi），将其标注为伪造更有效。主要实验结果表明，未使用NAC数据增强的基线模型在面对混合了CoRS的测试集时，等错误率（EER）高达约40%，而采用合适的增强策略（对部分NAC作为真实数据）可将其显著降低约8-11个百分点。本文的实际意义在于为构建对编解码器技术演变更鲁棒的检测系统提供了明确的数据标注指南。主要局限性在于研究主要集中于分析和提供见解，而非提出一个全新的、能统一处理此类模糊性的检测模型。 ...

ICASSP 2026 - 音频深度伪造检测 共 29 篇论文 ← 返回 ICASSP 2026 总览 排名 论文 评分 分档 🥇 EchoFake: A Replay-Aware Dataset For Practical Speech Deepfa 8.5分 前25% 🥈 Dynamic Spectrogram Analysis with Local-Aware Graph Networks 8.5分 前10% 🥉 The Impact of Audio Watermarking on Audio Anti-Spoofing Coun 8.5分 前25% 4. Beyond Face Swapping: A Diffusion-Based Digital Human Benchm 8.1分 前25% 5. StreamMark: A Deep Learning-Based Semi-Fragile Audio Waterma 8.0分 前25% 6. Assessing the Impact of Speaker Identity in Speech Spoofing 8.0分 前25% 7. Subgraph Localization in the Subbands for Partially Spoofed 8.0分 前25% 8. On deepfake voice detection - It’s all in the presentation 8.0分 前25% 9. Dynamic Noise-Aware Multi Lora Framework Towards Real-World 8.0分 前25% 10. Hanui: Harnessing Distributional Discrepancies for Singing V 8.0分 前10% 11. Localizing Speech Deepfakes Beyond Transitions via Segment-A 8.0分 前25% 12. Discrete-Continuous Fusion With Adaptive Hierarchical Featur 8.0分 前10% 13. AVATAR: Audio-Visual Adaptive Fusion via Trained Agent Reinf 7.5分 前25% 14. Few-Shot Recognition of Audio Deepfake Generators using Grap 7.5分 前25% 15. Audio Deepfake Detection at the First Greeting: “Hi!” 7.5分 前25% 16. Combining SSL Speech Features, Contextual Transformers and M 7.5分 前25% 17. How to Label Resynthesized Audio: The Dual Role of Neural Au 7.5分 前25% 18. KAN We Make Models Simpler for Audio Deepfake Detection with 7.5分 前25% 19. Robust Deepfake Audio Detection via Multi-Level Intermediate 7.5分 前25% 20. AI-Generated Music Detection in Broadcast Monitoring 7.0分 前50% 21. Leveraging Large Multimodal Models for Audio-Video Deepfake 7.0分 前25% 22. A Superb-Style Benchmark of Self-Supervised Speech Models fo 7.0分 前25% 23. Understanding the Strengths and Weaknesses of SSL Models for 7.0分 前50% 24. Towards Data Drift Monitoring for Speech Deepfake Detection 7.0分 前25% 25. CompSpoof: A Dataset and Joint Learning Framework for Compon 7.0分 前25% 26. MSCT: Differential Cross-Modal Attention for Deepfake Detect 6.5分 前10% 27. Auxiliary Multi-Label Training For Improving the Robustness 6.5分 前50% 28. Audio-Visual Deepfake Generation and Detection: An Explorato 6.5分 前25% 29. Disentangled Authenticity Representation for Partially Deepf 6.5分 前25% 📋 论文详情 🥇 EchoFake: A Replay-Aware Dataset For Practical Speech Deepfake Detection 🔥 8.5/10 | 前25% | #音频深度伪造检测 | #数据集 | #语音伪造检测 #重放攻击 ...

📄 KAN We Make Models Simpler for Audio Deepfake Detection with Kolmogorov–Arnold Networks? #音频深度伪造检测 #自监督学习 #KAN ✅ 7.5/10 | 前25% | #音频深度伪造检测 | #自监督学习 | #KAN 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 高 👥 作者与机构 第一作者：Hoan My Tran (Univ Rennes, CNRS, IRISA, Lannion, France) 通讯作者：David Guennec (Univ Rennes, CNRS, IRISA, Lannion, France), Aghilas Sini (Univ Le Mans, LIUM, Le Mans, France) 作者列表：Hoan My Tran†, Aghilas Sini∗, David Guennec†, Arnaud Delhay†, Damien Lolive‡, Pierre-François Marteau‡ †: Univ Rennes, CNRS, IRISA, Lannion, France ∗: Univ Le Mans, LIUM, Le Mans, France ‡: Univ Bretagne Sud, CNRS, IRISA, Vannes, France 💡 毒舌点评 亮点：这篇论文的核心价值在于其“反常识”的结论——在强大的预训练模型（XLS-R）面前，复杂的下游分类器可能是不必要的，一个简单的全连接层（甚至只有2K参数）就能达到极具竞争力的性能，这为轻量化部署提供了重要思路。短板：虽然论文展示了KAN在平均EER上的优势，但其提升在部分数据集（如FoR）上并不一致，且论文缺乏对“为何KAN能更有效利用高维SSL特征”这一核心机制的深入理论或可视化分析，更像是一次成功的实验观察而非深刻的机理解释。 ...

📄 Leveraging Large Multimodal Models for Audio-Video Deepfake Detection: A Pilot Study #音频深度伪造检测 #多模态模型 #监督微调 #跨模态 ✅ 7.0/10 | 前25% | #音频深度伪造检测 | #多模态模型 | #监督微调 #跨模态 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 -0.5 | 置信度 高 👥 作者与机构 第一作者：Songjun Cao（腾讯优图实验室） （注：论文中注明与Yuqi Li贡献均等） 通讯作者：未说明 作者列表：Songjun Cao¹, Yuqi Li¹, ², Yunpeng Luo¹, Jianjun Yin², Long Ma¹ （¹ 腾讯优图实验室， ² 复旦大学） 💡 毒舌点评 亮点：将“音视频深度伪造检测”巧妙地重塑为“多模态问答任务”，利用现成的顶级多模态大模型（Qwen 2.5 Omni）作为骨架，通过两阶段微调迅速达到了领域内顶尖水平，证明了LMM在多媒体取证中的巨大潜力。 短板：作为一篇方法论论文，其核心创新（SFT LMM）对基础模型架构的依赖性极强，且未提供任何开源资源（代码、模型、训练脚本），使得“复现即正义”的学术圈同仁难以验证和跟进，更像是一个概念验证（Pilot Study）。 🔗 开源详情 代码：论文中未提及代码仓库链接。 模型权重：未提及是否公开微调后的AV-LMMDetect模型权重。 数据集：论文使用了公开数据集FakeAVCeleb和MAVOS-DD，并给出了引用和部分划分信息（如FakeAVCeleb使用70%/30%划分）。 Demo：未提及在线演示。 复现材料：未提供训练细节、配置、检查点或附录说明。 引用的开源项目：论文中明确引用了Qwen 2.5 Omni作为基座模型，以及MAVOS-DD、FakeAVCeleb等数据集。 开源计划：论文中未提及开源计划。 📌 核心摘要 要解决的问题：现代生成模型制造的音视频深度伪造内容日益逼真，现有的多模态检测器多为任务特定的小模型，存在泛化能力弱、跨域性能差的问题。 方法核心：提出AV-LMMDetect，首次将监督微调的大型多模态模型（基于Qwen 2.5 Omni）用于端到端的音视频深度伪造检测。方法将检测任务重新定义为一个二元分类问答：“这个视频是真实的还是伪造的？”。训练采用两阶段策略：第一阶段通过LoRA对语言模型部分进行轻量级对齐；第二阶段解冻视觉和音频编码器进行全量微调，以最大化跨模态协同效应。 与已有方法相比新在哪里：不同于传统的小型任务特定模型（如CNN/Transformer流水线）或仅处理单模态的音频LLM，本工作首次证明了经过SFT的通用大型多模态模型（LMM）能够作为统一的检测器，直接处理原始的音视频流，并展现出更强的跨模态推理和泛化能力。 主要实验结果：在FakeAVCeleb数据集上，AV-LMMDetect取得了98.02%的准确率和99.2%的AUC，与当前SOTA方法AVFF（98.6%准确率）性能相当。在更具挑战性的多语言MAVOS-DD数据集上，该方法在“开放集完整”场景下达到了85.09%的准确率和0.96的mAP，显著优于所有对比方法，树立了新的SOTA。消融实验表明，两阶段训练策略缺一不可。 实际意义：为多媒体安全领域提供了一种新的、基于大模型基座的通用检测范式，有望提升检测器对未知生成模型和跨语言场景的泛化能力，维护媒体内容的真实性。 主要局限性：该方法完全依赖于特定的基座大模型（Qwen 2.5 Omni），其性能受限于该模型的能力边界；训练过程可能计算成本较高；论文未提供开源实现，限制了成果的快速验证与应用。 🏗️ 模型架构 AV-LMMDetect的整体架构直接建立在已有的大型多模态模型Qwen 2.5 Omni之上。其核心思路是将音视频深度伪造检测重新表述为一个视觉问答（VQA）任务。 ...

📄 Localizing Speech Deepfakes Beyond Transitions via Segment-Aware Learning #音频深度伪造检测 #数据增强 #自监督学习 #语音安全 #鲁棒性 🔥 8.0/10 | 前25% | #音频深度伪造检测 | #数据增强 | #自监督学习 #语音安全 学术质量 7.5/7 | 选题价值 0.5/2 | 复现加成 0.0 | 置信度 高 👥 作者与机构 第一作者：Yuchen Mao 通讯作者：Yanmin Qian 作者列表：Yuchen Mao (Auditory Cognition and Computational Acoustics Lab, MoE Key Lab of Artificial Intelligence, AI Institute, School of Computer Science, Shanghai Jiao Tong University), Wen Huang (同Yuchen Mao的单位), Yanmin Qian (上海交通大学计算机科学学院 听觉认知与��算声学实验室，教育部人工智能重点实验室，AI学院； VUI Labs) 💡 毒舌点评 亮点：论文精准地指出了现有方法过度依赖“过渡区域伪影”的“捷径学习”短板，并提出了简洁有效的“段感知学习”框架，通过位置监督和跨段混合，强制模型理解伪造内容本身，显著提升了在最具挑战性的“中间段”的检测能力和跨数据集泛化性能。短板：尽管实验充分，但对模型容量（如Conformer块的具体参数）、训练硬件和时长的描述不够详尽，且未公开模型权重，这为学术界和工业界的复现与直接应用设置了一定门槛。 ...

📄 MSCT: Differential Cross-Modal Attention for Deepfake Detection #音频深度伪造检测 #注意力机制 #音视频 #多模态模型 ✅ 6.5/10 | 前10% | #音频深度伪造检测 | #注意力机制 | #音视频 #多模态模型 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 -1.0 | 置信度 高 👥 作者与机构 第一作者：Fangda Wei（北京理工大学） 通讯作者：Shenghui Zhao（北京理工大学，有星号标记） 作者列表：Fangda Wei（北京理工大学），Miao Liu（北京理工大学），Yingxue Wang（中国电子技术标准化研究院），Jing Wang（北京理工大学），Shenghui Zhao（北京理工大学），Nan Li（中国电子技术标准化研究院） 💡 毒舌点评 论文提出的“差分跨模态注意力”（DCA）模块设计巧妙，其通过注意力矩阵相减来增强模型对伪造内容敏感性的思路，确实指出了传统注意力机制在伪造检测任务中可能存在的目标冲突问题，是一个不错的洞察。然而，如此强调性能提升的论文，却在开源复现信息上“一毛不拔”，连基础的代码仓库或超参数都不公开，这无异于在沙滩上画出宏伟蓝图却不提供任何工具，对推动整个领域的可复现进步毫无贡献。 🔗 开源详情 代码：论文中未提及代码仓库链接。 模型权重：未提及公开模型权重。 数据集：使用公开数据集FakeAVCeleb，但论文中未说明获取方式（通常可公开获取）。 Demo：未提供在线演示。 复现材料：未提供详细的训练配置、超参数、检查点或附录说明。 论文中引用的开源项目：引用了DLIB（用于人脸检测）、Res2Net、CBAM、Wavelet Convolution等工具或模型，但未说明是否基于其开源代码。 总体开源计划：论文中未提及任何开源计划。 📌 核心摘要 要解决的问题：现有音频-视觉深度伪造检测方法主要依赖跨模态对齐，但传统的跨模态注意力机制可能与对齐损失目标冲突（对伪造内容不敏感），且缺乏有效的多尺度时间特征提取。 方法核心：提出多尺度跨模态Transformer编码器（MSCT），包含两个核心模块：差分跨模态注意力（DCA） 和 多尺度自注意力（MSSA）。DCA通过计算自注意力矩阵与跨模态注意力矩阵的差值，增强对伪造线索的关注。MSSA使用不同尺度的卷积处理Key矩阵，以整合相邻嵌入的多尺度时间信息。 与已有方法相比新在哪里：与传统跨模态注意力相比，DCA能更好地适配基于对齐损失的伪造检测任务；与标准自注意力相比，MSSA提供了更丰富的时间尺度感知能力，弥补了帧级特征提取的不足。 主要实验结果：在FakeAVCeleb数据集上，该方法取得了98.75%的准确率（ACC） 和 98.83%的AUC，显著优于表1中列出的所有基线方法，包括ACC为94.05%的MRDF-CE和96.30%的BusterX。消融实验（表2）表明，DCA模块（+1.25% ACC）比MSSA模块（+0.25% ACC）带来更大的性能增益。T-SNE可视化（图5）显示，本方法能更好地区分类别。 实际意义：提升了音视频深度伪造检测的准确性和鲁棒性，为多媒体内容安全提供了更强大的技术工具。 主要局限性：实验仅在单一数据集FakeAVCeleb上进行，缺乏跨数据集泛化性验证；未提供代码和详细复现参数，可复现性极差；与最新方法BusterX的对比缺少AUC指标。 🏗️ 模型架构 本文提出的多尺度跨模态Transformer编码器（MSCT）框架如图2所示，包含单模态特征提取和多模态特征融合两大模块。 ...

📄 On deepfake voice detection - It’s all in the presentation #音频深度伪造检测 #数据增强 #自监督学习 #预训练 #鲁棒性 🔥 8.0/10 | 前25% | #音频深度伪造检测 | #数据增强 | #自监督学习 #预训练 学术质量 6.0/7 | 选题价值 2.0/2 | 复现加成 0.0 | 置信度 高 👥 作者与机构 第一作者：未说明（作者列表按字母顺序排列） 通讯作者：未说明 作者列表：Héctor Delgado（Microsoft）、Giorgio Ramondetti（Microsoft）、Emanuele Dalmasso（Microsoft）、Gennady Karvitsky（Microsoft）、Daniele Colibro（Microsoft）、Haydar Talib（Microsoft） 💡 毒舌点评 论文最大的亮点在于它跳出技术细节，直指领域痛点：当前研究普遍在“无菌实验室”里训练模型，却指望它们能解决“菜市场”里真实发生的诈骗，通过精心设计的实验有力地证明了“数据呈现方式”比“模型规模”更能决定实战效果。但短板也十分明显，作为一个强调“现实世界有效性”的工业界工作，却吝于公开核心代码、模型和训练细节，这极大地削弱了其主张的可复现性和社区推动潜力，让人怀疑其方法论推广的诚意。 🔗 开源详情 代码：论文中未提及代码链接。仅提供了一个用于测试协议的GitHub仓库名称，但未给出具体URL。 模型权重：未提及公开任何模型权重。 数据集：部分使用了公开数据集（ASVspoof， MLS， Switchboard等），但本文构建的核心新数据集（Presented类别和Realworld的Fraud Academy数据集）未公开。 Demo：未提供在线演示。 复现材料：论文详细描述了训练策略、超参数和硬件配置，提供了Table 1和Table 2的详细数据。然而，缺失模型权重和代码，使得从零复现变得极其困难。 引用的开源项目：论文在方法和数据部分引用了多个开源项目，包括： TTS引擎：ElevenLabs， play.ht， OpenAI Voice Engine， Mars5， YourTTS 数据集：ASVspoof 2019/5， MLS English， Switchboard， VoxCeleb， Fisher Spanish等（具体见参考文献） 模型/工具：WavLM (预训练模型)， HIFI-GAN/WaveGrad/WaveNet (声码器)， Encodec/Vocos (编解码器)， RawBoost (数据增强) 📌 核心摘要 这篇论文指出，当前深度伪造语音检测领域的研究数据集和方法过于理想化（使用原始纯净音频），导致训练出的模型难以泛化到真实世界通过电话等信道传输的伪造语音。为解决此问题，作者提出了一个完整的“欺骗攻击序列”框架，不仅包含深度伪造语音生成，还关键性地纳入了通过扬声器播放或直接注入电话的“呈现”阶段。基于此，他们构建了包含不同“呈现”方式的新型训练数据集（Presented）和一个完全保留真实场景、未用于训练的“真实世界”测试集（Fraud Academy）。实验表明，在训练中加入“呈现”数据，能显著提升模型在真实场景下的性能：在更稳健的实验室设置中准确率提升39%，在真实世界基准上提升57%。此外，论文证明，优化数据集带来的性能提升，比使用更大、更昂贵的SOTA模型更为重要。主要的局限性是，所提出的轻量级模型在处理扬声器播放场景时性能仍有不足，且整体研究未开源核心代码与权重。 ...

📄 Robust Deepfake Audio Detection via Multi-Level Intermediate Feature Fusion #音频深度伪造检测 #特征融合 #自监督学习 #鲁棒性 ✅ 7.5/10 | 前25% | #音频深度伪造检测 | #特征融合 | #自监督学习 #鲁棒性 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 中 👥 作者与机构 第一作者：Jinpeng Zhao（中山大学计算机科学与工程学院） 通讯作者：Peijia Zheng（中山大学计算机科学与工程学院） 作者列表：Jinpeng Zhao, Jian Zhao, Yufei Zhou, Peijia Zheng†, Yusong Du（中山大学计算机科学与工程学院） 💡 毒舌点评 亮点在于，论文非常务实地通过一个轻量级（仅增加0.002%计算量）的MIFF模块，有效挖掘了现有强大骨干网络（XLSR-Mamba）中被忽视的中间层信息，实现了“小改进，大收益”。短板是，该工作本质上是将成熟的注意力机制（SE block）应用于特定模型（Mamba）的中间层特征融合，创新深度有限，更像是一个有效但非突破性的工程优化。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：未提及。 数据集：使用公开的ASVspoof 2019 LA、ASVspoof 2021 LA/DF和In-The-Wild数据集，未提及新的数据集。 Demo：未提及。 复现材料：论文提供了较为详细的实验设置（数据集、增强方法、优化器、学习率、batch size等）、超参数（Mamba层数、缩减比、特征维度）和消融实验细节，为复现提供了良好基础，但未提供完整的配置文件或脚本。 论文中引用的开源项目： XLSR-Mamba [7]：本文的主要基线模型。 XLS-R [2, 3, 6]：作为前端特征提取器。 Mamba [8]：作为后端骨干网络。 RawBoost [19]：用于数据增强。 Squeeze-and-Excitation Networks [17]：MIFF模块中注意力机制的灵感来源。 其他对比方法（AASIST [4], Conformer [5], SLS [6]等）。 📌 核心摘要 本文针对现有深度伪造音频检测器（如XLSR-Mamba）主要依赖最终层特征、导致中间层判别性信息丢失的问题，提出了多级中间特征融合模块。该模块应用于双列双向Mamba网络的每个方向，通过引入Squeeze-and-Excitation机制，自适应地计算并加权聚合所有Mamba层的输出特征，并与最终层的残差输出融合，从而生成一个更全面、更具判别力的表征用于分类。实验表明，在ASVspoof 2021 DF和In-The-Wild数据集上，该方法分别取得了1.68%和5.66%的EER，相比基线XLSR-Mamba（1.88%和6.71%）实现了10.6%和15.6%的相对误差降低，尤其在应对自回归神经声码器生成的伪音时表现突出。该研究证明了多层次特征融合对于增强检测模型鲁棒性的有效意义。主要局限性在于方法未在更多样化的攻击类型或跨语言场景下进行验证，且依赖于特定的XLSR前端和Mamba后端组合。 ...

📄 StreamMark: A Deep Learning-Based Semi-Fragile Audio Watermarking for Proactive Deepfake Detection #音频深度伪造检测 #端到端 #鲁棒性 #数据集 🔥 8.0/10 | 前25% | #音频深度伪造检测 | #端到端 | #鲁棒性 #数据集 学术质量 6.5/7 | 选题价值 1.5/2 | 复现加成 0.8 | 置信度 高 👥 作者与机构 第一作者：Zhentao Liu（EPFL, Switzerland） 通讯作者：未说明 作者列表：Zhentao Liu（EPFL, Switzerland）、Milos Cernak（Logitech Europe, Switzerland） 💡 毒舌点评 这篇论文巧妙地将图像领域的“半脆弱水印”概念移植到音频，并精准定义了“良性”与“恶意”操作，为应对深度伪造提供了比传统鲁棒水印更聪明的“主动告警”方案，思路值得称赞。然而，其将所有深度伪造攻击简化为“变调”这一单一操作进行模拟，失真层的设计略显“偷懒”，可能无法完全覆盖未来更复杂的合成攻击（如更自然的音色替换或内容编辑），削弱了结论的绝对说服力。 🔗 开源详情 代码：提供了代码仓库链接：https://github.com/L1uZhentao/deepfake_benchmark 模型权重：论文中未提及公开预训练模型权重。 数据集：论文开源了用于评估的深度伪造基准测试集（Deepfake Benchmark），作为代码仓库的一部分发布。 Demo：未提及。 复现材料：提供了充分的训练细节，包括数据集（LibriSpeech子集）、模型参数量、损失函数公式与权重、优化器超参数（Adam，β值，学习率）、训练硬件（2x RTX 2080），这为复现提供了良好基础。 论文中引用的开源项目：未提及依赖的其他开源工具或模型。 总结：论文在可复现性方面表现良好，开源了关键的数据和代码，但缺少现成的模型权重。 📌 核心摘要 要解决什么问题：现有的被动深度伪造音频检测方法面临泛化能力差、易被对抗攻击绕过、难以区分良性AI处理（如降噪）与恶意伪造的困境。传统鲁棒水印在伪造后仍能提取，反而无法证明音频已被篡改。 方法核心是什么：提出StreamMark，一种基于深度学习的半脆弱音频水印系统。其核心是设计一个Encoder-Distortion-Decoder架构，其中失真层包含并行的良性变换（如裁剪、加噪）和恶意变换（如变调，模拟音色/内容篡改）。通过复合损失函数训练，使水印在经历良性操作后仍可恢复，但在经历语义篡改的恶意操作后无法恢复（准确率降至随机水平）。 ...