Vortex: Efficient and Programmable Sparse Attention Serving for AI Agents

📄 Vortex: Efficient and Programmable Sparse Attention Serving for AI Agents #大语言模型 8.9/10 | 创新 1.6/2 | 严谨 1.3/1.5 | 实验 1.5/1.5 | 清晰 1/1 | 影响 0.6/1.5 | 开源 0.9/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 🔥 8.9/10 | 前25% | #大语言模型 | #大语言模型 | arxiv 👥 作者与机构 Zhuoming Chen, Xinrui Zhong, Qilong Feng, Ranajoy Sadhukhan, Yang Zhou, Michael Qizhe Shieh, Zhihao Jia, Beidi Chen Carnegie Mellon University, Rice University, Singapore National University ...

2026-06-05 · 更新于 2026-08-03 · 2 min · 250 words

语音/音乐/音频论文速递 2026-06-05

语音/音乐/音频论文速递 2026-06-05 共分析 47 篇论文 ⚡ 今日概览 📥 抓取 47 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 11篇 ███████████ #语音合成 6篇 ██████ #语音情感识别 3篇 ███ #大语言模型 2篇 ██ #语音增强 2篇 ██ #说话人识别 2篇 ██ #流式处理 1篇 █ #音频编码 1篇 █ 📊 论文评分排行榜(47 篇,按分数降序) 排名 论文 总分 分档 主任务 🥇 Audio Interaction Model 9.8分 前50% #流式处理 🥈 USAD 2.0: Scaling Representation Distillation for Unive 9.0分 前25% #音频编码 🥉 M2S-AVSR: Modality-aware Multi-view Self-supervised Rep 9.0分 前25% #语音识别 4. Vortex: Efficient and Programmable Sparse Attention Ser 8.9分 前25% #大语言模型 5. UniVoice: A Unified Model for Speech and Singing Voice 8.7分 前25% #语音合成 6. Ouvia: A User-centered Framework for Measuring Usabilit 8.6分 前25% #语音翻译 7. Age-Aware Adapter Tuning for Children's Speech Reco 8.4分 前25% #语音识别 8. MCBench: A Multicontext Safety Assessment Benchmark for 8.4分 后50% #语音识别 9. SuperMemory-VQA: An Egocentric Visual Question-Answerin 8.4分 前25% #基准测试 10. GLASS: GRPO-Trained LoRA for Acoustic Style Steering in 8.2分 前25% #语音合成 11. A Model of Multi-turn Human Persuadability Using Probab 8.2分 前50% - 12. Learning Emotion-discriminative Representations for Zer 8.1分 前25% #语音情感识别 13. FORTE: FOL-guided Optimal Refinement for Text-audio rEt 8.1分 前25% #参数高效微调 14. FiLM-Based Speaker Conditioning of a SpeechLLM for Path 8.0分 前50% #语音识别 15. Task-Vector Arithmetic for Emotional Expressivity Contr 7.9分 前25% #语音合成 16. An Ultra-Low-Bitrate Neural Speech Codec with Plain-to- 7.7分 前25% #语音合成 17. Exploring LLMs for South Asian Music Understanding and 7.7分 前50% #音乐生成 18. SB-RF: Schrödinger Bridge Rectified Flow for One-Step R 7.6分 前25% #语音增强 19. nnAudio 2: Overcoming Dynamic Compilation Barriers and 7.5分 前50% #开源工具 20. Beyond Waveform Robustness: Robust Feature-Vocoder Adve 7.5分 前25% #语音识别 21. FoeGlass: Simple In-Context Learning Is Enough for Red 7.5分 前25% #音频生成 22. ProSarc: Prosody-Aware Sarcasm Recognition Framework vi 7.5分 前25% #语音情感识别 23. Probing Spatial Structure in Pretrained Audio Represent 7.4分 前25% - 24. Forgive or forget: Understanding the context of hate in 7.4分 前50% #音频检索 25. SpeechJBB: Probing Safety Alignment and Comprehension i 7.3分 前25% #语音识别 26. VoCodec: A Low-bitrate Streamable Neural Speech Codec w 7.2分 前50% #语音编码 27. F3-Tokenizer: Taming Audio Autoencoder Latents for Unde 7.2分 前25% #语音合成 28. Beyond WER: A Paired Acoustic Stress Test for Ambient C 7.1分 前50% #语音识别 29. InfoShield: Privacy-Preserving Speech Representations f 7.1分 前50% - 30. Multi-task Learning is Not Enough: Representational Ent 6.9分 前50% #语音识别 31. Sound Effects Dataset Unification With the Universal Ca 6.9分 前50% #音频分类 32. To Be Multimodal or Not to Be: Query-Adaptive Audio-Vis 6.8分 前50% #说话人识别 33. SHALA-LLM: Smartly Handling Ambiguous Labels in Alignin 6.8分 前50% #语音情感识别 34. SagnacAssisted Enhanced OTDR for Distributed Acoustic S 6.6分 前50% #信号处理基础 35. Domain-Aware Mispronunciation Detection and Diagnosis U 6.6分 前50% #图神经网络 36. CoSTA: Cognitive-State-Conditioned TTS Data Augmentatio 6.5分 前50% #语音合成 37. Beyond Text Following: Repairable Arbitration Reversals 6.4分 前50% #音频问答 38. Enhancing Audio Captioning with Auxiliary AudioSet Sema 6.3分 前50% - 39. Do speech foundation models perceive speaker similarity 6.3分 前50% #说话人识别 40. Efficient Punctuation Restoration via Weighted Lookahea 6.3分 前50% #大语言模型 41. Automatic Labelling of Speech Translation Errors 6.1分 前50% #语音识别 42. Towards Truly Multilingual ASR: Generalizing Code-Switc 5.9分 前50% #语音识别 43. An ERP Study on Recursive Locative Processing in Mandar 5.9分 前50% - 44. Multilingual Detection of Alzheimer's Disease from 5.7分 后50% #迁移学习 45. DBHN-Net: Dual-Branch Hybrid Neural Network For Low-Com 5.4分 前25% #语音增强 46. Beyond Generative Decoding: Discriminative Hidden-State 5.3分 前50% #多模态模型 47. Revisiting Lexicon Evaluation in Unsupervised Word Disc 1.0分 前25% #语音识别 📋 论文列表 🥇 Audio Interaction Model 9.8/10 | 创新 1.5/2 | 严谨 1.3/1.5 | 实验 1.4/1.5 | 清晰 1.0/1 | 影响 1.5/1.5 | 开源 1.1/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 ...

2026-06-05 · 更新于 2026-08-03 · 28 min · 5851 words

A Second-Order Cepstral Signature of Contact-Vibration Sounds Reproduced by Laptop Loudspeakers: A Synthetic Case Study

📄 A Second-Order Cepstral Signature of Contact-Vibration Sounds Reproduced by Laptop Loudspeakers: A Synthetic Case Study #倒谱分析 #信号处理基础 4.8/10 | 创新 1.5/2 | 严谨 1/1.5 | 实验 0.5/1.5 | 清晰 1/1 | 影响 0.3/1.5 | 开源 0/1.5 | 复现 0.2/0.5 | 工程 0.3/1.5 📝 4.8/10 | 后50% | #信号处理基础 | #倒谱分析 | arxiv 👥 作者与机构 Jim Salsman, TalkNicer, Inc. 💡 毒舌点评 一篇非常初步的、探索性的合成案例研究。其核心思想(用“二阶倒谱”描述接触振动声)是新颖的,但实现方式极其简化,验证严重不足。论文花费大量篇幅构建并描述了一个六阶段的合成信号链,但这本质上是一个“自证预言”的玩具模型——你精心设计了每一步,然后去验证你预先设定的结论。整个分析缺乏任何真实世界的验证,使得所有结论都停留在“如果我的模型正确,那么……”的层面。作者诚实地列出了局限性,但这也正说明了本文目前只能算一个技术备忘录,远未达到发表级别。创新性虽有,但被其薄弱的实验基础和几乎为零的工程实用性所抵消。 📌 核心摘要 本文提出使用二阶倒谱(即对一阶倒谱再次进行倒谱分析)作为一种探索性描述符,来刻画通过笔记本电脑扬声器播放的手机振动接触声音的感知独特性。作者构建了一个包含六个阶段的合成信号链模型(机械产生、表面/空气传播、麦克风采集、编码/解码、笔记本播放、再录制/后处理),并在此合成数据上进行分析。结果显示,一阶倒谱的周期性在整个信号链中得以保留,而更清晰的二阶倒谱双峰性结构在机械源阶段(阶段1)和笔记本扬声器播放阶段(阶段5)最为明显。作者将此结果解释为支持一个假设:笔记本电脑的播放可能重新强调了潜在于接触振动中的、在中间录制和编码形式中表达不够清晰的周期性结构。 🔗 开源详情 代码:未提供。论文声明使用ChatGPT 5.5协助生成代码,但未公开。 模型权重:未提及。 数据集:合成数据。论文中称“合成数据……可按需提供”,但未提供下载链接或访问方式。 Demo:未提及。 复现材料:未提及。 论文中引用的开源项目:未提及。 🏗️ 方法概述和架构 本文的核心方法是构建一个六阶段的合成信号链,并对每个阶段的输出信号进行一阶和二阶倒谱分析。 ...

2026-06-04 · 更新于 2026-08-03 · 2 min · 260 words

Channel-Oriented Design for EEG-to-Music Reconstruction

📄 Channel-Oriented Design for EEG-to-Music Reconstruction #音乐信息检索 #音频生成 #自监督学习 #对比学习 #数据增强 7.7/10 | 创新 1.8/2 | 严谨 1.4/1.5 | 实验 1.3/1.5 | 清晰 1/1 | 影响 0.9/1.5 | 开源 0/1.5 | 复现 0.5/0.5 | 工程 0.8/1.5 ✅ 7.7/10 | 前25% | #音乐生成 | #自监督学习 | #音乐信息检索 #音频生成 | arxiv 👥 作者与机构 Jiaxin Qing (UC Berkeley), Junwei Lu (Harvard University), Lexin Li (UC Berkeley) 💡 毒舌点评 这篇论文在脑机接口的细分赛道——EEG-to-Music重建上,精准地抓住了“通道信息早期混合”这个痛点,并提出了一个逻辑自洽、组件清晰的解决方案。理论分析虽简化,但为设计选择提供了合理的数学依据,比单纯喊口号强。实验部分,与当前SOTA基础模型的对比很到位,证明了专用设计优于通用预训练模型在特定任务上的表现。可解释性分析更是点睛之笔,将EEG的通道注意力与听觉处理脑区关联,提升了工作的可信度和价值。不过,其“对齐+固定生成器”的管道设计虽能隔离贡献,但也限制了对生成阶段优化潜力的探索。在通用性方面,模型对电极配置的固定依赖是一个明显的实用化短板。总的来说,这是一篇扎实、聚焦、有洞察力的工作,配得上顶会水准。 📌 核心摘要 本文研究了从EEG信号重建音乐这一具有挑战性的任务。作者指出,现有方法中过早地混合通道信息会破坏EEG中微弱但有区分度的信号。为此,提出了一个“通道导向”的设计框架,其核心包含三个组件:通道级标记化(将每个电极视为独立标记以保留空间局部证据)、通道级多视图自蒸馏(强制模型在不同时间裁剪和随机通道子集之间保持一致性,以学习鲁棒且分布式的表示)和通道级数据增强(通过结构化的通道丢弃提高对噪声和缺失电极的不变性)。这些组件被集成到一个编码-对齐-解码的管道中。从理论上,论文分析了通道级遮蔽相比块级遮蔽在何种条件下能降低跨类重叠。在实验上,通过与多种基线方法(包括专门的EEG2Mel和通用的EEG基础模型LaBraM、EEGPT、CBraMod)进行系统对比,在语义重建(CLAP score 0.683)和嵌入级对齐(50-way 识别准确率0.487)指标上取得了最佳性能。消融研究验证了每个组件的贡献,可解释性分析揭示了与听觉处理相关的通道注意力模式。 ...

2026-06-04 · 更新于 2026-08-03 · 2 min · 382 words

CleanCodec: Efficient and Robust Speech Tokenization via Perceptually Guided Encoding

📄 CleanCodec: Efficient and Robust Speech Tokenization via Perceptually Guided Encoding #语音编码 #语音合成 #语音识别 #对比学习 8.8/10 | 创新 1.5/2 | 严谨 1.3/1.5 | 实验 1.3/1.5 | 清晰 1/1 | 影响 1.3/1.5 | 开源 0.5/1.5 | 复现 0.5/0.5 | 工程 1.4/1.5 🔥 8.8/10 | 前25% | #语音编码 | #自监督学习 | #语音合成 #语音识别 | arxiv 👥 作者与机构 Eugene Kwek (Pennsylvania State University), Feng Liu (Drexel University), Rui Zhang (Pennsylvania State University), Wenpeng Yin (Pennsylvania State University)。 ...

2026-06-04 · 更新于 2026-08-03 · 4 min · 720 words

DetectZoo: A Unified Toolkit for AI-Generated Content Detection Across Text, Audio, and Image Modalities

📄 DetectZoo: A Unified Toolkit for AI-Generated Content Detection Across Text, Audio, and Image Modalities #多模态模型 #自监督学习 #数据集 #基准测试 9.3/10 | 创新 1.5/2 | 严谨 1.2/1.5 | 实验 1.5/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.3/1.5 🔥 9.3/10 | 前25% | #多模态模型 | #自监督学习 | #数据集 #基准测试 | arxiv 👥 作者与机构 Sajad Ebrahimi, Nima Jamali, Bardia Shirsalimian, Kelly McConvey, Wentao Zhang, Jalehsadat Mahdavimoghaddam, Maksym Taranukhin, Maura Grossman, Vered Shwartz, Yuntian Deng, Ebrahim Bagheri University of Toronto, University of Waterloo, Toronto Metropolitan University, University of British Columbia, Vector Institute ...

2026-06-04 · 更新于 2026-08-03 · 2 min · 257 words

Differentiable Articulatory Copy-Synthesis of Biphonic Singing

📄 Differentiable Articulatory Copy-Synthesis of Biphonic Singing #音频生成 7.1/10 | 创新 1.5/2 | 严谨 1.3/1.5 | 实验 1.2/1.5 | 清晰 1/1 | 影响 1/1.5 | 开源 0.2/1.5 | 复现 0.5/0.5 | 工程 0.4/1.5 ✅ 7.1/10 | 前50% | #音频生成 | #音频生成 | arxiv 👥 作者与机构 论文未明确列出作者所属机构。论文脚注显示工作得到了西班牙经济与竞争力部(Ministry of Economy and Competitiveness of Spain)及Santander基金会的支持。 💡 毒舌点评 这篇论文很扎实,但也有明显的“精致的小作坊”气质。它精准地解决了一个非常小众但极具声学美感的“图瓦喉音”合成问题,这种专注值得称赞。然而,其方法的核心假设——舌下第二声源——就像在物理学大厦里塞进一个“薛定谔的声源”,虽然消融实验证明其有效,但其生理合理性始终是个“房间里的大象”,作者在讨论中试图轻描淡写地将其称为“声学抽象”,这多少有点回避核心争议。实验规模(20个样本)对于“验证”一个模型来说过于袖珍,更像是一个概念验证(PoC)的展示,离稳健的泛化性证明还有距离。最令人扼腕的是其离线优化成本(处理5秒音频要30分钟),这使得整个“可微分建模”的炫酷光环瞬间被现实应用的门槛拉回地面。总的来说,这是一篇技术实现精巧、写作规范的领域应用论文,但离改变游戏规则的突破性工作还有一步之遥——这一步就是规模和效率。 📌 核心摘要 本文提出了一种可微分的关节复制合成方法,用于图瓦双声部歌唱中的“Sygyt”技巧。核心模型是一个扩展的Kelly-Lochbaum波导模型,集成了三项关键创新:1)一个舌下第二声源,用于建模双声源现象;2)基于三次B样条的声道参数化,以实现平滑且物理合理的声道形状控制;3)空间可变的可学习阻尼,用于精细调控共振峰带宽。该模型通过端到端梯度下降优化,以最小化合成音频与目标音频的差异。实验在两个独立的Sygyt数据集(20个片段,5位歌手,10个音高)上进行,与传统的关节链基线模型和无物理约束的DDSP基线模型进行比较。结果表明,所提的B样条模型在对数谱距离(LSD)上相对关节链基线降低了30-38%,改进主要集中于1-3kHz的泛音区域。倒谱包络分析显示,模型能更准确地再现Sygyt产生的共振峰合并结构。消融实验表明,舌下第二声源是性能提升的主要贡献者。模型学习到的声道轮廓与已知的Sygyt发声机制一致,具有声学可解释性。 🔗 开源详情 代码:论文中未提及明确的官方代码仓库链接(如GitHub)。论文指出模型使用JAX实现,并基于了开源项目VocalTrax,但未提供其改进版本的具体代码地址。 模型权重:论文中未提及任何预训练模型权重的下载链接(如HuggingFace、ModelScope)。 数据集:论文中未提供其使用的两个独立数据集(HFA Overtone Singing Preview dataset [9] 和 Bergevin et al. [2])的具体公开获取链接或开源协议。数据集描述为“独立录制的工作室录音”。 Demo:论文中未提及在线演示链接。 复现材料:论文在脚注中提供了补充材料网站:https://mateocamara.com/khoomei-supp-materials 。音频示例和更多补充材料应在此获取。 论文中引用的开源项目: VocalTrax:论文指出其可微分波导模型扩展自该项目,并引用了其JAX实现。相关论文链接:https://arxiv.org/abs/2002.00180 。 Pink Trombone:论文中提到了作为交互式Kelly-Lochbaum风格波导模型的实时合成器。相关GitHub仓库:https://github.com/timurmusic/Pink-Trombone 。 🏗️ 方法概述和架构 本文提出的复制合成方法旨在从录音中逆向优化声道参数和声源参数,以重建“Sygyt”歌唱效果。系统整体分为预处理(固定参数提取)和可微分优化(参数学习)两个阶段。 ...

2026-06-04 · 更新于 2026-08-03 · 4 min · 689 words

Drift-Augmented Scoring: Text-Derived Noise Robustness for Zero-Shot Audio-Language Classification

📄 Drift-Augmented Scoring: Text-Derived Noise Robustness for Zero-Shot Audio-Language Classification #音频分类 #数据增强 #鲁棒性 10/10 | 创新 2/2 | 严谨 1.5/1.5 | 实验 1.5/1.5 | 清晰 1/1 | 影响 1.5/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 🔥 10/10 | 前25% | #音频分类 | #数据增强 | #鲁棒性 | arxiv 👥 作者与机构 Tu Vo, Sheir Zaheer, Chan Y. Park, Anonymous Authors (具体机构未在论文中说明) 💡 毒舌点评 这篇论文像一把精巧的“瑞士军刀”,主刀是文本漂移向量。它不追求华丽的数学模型,而是用一个巧妙的观察(文本在噪声描述下也会“漂移”)来修复一个实际痛点(CLAP在噪声下的脆弱性)。优势在于其“无为而治”的理念:不碰模型,不改嵌入,只在评分环节加一个“小费”。这种思路对于工程部署极具吸引力,堪称“四两拨千斤”。然而,其“软肋”也显而易见:当核心假设(文本漂移≈音频漂移)不成立时(例如对合成高斯噪声),增益就大幅缩水(见Table 4)。这好比用一套固定尺码的鞋去套所有人的脚,多数时候合脚,但总会有人觉得挤或松。它回避了最困难的测试时适应问题(如何在线校准),选择了一条更安全、更易复现的路径,这在追求SOTA的顶会氛围中,既是其稳健性的体现,也可能被诟病为“不够深入”。最终,它是一份出色的工程实践报告,但距离理论突破还有一步之遥。 📌 核心摘要 本文针对零样本音频-语言模型(CLAP)在声学噪声下性能严重下降的问题,提出了一种简单、高效、免训练的测试时评分增强方法——漂移增强评分(DAS)。DAS的核心思想是:类别c的噪声音频嵌入在空间中的漂移方向,可以由该类别的文本提示在噪声条件下的漂移方向来近似。基于此,DAS为每个类别计算一个离线的、仅基于文本的“漂移方向”向量 \(\hat{\delta}_c\)。在测试时,对每个音频片段,除了计算标准的文本-音频余弦相似度 \(z \cdot C_c\) 外,还额外计算一个漂移奖励 \(z \cdot \hat{\delta}_c\),并通过超参数 \(\beta\) 将两者加权组合作为最终评分。该方法无需访问测试批次或音频池,完全基于文本侧信息,且推理开销极低(每类仅增加一次内积)。在LAION CLAP骨干网络上的实验表明,在多种噪声条件、数据集和信噪比下,DAS均能稳定提升零样本分类性能,且显著优于近期相关工作(Acevedo et al.)的四种变体方法。 ...

2026-06-04 · 更新于 2026-08-03 · 3 min · 443 words

Entity Binding Failures in Speech LLM Reasoning: Diagnosis and Chain-of-Thought Intervention

📄 Entity Binding Failures in Speech LLM Reasoning: Diagnosis and Chain-of-Thought Intervention #语音问答 #多模态模型 7.5/10 | 创新 1.4/2 | 严谨 1.3/1.5 | 实验 1.4/1.5 | 清晰 1/1 | 影响 1.1/1.5 | 开源 0.2/1.5 | 复现 0.5/0.5 | 工程 0.6/1.5 ✅ 7.5/10 | 前25% | #语音问答 | #多模态模型 | arxiv 👥 作者与机构 主要作者:Ming-Hao Hsu (hsuminghao1006@gmail.com), Xiaohai Tian, Jun Zhang, Zhizheng Wu (wuzhizheng@cuhk.edu.cn)。机构为中国香港中文大学(深圳)数据科学学院和字节跳动。 💡 毒舌点评 这篇论文的诊断工作做得相当扎实,把“语音推理不行”这个笼统问题精准定位到了“实体绑定失败”这个具体病灶上,并且用EA-CoT这个“对症下药”的提示方法取得了显著疗效。实验设计也体现了严谨性,通过设置结构化控制提示和token预算对照组,努力剥离了“指令内容”和“生成长度”的混淆效应,这种实验洁癖值得肯定。消融实验也清晰地量化了“实体枚举”这一核心组件的贡献。然而,其提出的解决方案(EA-CoT)本质上是一种推理时的提示工程,而非模型架构的根本性改进,这使得其“修复”的普适性和效率存疑。论文承认这会显著增加推理延迟,在实际部署中可能是个硬伤。此外,评估完全依赖于合成语音和两个7B规模的模型,对真实世界噪声环境和更大规模模型的泛化能力,我们只能保持谨慎乐观。总体而言,这是一篇诊断清晰、验证严谨、但处方略显保守的工作。 📌 核心摘要 本研究深入剖析了语音大语言模型(SLLMs)在复杂推理任务上性能逊于文本模型的“模态差距”问题。作者发现,这种差距并非均匀分布,而是高度集中于需要连续跟踪实体状态的逻辑推理任务(如“谎言之网”),在这些任务上语音输入的准确率甚至降至随机水平。论文将问题根源诊断为“实体绑定失败”:语音编码器的下采样机制虽然保留了全局语义,却模糊了细粒度的声学细节和离散令牌边界,导致模型在隐式推理过程中无法稳定关联实体与其动态属性。为此,论文提出“实体感知思维链”(EA-CoT)推理时干预策略,强制模型在文本空间显式地枚举实体并记录其属性主张,从而绕过脆弱的声学隐式跟踪。实验证明,EA-CoT在实体密集型任务上实现了高达24.4个百分点的绝对准确率提升,有效弥合了模态差距,且该方法即使在实体名称被错误识别时仍能保持有效。消融实验进一步确认,性能增益完全源于显式的语义绑定过程。 🔗 开源详情 代码:论文中未提及代码链接或开源代码仓库。 模型权重:论文中提及了 Qwen2.5-Omni-7B [33] 和 Phi-4-Multimodal [34] 两个模型,并说明在它们的发布配置下评估,但未提供具体的权重下载链接(如 HuggingFace 或 ModelScope)。 数据集:论文中提及使用了 VoiceBench BBH [5] 的四个类别(共 1,000 条样本)和 MMSU [35] 数据集进行实验,未提及这些数据集的具体开源链接或协议。 Demo:论文中未提及。 复现材料:论文中未提及训练配置、检查点等复现材料。 论文中引用的开源项目: VoiceBench:论文引用了该基准,未提供直接链接。引用来源为[5]: Y. Chen, X. Yue, C. Zhang, X. Gao, R. T. Tan, and H. Li, “Voicebench: Benchmarking llm-based voice assistants,” CoRR, vol. abs/2410.17196, 2024. MMSU:论文引用了该基准,未提供直接链接。引用来源为[35]: D. Wang, J. Wu, J. Li, D. Yang, X. Chen, T. Zhang, and H. Meng, “MMSU: A massive multi-task spoken language understanding and reasoning benchmark,” CoRR, vol. abs/2506.04779, 2025. Qwen2.5-Omni:论文提及该模型并引用了技术报告,未提供权重或代码链接。引用来源为[33]: J. Xu, Z. Guo, J. He, H. Hu, T. He, S. Bai, K. Chen, J. Wang, Y. Fan, K. Dang, B. Zhang, X. Wang, Y. Chu, and J. Lin, “Qwen2.5-omni technical report,” CoRR, vol. abs/2503.20215, 2025. Phi-4-Multimodal:论文提及该模型并引用了技术报告,未提供权重或代码链接。引用来源为[34]: A. Abouelenin et al., “Phi-4-mini technical report: Compact yet powerful multimodal language models via mixture-of-loras,” CoRR, vol. abs/2503.01743, 2025. Qwen-Audio:论文在背景部分提及,未提供直接链接。引用来源为[4]: Y. Chu, J. Xu, X. Zhou, Q. Yang, S. Zhang, Y. Yan, C. Zhou, and J. Zhou, “Qwen-audio: Advancing universal audio understanding via unified large-scale audio-language models,” 2023. [Online]. Available: https://arxiv.org/abs/2311.07919 SALMONN:论文在背景部分提及,未提供直接链接。引用来源为[2]: C. Tang, W. Yu, G. Sun, X. Chen, T. Tan, W. Li, L. Lu, Z. Ma, and C. Zhang, “SALMONN: towards generic hearing abilities for large language models,” in ICLR. OpenReview.net, 2024. SpeechGPT:论文在背景部分提及,未提供直接链接。引用来源为[3]: D. Zhang, S. Li, X. Zhang, J. Zhan, P. Wang, Y. Zhou, and X. Qiu, “Speechgpt: Empowering large language models with intrinsic cross-modal conversational abilities,” in EMNLP (Findings), ser. Findings of ACL, vol. EMNLP 2023. Association for Computational Linguistics, 2023, pp. 15 757–15 773. CORD:论文在相关工作中提及,未提供直接链接。引用来源为[18]: J. Hu, D. Zhu, X. Luo, D. Zhang, S. He, Y. Lei, H. Zheng, S. Feng, J. He, Y. Sun, H. Wu, and H. Wang, “CORD: bridging the audio-text reasoning gap via weighted on-policy cross-modal distillation,” CoRR, vol. abs/2601.16547, 2026. Closing the modality reasoning gap for speech large language models:论文在相关工作中提及,未提供直接链接。引用来源为[19]: C. Wang, H. Lu, X. Zhang, S. Liu, Y. Lu, J. Li, and Z. Wu, “Closing the modality reasoning gap for speech large language models,” CoRR, vol. abs/2601.05543, 2026. Anatomy of the modality gap:论文引用了同一作者团队的相关工作,未提供直接链接。引用来源为[9]: M.-H. Hsu, X. Zhang, X. Tian, J. Zhang, and Z. Wu, “Anatomy of the modality gap: Dissecting the internal states of end-to-end speech llms,” 2026. [Online]. Available: https://arxiv.org/abs/2603.01502 🏗️ 方法概述和架构 论文方法的核心在于诊断“实体绑定失败”这一特定瓶颈,并设计针对性的推理时干预策略EA-CoT。整个方法框架可视为一个“诊断-治疗”系统。 ...

2026-06-04 · 更新于 2026-08-03 · 5 min · 1043 words

Feasibility of Time-Domain DNN-Based Speech Enhancement on Embedded FPGA for Hearing Aid

📄 Feasibility of Time-Domain DNN-Based Speech Enhancement on Embedded FPGA for Hearing Aid #语音增强 #助听器 7.2/10 | 创新 1.2/2 | 严谨 1.1/1.5 | 实验 1.4/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 0.4/1.5 | 复现 0.4/0.5 | 工程 0.9/1.5 ✅ 7.2/10 | 前50% | #语音增强 | #助听器 | arxiv 👥 作者与机构 Feyisayo Olalere, Umut Altin, Kiki van der Heijden, Marcel van Gerven 机构:Radboud University, Donders Institute for Brain, Cognition, and Behaviour, The Netherlands;Columbia University, USA. ...

2026-06-04 · 更新于 2026-08-03 · 3 min · 445 words