Flexible Multi-Channel Target Speaker Extraction Using Geometry-Conditioned Spatially Selective Non-linear Filters

📄 Flexible Multi-Channel Target Speaker Extraction Using Geometry-Conditioned Spatially Selective Non-linear Filters #说话人提取 #麦克风阵列 #多通道 #空间滤波 #条件生成 #信号处理 ✅ 6.3/10 | 中等偏上 | #说话人提取 | #麦克风阵列 | #多通道 #空间滤波 | arxiv 学术质量 5.4/8 | 影响力 0.4/1 | 可复现性 0.5/1 | 置信度 高 👥 作者与机构 第一作者:Jiatong Li(论文中未说明其所属机构) 通讯作者:未说明 作者列表:Jiatong Li(未说明)、Wiebke Middelberg(未说明)、Simon Doclo(未说明) 💡 毒舌点评 论文核心贡献明确,即通过FiLM条件化和新颖的DOA-MPE特征,解决了SSF对训练阵列几何的强依赖问题,实现了跨几何的泛化。实验设计(随机阵列训练、多种失配测试、DOA误差灵敏度分析)有效地支持了其主张。主要短板在于:实验完全限于仿真环境与固定的4麦克风设置,缺乏与近期处理变阵列的非自适应或几何编码基线(如某些神经波束形成器)的直接对比,使得“更好泛化”的结论不够全面,且匹配几何下的性能差距也揭示了泛化与专用性能之间的权衡。 📌 核心摘要 问题:基于目标方向(DOA)的空间选择性非线性滤波器(SSF)性能严重依赖于训练时所用的特定麦克风阵列几何形状,在失配阵列上性能急剧下降。 方法核心:提出几何条件化SSF(GC-SSF),在SSF中引入一个条件化分支。该分支使用一种新的特征“DOA-麦克风位置编码”(DOA-MPE),联合编码麦克风位置和目标DOA,并通过特征线性调制(FiLM)层将几何信息注入SSF的中间特征图,使滤波器能自适应不同阵列。 新意:首次将几何条件化思想应用于基于DOA的说话人提取任务。与元学习微调或几何无关的系统相比,GC-SSF在保持端到端训练和利用DOA线索的同时,实现了显式的几何适应。 主要实验结果:在圆形、均匀线阵和随机阵列上的实验表明: 训练在固定圆形阵列上的基线SSF(SSF-Circ)在匹配阵列上性能最佳(PESQ 2.95),但在失配阵列(如ULA)上PESQ降至1.16,远低于未处理的1.39。 训练在随机阵列上的基线SSF(SSF-Random)性能较差且不同阵列间表现相对平坦(PESQ在1.93-2.04之间)。 提出的GC-SSF(使用DOA-MPE和POI2,在随机阵列上训练)在所有阵列上均显著优于SSF-Random(PESQ约2.41-2.53),在失配阵列上性能远超SSF-Circ,但在匹配圆形阵列上的性能(2.53)仍略低于专用的SSF-Circ(2.95),揭示了泛化与峰值性能之间的权衡。 DOA误差敏感性分析显示,GC-SSF在保持高空间选择性(性能随DOA误差增大而下降的趋势与SSF-Circ相似)的同时,比SSF-Random更鲁棒,表明其有效利用了DOA信息。 实际意义:使基于DOA的目标说话人提取系统能够灵活部署于不同麦克风阵列,无需针对特定几何重新训练,增强了实用性和适应性。 主要局限性:论文明确承认的局限是仅支持固定数量的麦克风。实验完全在模拟数据上进行,未探讨麦克风数量变化、更复杂噪声场景或与近期端到端波束形成等其他几何适应方法的对比,也未讨论计算开销。 🔗 开源详情 代码:论文中未提及代码链接(未说明)。 模型权重:论文中未提及(未说明)。 数据集: 论文中使用 Wall Street Journal (WSJ0) 语料库进行实验。获取方式需通过 LDC (Linguistic Data Consortium),论文中未提供直接下载链接。其引用来源为:[5] D. B. Paul and J. M. Baker, “The design for the Wall Street Journal-based CSR corpus,” in Proc. ICSLP, 1992。 仿真实验使用 Pyroomacoustics 库生成。其GitHub仓库链接为:https://github.com/ReverberantRoom/pyroomacoustics 。论文中引用来源为:[18] R. Scheibler, E. Bezzam, and M. Vetterli, “Pyroomacoustics: A Python package for audio room simulation and array processing algorithms,” in Proc. ICASSP, 2018。 Demo:论文中未提及。 复现材料:论文中未提及预训练模型、检查点或专门的复现指南。论文详细描述了网络结构、超参数设置和训练策略,理论上可用于复现。 论文中引用的开源项目: Pyroomacoustics: https://github.com/ReverberantRoom/pyroomacoustics (用于生成仿真实验数据集) FiLM (Feature-wise Linear Modulation): 论文引用为[15] E. Perez, F. Strub, H. de Vries, V. Dumoulin, and A. Courville, “FiLM: Visual Reasoning with a General Conditioning Layer,” in Proc. AAAI, 2018. 这是一个通用的条件化技术,并非一个可直接获取的独立软件仓库。 🏗️ 方法概述和架构 该系统是一个端到端的深度学习系统,旨在从多通道含噪语音信号中,根据给定的目标说话人方向(DOA)提取目标语音。核心流程是:多通道信号输入 -> 通过基线SSF编码器提取中间特征 -> 几何条件化分支并行处理阵列几何与DOA信息 -> 通过FiLM层调制SSF的中间特征 -> 解码生成应用于参考麦克风的复掩膜 -> 输出增强的目标语音。关键创新在于条件化分支能够根据动态的阵列几何和DOA信息,自适应地调整SSF内部的空间特征表示。 ...

2026-05-19 · 更新于 2026-05-19 · 3 min · 547 words

Transmit Beamforming for High-Rate Underwater Acoustic Communications

📄 Transmit Beamforming for High-Rate Underwater Acoustic Communications #水声通信 #波束成形 #信号处理 #多通道 #接收均衡 📝 5.3/10 | 前50%-75% | #水声通信 | #波束成形 | #信号处理 #多通道 | arxiv 学术质量 4.1/8 | 影响力 0.7/1 | 可复现性 0.5/1 | 置信度 中 👥 作者与机构 第一作者:Diego A. Cuji (Stony Brook University, Stony Brook, NY USA) 通讯作者:未明确说明 作者列表:Diego A. Cuji (Stony Brook University)、Andrew C. Singer (Stony Brook University)、Milica Stojanovic (Northeastern University, Boston, MA USA) 💡 毒舌点评 本文针对水声通信中发射波束成形对完整、实时信道状态信息(CSI)依赖性强的工程痛点,提出了一种基于主路径到达角的简化策略,并在两个公开实验数据集上验证了其基本可行性。其核心价值在于提供了一种在长反馈延迟条件下实现可靠下行通信的工程折衷方案。然而,从顶会标准审视,其核心创新(基于几何角度的空间滤波)在信号处理领域并非新思想,且论文最大短板在于完全缺乏与现有主流方法(如时间反转镜)在相同条件下的直接量化对比,使得“优越性”或“有效性”的论证严重不足,结论显得空洞,更像一篇工程实验报告而非严谨的学术研究。 📌 核心摘要 本文研究了水下声学通信中的发射波束成形问题。主要挑战在于,传统高精度波束成形(如时间反转镜)需要准确且及时的完整信道冲激响应,而这在实际水声环境中难以获取。论文提出了一种基于角度的波束成形方法,其核心思想是:在存在一个相对稳定的主传播路径(如直达波或底部反射波)的场景下,发射机无需获取完整的信道信息,只需将波束主瓣指向该主路径的到达角。接收机则负责完成时间同步、多普勒补偿和自适应均衡。论文利用SPACE和MACE两个公开的水声实验数据集进行了验证。结果显示,在单用户场景下,该方法在三种不同海况/运动条件下的数据检测均方误差(MSE)分别为-14 dB至-13 dB(SPACE)和-16 dB至-10 dB(MACE),且误码率为零。此外,论文展示了一个双用户异步传输场景,通过波束指向和零陷放置,实现了两个用户可靠通信(MSE约-16 dB和-18 dB,零误码)。该方法的实际意义在于,它降低了对反馈信道实时性和精度的要求,使得在长反馈延迟条件下进行可靠的高速下行水声通信成为可能。主要局限性在于,该方法的性能高度依赖于存在一个稳定主导路径的假设,而在强散射或多径能量相当的环境中可能失效;同时,论文未与现有主流方法(如时间反转镜)在相同实验条件下进行直接性能对比,因此无法评估其相对优劣。 ...

2026-05-15 · 更新于 2026-05-19 · 2 min · 352 words

语音/音频论文速递 2026-05-15

语音/音频论文速递 2026-05-15 共分析 20 篇论文 ⚡ 今日概览 📥 抓取 20 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 2篇 ██ #音频分类 2篇 ██ #语音生物标志物 2篇 ██ #说话人验证 2篇 ██ #基准测试 1篇 █ #语音翻译 1篇 █ #音频生成 1篇 █ #基础模型 1篇 █ 📊 论文评分排行榜(20 篇,按分数降序) 排名 论文 评分 分档 主任务 🥇 FutureSim: Replaying World Events to Evaluate Adaptive 7.6分 前25% #基准测试 🥈 Refining Pseudo-Audio Prompts with Speech-Text Alignmen 7.5分 前50% #语音识别 🥉 AudioMosaic: Contrastive Masked Audio Representation Le 7.3分 前50% #音频分类 4. A Benchmark for Early-stage Parkinson’s Disease Detecti 7.2分 前30% #语音生物标志物 5. SpeakerLLM: A Speaker-Specialized Audio-LLM for Speaker 7.0分 前25% #说话人验证 6. Streaming Speech-to-Text Translation with a SpeechLLM 6.8分 前25% #语音翻译 7. Break-the-Beat! Controllable MIDI-to-Drum Audio Synthes 6.8分 前50% #音频生成 8. Mini-JEPA Foundation Model Fleet Enables Agentic Hydrol 6.8分 前50% #基础模型 9. Persian MusicGen: A Large-Scale Dataset and Culturally- 6.7分 前50% #音乐生成 10. Physics-Based iOCT Sonification for Real-time Interacti 6.5分 前40% #医疗音频 11. From Text to Voice: A Reproducible and Verifiable Frame 6.3分 前50% #模型评估 12. IsoNet: Spatially-aware audio-visual target speech extr 6.0分 前50% #语音提取 13. FSD50K-Solo: Automated Curation of Single-Source Sound 5.5分 前50% #数据清洗 14. UMo: Unified Sparse Motion Modeling for Real-Time Co-Sp 5.5分 前25% #语音合成 15. Masked Autoencoders with Limited Data: Does It Work? A 5.5分 前50% #音频分类 16. Text-Dependent Speaker Verification (TdSV) Challenge 20 5.5分 前40% #说话人验证 17. PROCESS-2: A Benchmark Speech Corpus for Early Cognitiv 5.4分 前50% #语音生物标志物 18. Transmit Beamforming for High-Rate Underwater Acoustic 5.3分 前50% #水声通信 19. A Calculus-Based Framework for Determining Vocabulary S 3.9分 后50% #语音识别 20. MediaClaw: Multimodal Intelligent-Agent Platform Techni 3.3分 后50% #多模态模型 📋 论文列表 🥇 FutureSim: Replaying World Events to Evaluate Adaptive Agents ✅ 7.6/10 | 前25% | #基准测试 | #大语言模型 | #自适应代理 #测试时适应 | arxiv ...

2026-05-15 · 更新于 2026-05-19 · 15 min · 3187 words

Zero-Shot Imagined Speech Decoding via Imagined-to-Listened MEG Mapping

📄 Zero-Shot Imagined Speech Decoding via Imagined-to-Listened MEG Mapping #脑机接口 #对比学习 #零样本 #多通道 ✅ 6.5/10 | #脑机接口 #对比学习 | arxiv 👥 作者与机构 第一作者:Maryam Maghsoudi (University of Maryland, College Park, MD 20740) 通讯作者:Maryam Maghsoudi (maryam00@umd.edu) 作者列表:Maryam Maghsoudi (University of Maryland), Shihab Shamma (University of Maryland) 💡 毒舌点评 论文巧妙地绕开了想象语音数据标注困难的核心瓶颈,将问题转化为在“倾听空间”进行解码,思路清晰且具有启发性。然而,实验局限于76个词和4个预设刺激,离“解码自由想象”尚有距离,且MEG设备的高门槛让其应用前景在短期内略显黯淡。 📌 核心摘要 本文提出了一种无需想象语音标签的零样本解码方法。核心问题是如何在想象语音数据稀缺且标注困难的情况下,实现高性能的非侵入式脑语音解码。方法核心是构建一个三阶段的解码流水线:首先,训练一个映射模型将想象时的脑磁图信号映射为对应的倾听脑磁图信号;然后,独立训练一个对比学习解码器,将倾听脑磁图信号与词嵌入对齐;最后,在推理时,将新受试者的想象信号通过冻结的映射模型和解码器,直接获得解码词。与已有方法相比,新意在于实现了完全不依赖想象数据标签的“零样本”跨受试者解码。主要实验结果表明:1)所提六种映射模型均显著优于随机基线(见图2A);2)最终解码性能(在76词词表上)显著高于随机水平,且不同受试者和映射架构下可解码的词汇具有高度一致性(见图4)。该研究为脑机接口(BCI)提供了一种有前景的、可扩展的路径。主要局限性在于实验数据规模较小(17名受试者)、词汇表有限(76词)以及使用的刺激类型单一(诗歌和旋律),限制了结论的泛化性。 🔗 开源详情 代码:论文中未提及代码链接。 模型权重:论文中未提及。 数据集:论文中未提及。 Demo:论文中未提及。 复现材料:论文中未提及。 论文中引用的开源项目: MNE-Python:用于MEG数据预处理。链接:https://mne.tools/ WhisperX:用于音频强制对齐以获取单词时间戳。链接:https://github.com/m-bain/whisperX BERT:用作语义词嵌入模型之一。链接:https://huggingface.co/models?search=bert Whisper:用作声学词嵌入模型之一。链接:https://huggingface.co/models?search=whisper Wav2Vec2:用作音素词嵌入模型之一。链接:https://huggingface.co/models?search=wav2vec2 🏗️ 方法概述和架构 图1:论文提出的三阶段解码流水线。(A)展示了实验范式,即对同一刺激(旋律/诗歌)进行“倾听”和“想象”条件的MEG数据采集。(B)展示了核心解码流水线:第一阶段训练想象-倾听映射模型;第二阶段训练对比学习倾听解码器;第三阶段将新受试者的想象MEG通过冻结的映射器和解码器,实现零样本解码。 本文提出了一种三阶段的解码流水线,旨在实现从想象脑磁图信号中零样本解码单词。其整体流程可以描述为:输入一段想象状态下的MEG信号,首先通过一个映射模型将其转换为“预测的倾听MEG”;然后,将这个预测的信号输入一个预先训练好的解码器,最终输出一个与目标词在嵌入空间中最匹配的词向量。 第一阶段:想象到倾听映射 (Imagined-to-Listened Mapping) ...

2026-05-11 · 更新于 2026-05-19 · 2 min · 264 words

语音/音频论文速递 2026-05-11

语音/音频论文速递 2026-05-11 共分析 12 篇论文 ⚡ 今日概览 📥 抓取 12 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #基准测试 1篇 █ #跨模态 1篇 █ #语音匿名化 1篇 █ #音频水印 1篇 █ #语音对话系统 1篇 █ #说话人识别 1篇 █ #脑机接口 1篇 █ #生物声学 1篇 █ 📊 论文评分排行榜(12 篇,按分数降序) 排名 论文 评分 分档 主任务 🥇 Do Joint Audio-Video Generation Models Understand Physi 7.5分 前50%(Accept级) #基准测试 🥈 Anisotropic Modality Align 7.5分 前25%(Strong Accept级) #跨模态 🥉 Evaluating voice anonymisation using similarity rank di 7.0分 前50%(Accept级) #语音匿名化 4. Asymmetric Phase Coding Audio Watermarking 7.0分 前50%(Accept级) #音频水印 5. MIST: Multimodal Interactive Speech-based Tool-calling 7.0分 前50%(Accept级) #语音对话系统 6. TARNet: A Temporal-Aware Multi-Scale Architecture for C 7.0分 前25%(Strong Accept级) #说话人识别 7. Zero-Shot Imagined Speech Decoding via Imagined-to-List 6.5分 前25%(Strong Accept级) #脑机接口 8. BeeVe: Unsupervised Acoustic State Discovery in Honey B 6.5分 前50%(Accept级) #生物声学 9. A Decomposed Retrieval-Edit-Rerank Framework for Chord 6.5分 前50%(Accept级) #音乐生成 10. Adaptive Regularization for Sparsity Control in Bregman 6.5分 后50%(Reject级) #说话人验证 11. Sparse Autoencoders as Plug-and-Play Firewalls for Adve 6.5分 前50%(Accept级) #对抗样本 12. Dependence on Early and Late Reverberation of Single-Ch 6.0分 后50%(Reject级) #说话人距离估计 📋 论文列表 🥇 Do Joint Audio-Video Generation Models Understand Physics? ✅ 7.5/10 | 前50%(Accept级) | #基准测试 | #模型评估 | #音视频 #跨模态 | arxiv ...

2026-05-11 · 更新于 2026-05-19 · 9 min · 1723 words

WearVox: An Egocentric Multichannel Voice Assistant Benchmark for Wearables

📄 WearVox: An Egocentric Multichannel Voice Assistant Benchmark for Wearables #基准测试 #多通道 #语音大模型 #音频问答 🔥 8.0/10 | 前25% | #基准测试 | #麦克风阵列 | #多通道 #语音大模型 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者:Zhaojiang Lin(Meta),Yong Xu(Meta),Kai Sun(Meta)(论文明确标注三位为共同第一作者:Joint first author) 通讯作者:未明确说明(但Zhaojiang Lin提供了联系邮箱zhaojiang@meta.com) 作者列表:Zhaojiang Lin(Meta),Yong Xu(Meta),Kai Sun(Meta),Jing Zheng(Meta),Yin Huang(Meta),Surya Teja Appini(Meta),Krish Narang(Meta),Renjie Tao(Meta),Ishan Kapil Jain(Meta),Siddhant Arora(Carnegie Mellon University,标注工作在Meta完成),Ruizhi Li(Meta),Yiteng Huang(Meta),Kaushik Patnaik(Meta),Wenfang Xu(Meta),Suwon Shon(Meta),Yue Liu(Meta),Ahmed A Aly(Meta),Anuj Kumar(Meta),Florian Metze(Meta),Xin Luna Dong(Meta) 💡 毒舌点评 亮点在于首次针对可穿戴场景定义了多通道、自我中心语音助手评测标准,数据基于真实AI眼镜采集,任务设计紧贴现实痛点(如侧向对话拒绝)。短板是数据集规模相对有限(3.8k样本),且评估的大部分现有SLLM只能基于波束成形后的单通道音频输入,未能充分验证多通道架构的潜力,论文中提出的MC WearLlama也仅是案例研究,非核心贡献。 ...

2026-05-04 · 更新于 2026-05-19 · 2 min · 327 words

语音/音频论文速递 2026-05-03

语音/音频论文速递 2026-05-03 共分析 13 篇语音/AI 论文 🎯 任务分类 点击任务标签查看该方向所有论文: 音乐信息检索(2篇) 语音识别(2篇) 音频生成(1篇) 发音错误检测(1篇) 说话人识别(1篇) 音乐理解(1篇) 音频场景理解(1篇) 语音质量评估(1篇) 语音对话系统(1篇) 音频问答(1篇) 音频事件检测(1篇) ⚡ 今日概览 📥 抓取 13 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #音乐信息检索 2篇 ██ #语音识别 2篇 ██ #音频生成 1篇 █ #发音错误检测 1篇 █ #说话人识别 1篇 █ #音乐理解 1篇 █ #音频场景理解 1篇 █ #语音质量评估 1篇 █ 📊 论文评分排行榜(13 篇,按分数降序) 排名 论文 评分 分档 主任务 🥇 UniSonate: A Unified Model for Speech, Music, and Sound 8.5分 前25% #音频生成 🥈 Beyond Acoustic Sparsity and Linguistic Bias: A Prompt- 8.5分 前25% #发音错误检测 🥉 DM-ASR: Diarization-aware Multi-speaker ASR with Large 8.0分 前25% #说话人识别 4. Transformer-Based Rhythm Quantization of Performance MI 8.0分 前25% #音乐信息检索 5. Audio Effect Estimation with DNN-Based Prediction and S 8.0分 前25% #音乐理解 6. Listening with Time: Precise Temporal Awareness for Lon 8.0分 前25% #音频场景理解 7. TTS-PRISM: A Perceptual Reasoning and Interpretable Spe 7.5分 前25% #语音质量评估 8. Spectrographic Portamento Gradient Analysis: A Quantita 7.5分 前25% #音乐信息检索 9. Advancing automatic speech recognition using feature fu 7.0分 前25% #语音识别 10. Identifying and typifying demographic unfairness in pho 7.0分 前50% #语音识别 11. Full-Duplex Interaction in Spoken Dialogue Systems: A C 6.5分 前25% #语音对话系统 12. Audio Video Verbal Analysis (AVVA) for Capturing Classr 6.0分 前50% #音频问答 13. Earable Platform with Integrated Simultaneous EEG Sensi 5.5分 后50% #音频事件检测 📋 论文列表 🥇 UniSonate: A Unified Model for Speech, Music, and Sound Effect Generation with Text Instructions 🔥 8.5/10 | 前25% | #音频生成 | #流匹配 | #扩散模型 #统一音频模型 | arxiv ...

2026-05-03 · 更新于 2026-05-19 · 8 min · 1688 words

TINY BUT MIGHTY: A SOFTWARE-HARDWARE CO- DESIGN APPROACH FOR EFFICIENT MULTIMODAL IN- FERENCE ON BATTERY-POWERED SMALL DEVICES

📄 TINY BUT MIGHTY: A SOFTWARE-HARDWARE CO- DESIGN APPROACH FOR EFFICIENT MULTIMODAL IN- FERENCE ON BATTERY-POWERED SMALL DEVICES #多模态模型 #实时处理 #多通道 #开源工具 ✅ 7.0/10 | 前25% | #多模态模型 | #实时处理 | #多通道 #开源工具 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 中 👥 作者与机构 第一作者:Yilong Li(University of Wisconsin – Madison) 通讯作者:未说明 作者列表:Yilong Li(University of Wisconsin – Madison)、Shuai Zhang(Amazon Web Services AI)、Yijing Zeng(University of Wisconsin – Madison)、Chengpo Yan(University of Wisconsin – Madison)、Hao Zhang(University of Wisconsin – Madison)、Xinmiao Xiong(University of Wisconsin – Madison)、Jingyu Liu(University of Wisconsin – Madison)、Pan Hu(Uber)、Suman Banerjee(University of Wisconsin – Madison) 💡 毒舌点评 这篇论文亮点在于提出了一个完整的、软硬件协同设计的系统框架(NANOMIND),并通过自研硬件原型机验证了其在电池供电设备上运行多模态大模型的可行性,实测的能效比数据(降低42.3%能耗)很有说服力。短板在于其对比实验主要聚焦于自身设计的硬件平台与不同软件框架的对比,缺乏与当前主流商用边缘设备(如最新款旗舰手机)上SOTA框架的公平、全面比较,这削弱了其结论的普适性和说服力。 ...

2026-05-02 · 更新于 2026-05-19 · 2 min · 284 words

WearVox: An Egocentric Multichannel Voice Assistant Benchmark for Wearables

📄 WearVox: An Egocentric Multichannel Voice Assistant Benchmark for Wearables #语音对话系统 #基准测试 #多通道 #语音大模型 #鲁棒性 ✅ 7.5/10 | 前25% | #语音对话系统 | #基准测试 | #多通道 #语音大模型 学术质量 6.5/7 | 选题价值 1.0/2 | 复现加成 0.0 | 置信度 高 👥 作者与机构 第一作者:Zhaojiang Lin(Meta,标记为联合第一作者) 通讯作者:未说明(论文未明确指定通讯作者,但提供了邮箱zhaojiang@meta.com, sunkaicn@meta.com, yongxu@meta.com, lunadong@meta.com) 作者列表:Zhaojiang Lin(Meta)、Yong Xu(Meta,联合第一作者)、Kai Sun(Meta,联合第一作者)、Jing Zheng(Meta)、Yin Huang(Meta)、Surya Teja Appini(Meta)、Krish Narang(Meta)、Renjie Tao(Meta)、Ishan Kapil Jain(Meta)、Siddhant Arora(Carnegie Mellon University,工作于Meta)、Ruizhi Li(Meta)、Yiteng Huang(Meta)、Kaushik Patnaik(Meta)、Wenfang Xu(Meta)、Suwon Shon(Meta)、Yue Liu(Meta)、Ahmed A Aly(Meta)、Anuj Kumar(Meta)、Florian Metze(Meta)、Xin Luna Dong(Meta) 💡 毒舌点评 亮点在于它精准地定义了可穿戴语音助手独有的“坑”(自我中心音频、多通道、运动噪声、旁听对话),并用一个设计精良、场景丰富的测试集(WearVox)把这些坑量化了,直接戳穿了当前所谓“先进”语音大模型在真实世界中的脆弱性。短板则是案例研究部分提出的多通道模型(MC WearLlama)虽然验证了方向,但更像是一个概念验证(PoC)而非一套完整的解决方案,模型本身未开源,且多通道处理方式(仅拼接两个通道)相对简单,离真正的端到端多模态融合还有距离。 ...

2026-05-02 · 更新于 2026-05-19 · 2 min · 422 words

Earable Platform with Integrated Simultaneous EEG Sensing and Auditory Stimulation

📄 Earable Platform with Integrated Simultaneous EEG Sensing and Auditory Stimulation #音频事件检测 #信号处理 #多通道 #时频分析 📝 5.5/10 | 后50% | #音频事件检测 | #信号处理 | #多通道 #时频分析 | arxiv 学术质量 5.0/7 | 选题价值 1.5/2 | 复现加成 -1.0 | 置信度 中 👥 作者与机构 第一作者:Min Suk Lee (UC San Diego, Shu Chien-Gene Lay Department of Bioengineering) 通讯作者:Yuchen Xu (yux013@ucsd.edu), Gert Cauwenberghs (gcauwenberghs@ucsd.edu) 作者列表: Min Suk Lee (UC San Diego, Shu Chien-Gene Lay Department of Bioengineering) Abhinav Uppal (UC San Diego, Shu Chien-Gene Lay Department of Bioengineering) Ananya Thota (UC San Diego, Shu Chien-Gene Lay Department of Bioengineering) Chetan Pathrabe (UC San Diego, Shu Chien-Gene Lay Department of Bioengineering) Rommani Mondal (UC San Diego, Shu Chien-Gene Lay Department of Bioengineering) Akshay Paul (UC San Diego, Institute for Neural Computation) Yuchen Xu (UC San Diego, Institute for Neural Computation) Gert Cauwenberghs (UC San Diego, Shu Chien-Gene Lay Department of Bioengineering; Institute for Neural Computation) 💡 毒舌点评 亮点在于其将定制化耳道模型与Ag/AgCl干电极喷涂技术相结合,显著提升了信号质量和佩戴舒适度,为长期脑电监测提供了实用方案。短板是验证仅限于单个受试者,且其中一个对侧通道表现出显著噪声,这使得“稳健”、“长期”等宣称的普适性大打折扣,更像一个精心调校的原型机演示。 ...

2026-05-01 · 更新于 2026-05-19 · 2 min · 271 words