Transformer-based End-to-End Control Filter Generation for Active Noise Control

📄 Transformer-based End-to-End Control Filter Generation for Active Noise Control #主动噪声控制 #Transformer #无监督学习 #实时处理 #模型比较 ✅ 7.0/10 | 前25% | #主动噪声控制 | #Transformer | #无监督学习 #实时处理 | arxiv 学术质量 6.2/7 | 选题价值 1.3/2 | 复现加成 -0.5 | 置信度 高 👥 作者与机构 第一作者:Ziyi Yang(论文未说明其具体所属机构) 通讯作者:未说明 作者列表:Ziyi Yang(未说明)、Zhengding Luo(未说明)、Yisong Zou(未说明)、Boxiang Wang(未说明)、Qirui Huang(未说明)、Woon-Seng Gan(未说明) 💡 毒舌点评 这篇论文的核心工作是将Transformer“嫁接”到了固定滤波器主动噪声控制的框架中,并且通过巧妙的端到端可微设计,绕开了监督学习需要“标签”的难题,在真实噪声上取得了不错的改进,思路清晰,实验扎实。不过,模型参数量和计算量相比基线方法(CNN)显著增加,这对于追求低延迟、低功耗的嵌入式ANC设备来说是个不小的挑战,论文对此权衡的讨论略显不足,且未提供任何开源代码。 🔗 开源详情 代码:论文中未提及代码链接。 模型权重:论文中未提及模型权重链接。 数据集:论文中提及了训练和测试所用数据集的具体描述(83,977个合成带限噪声样本,用于测试的真实噪声类型包括飞机、压缩机等),但未提供公开下载链接或开源协议。 Demo:论文中未提及Demo链接。 复现材料:论文中提供了详细的训练配置、超参数、模型架构及评估结果,具体信息如下,但未提供额外的检查点文件或附录文档链接。 数据集:83,977个1秒时长、13kHz采样率的合成带限噪声(覆盖20-1900 Hz)。划分:79,977训练样本,2,000验证样本,2,000测试样本。训练时在参考信号上添加了SNR 10dB的高斯噪声。测试用到真实噪声和合成噪声。 声学路径:使用一个覆盖10-3000 Hz的合成声学路径,训练和测试中保持一致。 模型配置: 输入帧长度 L=13,000 样本,控制滤波器长度 N=512。 Conv1d前端:1输入通道,256输出通道,卷积核64,步长4,填充30;后接BatchNorm、ReLU、最大池化(步长4)。 Transformer编码器:d_model=256,8个注意力头,1层编码器,前馈维度1024,dropout 0.1,使用Pre-Norm。 输出头:Linear(256->512),ReLU,Dropout(0.1),Linear(512->512)。 总可训练参数:1,201,152。 训练超参数:优化器Adam,权重衰减10⁻⁴,初始学习率5×10⁻⁴,批大小128,训练40轮。使用StepLR调度器(步长5,衰减因子0.5)。 评估指标:噪声降低(NR)分贝数。每个测试噪声运行5秒,在最后1秒计算NR,报告平均NR。 基线模型:FxNLMS(滤波器长度512,步长0.001);GFANC(CNN co-processor,参数211,215,详见论文)。 论文中引用的开源项目:未提及。 补充信息 [模型架构] 补充:论文明确指出,Transformer编码器采用Pre-Norm(预归一化)设计。这是影响训练稳定性的关键设计选择,但未在分析中强调。同时,分析中提到输入帧L=13,000采样点,但未点明这对应于约1秒的音频(采样率13kHz),这是理解系统实时性的关键。 ...

2026-05-04 · 更新于 2026-05-21 · 2 min · 316 words

语音/音频论文速递 2026-05-04

语音/音频论文速递 2026-05-04 共分析 14 篇论文 ⚡ 今日概览 📥 抓取 14 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #音频生成 2篇 ██ #说话人验证 1篇 █ #声源定位 1篇 █ #音频深度伪造检测 1篇 █ #模型评估 1篇 █ #多模态模型 1篇 █ #主动噪声控制 1篇 █ #音乐理解 1篇 █ 📊 论文评分排行榜(14 篇,按分数降序) 排名 论文 评分 分档 主任务 🥇 LASE: Language-Adversarial Speaker Encoding for Indic C 8.5分 前25% #说话人验证 🥈 Towards Improving Speaker Distance Estimation through G 8.5分 前25% #声源定位 🥉 Alethia: A Foundational Encoder for Voice Deepfakes 8.0分 前25% #音频深度伪造检测 4. Beyond Decodability: Reconstructing Language Model Repr 7.5分 前25% #模型评估 5. Fast Text-to-Audio Generation with One-Step Sampling vi 7.5分 前25% #音频生成 6. MMAudio-LABEL: Audio Event Labeling via Audio Generatio 7.5分 前25% #音频生成 7. Group Cognition Learning: Making Everything Better Thro 7.5分 前25% #多模态模型 8. Transformer-based End-to-End Control Filter Generation 7.0分 前25% #主动噪声控制 9. GaMMA: Towards Joint Global-Temporal Music Understandin 7.0分 前25% #音乐理解 10. RoboKA: KAN Informed Multimodal Learning for RoboCall S 7.0分 前25% #语音伪造检测 11. From Birdsong to Rumbles: Classifying Elephant Calls wi 6.5分 前50% #音频分类 12. Timing is Everything: Temporal Scaffolding of Semantic 6.5分 前50% #音频事件检测 13. CustomDancer: Customized Dance Recommendation by Text-D 6.5分 前50% #音频检索 #音乐理解 14. MMAudioReverbs: Video-Guided Acoustic Modeling for Dere 6.0分 前50% #语音增强 📋 论文列表 🥇 LASE: Language-Adversarial Speaker Encoding for Indic Cross-Script Identity Preservation 🔥 8.5/10 | 前25% | #说话人验证 | #领域适应 | #多语言 #开源工具 | arxiv ...

2026-05-04 · 更新于 2026-05-21 · 9 min · 1720 words

语音/音频论文速递 2026-05-03

语音/音频论文速递 2026-05-03 共分析 13 篇语音/AI 论文 🎯 任务分类 点击任务标签查看该方向所有论文: 音乐信息检索(2篇) 语音识别(2篇) 音频生成(1篇) 发音错误检测(1篇) 说话人识别(1篇) 音乐理解(1篇) 音频场景理解(1篇) 语音质量评估(1篇) 语音对话系统(1篇) 音频问答(1篇) 音频事件检测(1篇) ⚡ 今日概览 📥 抓取 13 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #音乐信息检索 2篇 ██ #语音识别 2篇 ██ #音频生成 1篇 █ #发音错误检测 1篇 █ #说话人识别 1篇 █ #音乐理解 1篇 █ #音频场景理解 1篇 █ #语音质量评估 1篇 █ 📊 论文评分排行榜(13 篇,按分数降序) 排名 论文 评分 分档 主任务 🥇 UniSonate: A Unified Model for Speech, Music, and Sound 8.5分 前25% #音频生成 🥈 Beyond Acoustic Sparsity and Linguistic Bias: A Prompt- 8.5分 前25% #发音错误检测 🥉 DM-ASR: Diarization-aware Multi-speaker ASR with Large 8.0分 前25% #说话人识别 4. Transformer-Based Rhythm Quantization of Performance MI 8.0分 前25% #音乐信息检索 5. Audio Effect Estimation with DNN-Based Prediction and S 8.0分 前25% #音乐理解 6. Listening with Time: Precise Temporal Awareness for Lon 8.0分 前25% #音频场景理解 7. TTS-PRISM: A Perceptual Reasoning and Interpretable Spe 7.5分 前25% #语音质量评估 8. Spectrographic Portamento Gradient Analysis: A Quantita 7.5分 前25% #音乐信息检索 9. Advancing automatic speech recognition using feature fu 7.0分 前25% #语音识别 10. Identifying and typifying demographic unfairness in pho 7.0分 前50% #语音识别 11. Full-Duplex Interaction in Spoken Dialogue Systems: A C 6.5分 前25% #语音对话系统 12. Audio Video Verbal Analysis (AVVA) for Capturing Classr 6.0分 前50% #音频问答 13. Earable Platform with Integrated Simultaneous EEG Sensi 5.5分 后50% #音频事件检测 📋 论文列表 🥇 UniSonate: A Unified Model for Speech, Music, and Sound Effect Generation with Text Instructions 🔥 8.5/10 | 前25% | #音频生成 | #流匹配 | #扩散模型 #统一音频模型 | arxiv ...

2026-05-03 · 更新于 2026-05-21 · 8 min · 1688 words

AppTek Call-Center Dialogues: A Multi-Accent Long-Form Benchmark for English ASR

📄 AppTek Call-Center Dialogues: A Multi-Accent Long-Form Benchmark for English ASR #语音识别 #基准测试 #多语言 #数据集 #鲁棒性 ✅ 6.5/10 | 前50% | #语音识别 | #基准测试 | #多语言 #数据集 | arxiv 学术质量 5.0/7 | 选题价值 1.0/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者:Eugen Beck(AppTek.ai) 通讯作者:未说明 作者列表:Eugen Beck(AppTek.ai), Sarah Beranek(AppTek.ai), Uma Moothiringote(AppTek.ai), Daniel Mann(未说明), Wilfried Michel(未说明), Katie Nguyen(未说明), Taylor Tragemann(未说明) 💡 毒舌点评 这篇论文最大的亮点在于“以身作则”地解决了一个评测领域的老大难问题——创建了一个干净、无污染、多口音的长对话评测集,堪称ASR评测界的“良心工程”。但硬币的另一面是,它本质上是一个“靶子”而非“箭”,作为纯数据集和基准论文,缺乏算法上的惊艳创新,且角色扮演的数据获取方式终究让其在“真实性”上打了折扣,难以完全替代真实世界数据的价值。 🔗 开源详情 代码:论文中未提及具体代码仓库链接。 模型权重:论文中提及了多个开源ASR模型进行基准测试(如NVIDIA Canary-1B v2, Parakeet 0.6B TDT, Whisper Large, Qwen3-ASR, Granite Speech, Phi-4 Multimodal等),但未在文中提供这些模型权重的直接下载链接。 数据集:AppTek Call-Center Dialogues 名称:apptek-com/apptek_callcenter_dialogues 链接:https://huggingface.co/datasets/apptek-com/apptek_callcenter_dialogues 开源协议:Creative Commons Attribution-ShareAlike 4.0 International (CC BY-SA 4.0) Demo:论文中未提及在线演示链接。 复现材料:论文中未提供训练配置、检查点或附录等用于完全复现的材料。文中详细描述了评估设置(分割策略、评分协议等),但未提供用于复现其评分归一化脚本或评估环境的具体代码或配置文件链接。 论文中引用的开源项目: Silero VAD: https://github.com/snakers4/silero-vad Hugging Face OpenASR Leaderboard: https://huggingface.co/spaces/speech-io/open_asr_leaderboard 补充信息 [核心摘要] 补充:在“与已有方法相比新在哪里”部分,论文在Related Work中明确指出了其数据集相较于最接近的同类工作(Earnings-22)的多项具体优势:(a) 数据完全非公开来源,降低了被大型模型训练集污染的风险;(b) 口音标签基于说话人自我认同和验证,而非基于公司所在地,标注更直接;(c) 内容为任务导向的、自发的双人对话,与包含大量朗读内容和有限互动的财报电话不同。这些对比是论文定位自身贡献的关键。 [实验结果] 补充:论文在第4.2节Results中明确给出了一个具体实例来说明“平均性能与鲁棒性不相关”的观点:对于Canary-1B模型,其最佳与最差口音间的WER相对差距为26%,平均WER为11.2%;而对于平均WER更低(9.2%)的Parakeet V3模型,该相对差距却高达48%。这一具体数据对比强化了论文的核心发现之一。 [开源详情] 补充:论文在第3.6节提到了数据集的一个“多语言扩展”用途:一个子集(约5小时)已被专业翻译成中文、德语、日语和西班牙语,将用于未来的机器翻译评测。这是数据集潜在应用价值的补充。 📌 核心摘要 要解决什么问题:现有英语ASR公开基准测试集大多为短时、朗读式语音,或缺乏明确的方言标注,难以评估ASR系统在真实、长时对话场景下(如呼叫中心)对多种英语口音的鲁棒性。此外,基准数据可能泄露至大型模型的预训练语料中,影响评估有效性。 方法核心是什么:本文创建并开源了“AppTek Call-Center Dialogues”数据集。这是一个专门为评估而收集的自发、角色扮演式呼叫中心对话语料库,覆盖14种英语口音和16个服务场景,总计128.6小时。收集过程确保音频和文本非公开来源。同时,论文使用该数据集对多种开源ASR模型在不同语音分割策略下进行了基准测试。 与已有方法相比新在哪里:相比Earnings-22等现有对话数据集,本文数据集:(a) 完全为评估而生,数据非公开来源,降低与训练集重叠风险;(b) 系统性地覆盖了14种英语口音,且每类口音样本量充足;(c) 完全由角色扮演的、自发的双人对话构成,更贴近呼叫中心交互模式。 主要实验结果如何: 分割策略影响:手动分割通常能取得最佳WER,自动分割策略(如Silero VAD、固定分段)性能稍差,表明准确的语音边界检测对长对话ASR至关重要。部分模型(如Qwen3-ASR)对长段输入更鲁棒。 模型 (尺寸) 手动分割 RD分割 Silero分割 固定30s 固定60s Parakeet v3 (0.6B) 8.8 9.0 9.2 9.9 12.1 Qwen3-ASR (1.7B) 7.9 8.0 8.3 7.8 7.4 Canary-1B v2 (1B) 10.6 11.2 11.2 10.9 13.3 Whisper Large v3 (1.6B) 10.7 18.9 15.0 42.9 - Granite Speech (8B) 10.5 10.9 11.9 12.2 13.8 表2:不同模型在不同分割策略下的平均WER(%) * 口音差异巨大:模型在不同口音上的表现差异显著。例如,使用Silero分割时,多数模型在 `en_US_General`(通用美音)和 `en_AU`(澳洲英语)上表现最好,而在 `en_SG`(新加坡英语)、 `en_CN`(中式英语)和 `en_GB_SCT`(苏格兰英语)上错误率明显偏高。最佳与最差口音间的WER绝对差距可超过10%。 * 性能与鲁棒性不完全相关:平均WER更低的模型(如Parakeet v3, 9.2%)其口音间相对差异(48%)反而大于某些平均WER较高的模型(如Canary-1B, 11.2%),表明提升平均性能不自动保证口音鲁棒性。 口音 Parakeet v2 Parakeet v3 Qwen3-ASR (1.7B) Canary-1B Whisper v2 平均 en_AU 5.6 5.2 4.7 6.6 9.3 6.2 en_US_General 6.2 5.5 5.0 7.6 11.0 7.1 en_IN 9.9 9.7 10.3 12.9 33.0 13.9 en_SG 12.4 12.4 10.9 14.9 15.9 14.8 所有口音平均 9.6 9.2 8.3 11.2 16.0 - 表3:使用Silero分割时,各模型在不同口音上的WER(%) 实际意义是什么:为ASR社区,特别是对话AI领域,提供了一个高质量、无污染、针对多口音长对话场景的标准评估基准。这有助于更公平、更真实地比较和推动ASR模型在实际应用中的鲁棒性发展。 主要局限性是什么:(a) 数据为角色扮演而非真实呼叫中心对话,其语言风格和场景复杂度可能与真实数据有差异;(b) 尽管鼓励人口多样性,但部分口音组内性别分布不平衡;(c) 口音标签基于自我认同和验证,类别内部变异性和边界未严格定义;(d) 针对自发语音的逐字标注存在固有挑战,可能存在少量标注错误。 🏗️ 模型架构 本文是一篇基准测试和数据集论文,并未提出新的ASR模型架构。其核心工作围绕数据集构建和对现有模型的评估展开。因此,没有适用于本文的“模型架构”图或描述。论文评估的模型包括Parakeet, Canary, Qwen3-ASR, Whisper, Granite Speech等,均为已发表的开源ASR模型,其架构细节非本文贡献。 ...

2026-05-02 · 更新于 2026-05-21 · 3 min · 485 words

InteractWeb-Bench: Can Multimodal Agent Escape Blind Execution in Interactive Website Generation?

📄 InteractWeb-Bench: Can Multimodal Agent Escape Blind Execution in Interactive Website Generation? #基准测试 #多模态模型 #大语言模型 ✅ 7.5/10 | 前25% | #基准测试 | #多模态模型 | #大语言模型 | arxiv 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 中 👥 作者与机构 第一作者:Qiyao Wang (1,2) (1 深圳先进技术研究院,2 中国科学院大学) 通讯作者:Yuan Lin (3†), Min Yang (1,5†) (3 大连理工大学,1 深圳先进技术研究院,5 深圳大学先进技术研究院) 作者列表:Qiyao Wang(深圳先进技术研究院,中国科学院大学),Haoran Hu(大连理工大学),Longze Chen(深圳先进技术研究院,中国科学院大学),Hongbo Wang(大连理工大学),Hamid Alinejad-Rokny(UNSW Sydney),Yuan Lin(大连理工大学),Min Yang(深圳先进技术研究院,深圳大学先进技术研究院) 💡 毒舌点评 亮点:论文敏锐地指出了当前网站生成智能体“盲目执行”的真实痛点,并首次构建了系统模拟非专业用户(包括歧义、冗余、矛盾等)的交互式评估框架,其“约束槽”评估体系设计严谨。短板:论文本身并未提出任何新的生成模型或交互算法,而是对现有模型进行评估,其核心贡献在于“发现问题”而非“解决问题”;此外,尽管声称评估交互能力,但用户智能体仍由另一模型模拟,与真实人类交互存在差距。 🔗 开源详情 代码:论文中未提及代码链接。论文指出其交互环境基于 bolt.diy 框架实现,并使用 Playwright 作为浏览器内核,但未提供这些工具的具体开源仓库链接。 模型权重:论文中未提及。论文评估了 Qwen、Gemma、GPT、Gemini 等系列多个现有模型,但未提供或提及任何新模型的权重。 数据集:InteractWeb-Bench。论文指出其包含从 WebGen-Bench 扩展而来的 404 个测试用例,但未提供具体的数据集下载链接或开源协议。 Demo:论文中未提及。 复现材料:论文中未提及。论文在附录中提供了评估模型的详细规格、API成本及人类评估细节,但未提供训练配置、模型检查点等复现材料。 论文中引用的开源项目: bolt.diy: 论文指出被用作网站生成代理的基础框架。链接:https://github.com/stackblitz-labs/bolt.diy Playwright: 论文指出交互环境使用基于 Playwright 的浏览器内核实现。链接:https://github.com/microsoft/playwright WebVoyager: 论文指出用于最终评估的视觉审计器。链接:https://github.com/MinorJerry/WebVoyager Set-of-Mark (SoM) Prompting: 论文指出与 WebVoyager 结合用于视觉审计。链接:https://github.com/yuweihao/SAM-SoM vLLM: 论文指出用于部署小型开源模型。链接:https://github.com/vllm-project/vllm ClarifyCoder: 论文在相关工作中提及。链接:论文中未提及。 HumanEvalComm: 论文在相关工作中提及。链接:论文中未提及。 ClarifyMT-Bench: 论文在相关工作中提及。链接:论文中未提及。 SWE-bench: 论文在相关工作中提及。链接:https://github.com/princeton-nlp/SWE-bench InterCode: 论文在相关工作中提及。链接:论文中未提及。 Design2Code: 论文在相关工作中提及。链接:论文中未提及。 Web2Code: 论文在相关工作中提及。链接:论文中未提及。 WebGen-Bench: 论文指出其种子任务部分源于此。链接:论文中未提及。 Persona2Web: 论文在相关工作中提及。链接:论文中未提及。 补充信息 [核心摘要] 补充:论文明确声称 InteractWeb-Bench 是第一个用于评估多模态智能体在非专家低代码用户条件下网站生成能力的交互式基准。这一“首个”定位是其核心贡献之一。 [核心摘要] 补充:论文在局限性部分明确指出三点:1) 用户交互仍为模型模拟,非真实人类;2) 基准本身的用户智能体、评估器(WebVoyager+GPT-5-mini)是黑盒,可复现性受限;3) 侧重发现问题,未提出解决方案。分析中已提及前两点,第三点在分析中虽有提及,但可更明确。 [细节详述] 补充:论文在附录A中提供了详细的API成本分析,列出了各模型在InteractWeb-Bench上的单网站评估成本(从0.016美元到0.475美元不等),这对评估基准的经济性有重要参考价值。 [实验结果] 补充:论文在附录B中报告了人类评估的详细结果:三位计算机科学博士生参与评估,评估者间表现出中等程度的一致性(Kendall’s τ = 0.5675)。同时,MLLM评估器与人类评估结果呈现中等相关性(Kendall’s τ = 0.4490),这为基准评估的效度提供了依据。 [开源详情] 补充:论文指出其交互环境基于开源框架 bolt.diy 实现,并提供了该框架的GitHub链接。但需明确,这指的是被评估的智能体的实例化框架,而非评估框架本身。评估框架的用户智能体、评估器等核心组件的开源状态在论文中未明确。 [毒舌点评] 补充:论文在第5节结论及后续讨论中,不仅指出了局限性,也提出了四个明确的未来研究方向:1) 从“执行者”到“协作者”的意图对齐;2) 多模态反馈的高效利用;3) 更真实的人类交互评估;4) 探索主动澄清与高效生成之间的平衡。这些方向直接源于其发现,对未来研究具有明确的指导意义。 [模型架构] 补充:在“用户响应设计”部分,论文强调了其“检索-过滤”流水线的一个关键设计:防止信息泄露。即用户智能体在回答时,只提供被明确询问到的那部分黄金指令信息,从而避免一次性暴露所有正确答案,确保了评估的有效性。 📌 核心摘要 要解决什么问题:现有网站生成基准假设用户提供清晰、完整的指令,但在真实场景中,非专业用户常给出模糊、冗余甚至矛盾的低质量指令,导致多模态智能体陷入“盲目执行”陷阱,即被动执行错误指令而非主动澄清意图。 方法核心:提出InteractWeb-Bench,一个交互式基准。它包含四个基于需求工程缺陷理论设计的用户角色模拟器(极简、冗长、直觉、矛盾),以及一个为智能体设计的统一行动空间(澄清、实现、验证、提交),使其能在模拟环境中迭代地澄清需求、生成代码并进行视觉验证。 与已有方法相比新在哪里:首次将评估重点从静态的代码生成准确性,转向动态的用户意图澄清和多模态反馈(代码+视觉)利用能力。引入了基于用户角色的指令扰动和交互式多路径执行环境,更贴近真实开发流程。 主要实验结果:对9个前沿多模态模型进行了评估。关键发现:所有模型任务完成率(TCR)普遍偏低(最高为Qwen3.6-Plus的38.78%);模型在理解模糊意图(IAS >3.9)上尚可,但主动澄清命中率(CHR)低于40%,证实了“盲目执行”;模型倾向于通过生成过量代码(如Qwen3.6-Plus平均1415行)来补偿信息缺失,反而导致更高的幻觉率(62.4%)。模型对“信息缺失”(P-MIN)比“噪声干扰”(P-RAM)更敏感。 实际意义:为评估和提升多模态智能体的真实人机协作能力提供了新基准和方向,指明了未来智能体需在主动需求澄清和有效利用多模态反馈上重点突破。 主要局限性:1) 用户交互仍为模型模拟,非真实人类;2) 基准本身的用户智能体、评估器(WebVoyager+GPT-5-mini)是黑盒,可复现性受限;3) 侧重发现问题,未提出解决方案。 主要实验结果表格: ...

2026-05-02 · 更新于 2026-05-21 · 3 min · 452 words

JaiTTS: A Thai Voice Cloning Model

📄 JaiTTS: A Thai Voice Cloning Model #语音合成 #语音克隆 #自回归模型 #泰语 #语音大模型 🔥 8.0/10 | 前25% | #语音合成 | #自回归模型 | #语音克隆 #泰语 | arxiv 学术质量 6.5/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 高 👥 作者与机构 第一作者:Jullajak Karnjanaekarin (Jasmine Technology Solution) 通讯作者:未明确说明(论文提供了团队邮箱 jts.ai.team@gmail.com) 作者列表: Jullajak Karnjanaekarin (Jasmine Technology Solution) Pontakorn Trakuekul (Jasmine Technology Solution) Narongkorn Panitsrisit (Jasmine Technology Solution) Sumana Sumanakul (Jasmine Technology Solution) Vichayuth Nitayasomboon (Jasmine Technology Solution) Nithid Guntasin (Sirindhorn International Institute of Technology, 实习于Jasmine Technology Solution) Thanavin Denkavin (Sirindhorn International Institute of Technology) Attapol T. Rutherford (Jasmine Technology Solution; Chulalongkorn University, Department of Linguistics) 💡 毒舌点评 亮点:论文在泰语语音克隆上实现了SOTA,CER甚至优于人类基准,并在400次盲测中以70%胜率击败商业巨头,展示了强大的工程落地和数据调优能力。短板:模型核心架构源自VoxCPM,原创性有限;更关键的是“代码、模型、数据”三无状态,使得其优异的实验结果暂时停留在“不可复现的宣称”阶段,大大削弱了学术贡献的可验证性和社区价值。 ...

2026-05-02 · 更新于 2026-05-21 · 2 min · 425 words

MiniCPM-o 4.5: Towards Real-Time Full-Duplex Omni-Modal Interaction

📄 MiniCPM-o 4.5: Towards Real-Time Full-Duplex Omni-Modal Interaction #语音对话系统 #多模态模型 #端到端 #流式处理 #强化学习 🔥 8.5/10 | 前25% | #语音对话系统 | #端到端 | #多模态模型 #流式处理 | arxiv 学术质量 6.5/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者:未说明(论文作者列表未明确标注) 通讯作者:未说明(论文中未明确标注) 作者列表:Junbo Cui, Bokai Xu, Chongyi Wang, Tianyu Yu, Weiyue Sun, Yingjing Xu, Tianran Wang, Zhihui He, Wenshuo Ma, Tianchi Cai, Jiancheng Gui, Luoyuan Zhang, Xian Sun, Fuwei Huang, Moye Chen, Zhuo Lin, Hanyu Liu, Qingxin Gui, Qingzhe Han, Yuyang Wen, Huiping Liu, Rongkang Wang, Yaqi Zhang, Hongliang Wei, Chi Chen, You Li, Kechen Fang, Jie Zhou, Yuxuan Li, Guoyang Zeng, Chaojun Xiao, Yankai Lin, Xu Han, Maosong Sun, Zhiyuan Liu, Yuan Yao 机构列表:MiniCPM-o Team, OpenBMB(根据署名推断) 💡 毒舌点评 这篇论文真正瞄准了多模态交互范式的“圣杯”——实时全双工,其技术方案完整度和边缘部署效率令人印象深刻,是该方向的一个坚实里程碑。不过,论文对全双工交互的“主动性”和“鲁棒性”的评估相对薄弱,更像是一个高效的技术原型,离真正“类人”的复杂场景交互还有相当距离。 ...

2026-05-02 · 更新于 2026-05-21 · 2 min · 406 words

语音/音频论文速递 2026-05-02

语音/音频论文速递 2026-05-02 共分析 4 篇论文 ⚡ 今日概览 📥 抓取 4 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音对话系统 1篇 █ #语音合成 1篇 █ #基准测试 1篇 █ #语音识别 1篇 █ 📊 论文评分排行榜(4 篇,按分数降序) 排名 论文 评分 分档 主任务 🥇 MiniCPM-o 4.5: Towards Real-Time Full-Duplex Omni-Modal 8.5分 前25% #语音对话系统 🥈 JaiTTS: A Thai Voice Cloning Model 8.0分 前25% #语音合成 🥉 InteractWeb-Bench: Can Multimodal Agent Escape Blind Ex 7.5分 前25% #基准测试 4. AppTek Call-Center Dialogues: A Multi-Accent Long-Form 6.5分 前50% #语音识别 📋 论文列表 🥇 MiniCPM-o 4.5: Towards Real-Time Full-Duplex Omni-Modal Interaction 🔥 8.5/10 | 前25% | #语音对话系统 | #端到端 | #多模态模型 #流式处理 | arxiv ...

2026-05-02 · 更新于 2026-05-21 · 4 min · 724 words

A Knowledge-Driven Approach to Target Speech Extraction in the Presence of Background Sound Effects for Cinematic Audio Source Separation (CASS)

📄 A Knowledge-Driven Approach to Target Speech Extraction in the Presence of Background Sound Effects for Cinematic Audio Source Separation (CASS) #语音分离 #知识蒸馏 #数据增强 #音频场景理解 ✅ 7.0/10 | 前50% | #语音分离 | #知识蒸馏 | #数据增强 #音频场景理解 | arxiv 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 中 👥 作者与机构 第一作者:Chun-wei Ho (Georgia Institute of Technology, USA) 通讯作者:未说明 (论文未明确指定通讯作者,但通常第一作者承担主要联系责任) 作者列表:Chun-wei Ho (Georgia Institute of Technology, USA), Sabato Marco Siniscalchi (University of Palermo, Italy), Kai Li (Dolby Laboratory, China), Chin-Hui Lee (Dolby Laboratory, China) 💡 毒舌点评 亮点:论文开创性地将语言学中的“发音方式”(Manner of Articulation)知识作为辅助信号引入到电影音频语音分离任务中,为解决背景音效干扰下的短语音提取提供了新颖且可解释的思路。短板:尽管思路巧妙,但实验说服力略显不足,提升幅度有限(约1dB),且所有实验仅在一个为该挑战赛定制的数据集上完成,未能证明该方法在更复杂、更多样的真实电影场景中的普适性和鲁棒性。 ...

2026-05-01 · 更新于 2026-05-21 · 2 min · 336 words

ABC: Any-Subset Autoregression via Non-Markovian Diffusion Bridges in Continuous Time and Space

📄 ABC: Any-Subset Autoregression via Non-Markovian Diffusion Bridges in Continuous Time and Space #生成模型 #扩散模型 #连续时间 #随机过程 #自回归模型 🔥 8.0/10 | 前25% | #条件生成 | #扩散模型 | #生成模型 #连续时间 | arxiv 学术质量 6.5/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 中 👥 作者与机构 第一作者:未说明 通讯作者:未说明 作者列表:Gabe Guo(未说明)、Thanawat Sornwanee(未说明)、Lutong Hao(未说明)、Elon Litman(未说明)、Stefano Ermon(未说明)、Jose Blanchet(未说明) 💡 毒舌点评 亮点:直击现有扩散模型用于条件生成随机过程时的核心痛点(起点噪声、时间感知、条件灵活性),并提出了一个理论上更优的统一框架,逻辑清晰且有理论支撑。 短板:摘要中完全没有任何定量实验结果来支撑“superiority”的结论,让一个方法论看起来很漂亮的论文说服力大打折扣——没有数字的优越性宣称,在顶会顶刊里等于空谈。 🔗 开源详情 代码:论文中未提及代码链接 模型权重:论文中未提及 数据集:论文中未提及 Demo:论文中未提及 复现材料:论文中未提及 论文中引用的开源项目:未提及 补充信息 [模型架构] 补充:论文标题和核心方法名“Any-Subset Autoregression via Non-Markovian Diffusion Bridges in Continuous Time and Space”明确指出了其模型的两个关键设计理念:1)非马尔可夫 (Non-Markovian):强调该过程不依赖于马尔可夫性,这与通过“路径依赖”的变分测度进行条件建模直接相关。2)扩散桥 (Diffusion Bridges):暗示该SDE不仅是一个简单的扩散过程,更是一个“桥”,连接已知的条件状态(如起始帧和结束帧),从而在给定条件下生成两端被约束的路径。这在模型架构描述中虽被“连续SDE”和“路径依赖”所涵盖,但明确点出“非马尔可夫扩散桥”这一核心概念有助于更精准地理解其理论定位。 ...

2026-05-01 · 更新于 2026-05-21 · 1 min · 148 words