On the Role of Conversational Timing in Synthetic Training Data for ASR

📄 On the Role of Conversational Timing in Synthetic Training Data for ASR 标签:#语音识别 #说话人日志 #领域适应 #基准测试 6.6/10 | 创新 1/2 | 严谨 1.3/1.5 | 实验 0.7/1.5 | 清晰 0.9/1 | 影响 0.7/1.5 | 开源 1/1.5 | 复现 0.3/0.5 | 工程 0.7/1.5 ✅ 6.6/10 | 前50% | 文档类型:方法研究 | 评分置信度:中 | #语音识别 | #领域适应 | #说话人日志 #基准测试 | arxiv 👥 作者与机构 第一作者:Máté Gedeon(Budapest University of Technology and Economics, Dept. of Telecommunications and Artificial Intelligence;Speechtex Ltd.) 通讯作者:Máté Gedeon(论文提供了联系邮箱 gedeonm@edu.bme.hu,可视为通讯作者) 作者列表:Máté Gedeon(Budapest University of Technology and Economics, Dept. of Telecommunications and Artificial Intelligence;Speechtex Ltd.)、Péter Mihajlik(Budapest University of Technology and Economics, Dept. of Telecommunications and Artificial Intelligence) 💡 毒舌点评 论文提出了一个不错的分析框架——将对话时序视为可控训练变量而非被动复现的语料库统计量——这一视角本身是有洞察力的。然而,从语料库派生的基线到最优配置之间仅0.19-0.32个百分点的cpWER提升,使得“overlap-gap trade-off”的发现更像是对ASR社区已有直觉(更多重叠暴露有利于ASR)的经验验证,而非真正的范式转变。更重要的是,仅用25个配置(10个LHS + 15个BO)在单一语言、单一ASR架构上得出的相关性结论,其统计支撑力令人怀疑,使得“分析框架”的价值更接近于一个精心设计的初步案例研究,而非普适性发现。 ...

2026-07-10 · 更新于 2026-08-14 · 3 min · 527 words

PS4: Proxy-Supervised Joint Training for Real Target Speaker Extraction

📄 PS4: Proxy-Supervised Joint Training for Real Target Speaker Extraction 标签:#语音分离 #多任务学习 #数据集 #基准测试 #领域适应 8.8/10 | 创新 1.5/2 | 严谨 1.5/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 1.3/1.5 | 开源 1/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 🔥 8.8/10 | 前25% | 文档类型:方法研究 | 评分置信度:高 | #语音分离 | #多任务学习 | #数据集 #基准测试 | arxiv 👥 作者与机构 第一作者:Wanyi Ning (未说明机构) 通讯作者:未说明 作者列表:Wanyi Ning (未说明机构), Wei Zhou (未说明机构), Yingpeng Li (未说明机构), Yinshang Guo (未说明机构), Haitao Qian (未说明机构), Yiming Cheng (未说明机构) 💡 毒舌点评 论文在解决真实对话场景TSE训练的核心难题上思路清晰且务实,构建大规模真实数据集和提出多维代理损失的联合训练框架是有效且有工程价值的贡献。然而,作为一项方法研究,其实验设计存在显著缺陷:完全缺失对四个核心损失函数的消融研究,使得“联合优化”策略的有效性成谜;与强基线的对比仅限于排行榜,未在控制条件下进行公平比较。这削弱了其核心创新的说服力。 ...

2026-07-10 · 更新于 2026-08-14 · 2 min · 314 words

语音/音乐/音频论文速递 2026-07-10

语音/音乐/音频论文速递 2026-07-10 共分析 19 篇论文 ⚡ 今日概览 📥 抓取 19 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 4篇 ████ #音乐转录 2篇 ██ #语音质量评估 2篇 ██ #多模态模型 2篇 ██ #音乐生成 1篇 █ #音频事件检测 1篇 █ #语音分离 1篇 █ #语音情感识别 1篇 █ 📊 论文评分排行榜(19 篇,按分数降序) 排名 论文 总分 分档 文档类型 主任务 🥇 A Quantized Native Runtime for On-Device Semantic Audio 8.4分 前25% 系统技术报告 #音乐生成 🥈 MuScriptor: An Open Model for Multi-Instrument Music Tr 8.3分 前25% 系统技术报告 #音乐转录 🥉 A Self-Supervised Approach for Minimal-Annotation Hydro 8.3分 前25% 系统技术报告 #音频事件检测 4. COALA: Robust Contextualized Speech-augmented Language 8.2分 前25% 方法研究 #语音识别 5. PS4: Proxy-Supervised Joint Training for Real Target Sp 8.0分 前25% 系统技术报告 #语音分离 6. MulTTiPop: A Multitrack Transcription Dataset for Pop M 7.7分 前25% 数据集与基准 #音乐转录 7. SHAP-Weighted Cross-Modal Expert Fusion for Emotion and 7.7分 前25% 方法研究 #语音情感识别 8. When Synthetic Speech Is All You Have: Better Call GRPO 7.7分 前25% 方法研究 #语音识别 9. Structural Bottlenecks on Frequency Representation in E 7.6分 前25% 方法研究 #音频生成 10. A Reliability Assessment of LALM Audio Judges for Full- 7.1分 前50% 系统技术报告 #语音质量评估 11. Inverse-designed meta processing units for multi-task n 6.9分 前50% 系统技术报告 #音频理解 12. Multimodal Unlearning Across Vision, Language, Video, a 6.9分 前50% 综述 #多模态模型 13. Best-of-\(N\) TTS Evaluation is Confounded by ASR Family 6.7分 前50% 方法研究 #语音质量评估 14. Why Do You Say It Like That? A Phoneme-Level Framework 6.5分 前50% 方法研究 #语音伪造检测 15. It Takes Few to TANGO: A Quantized Distributed Model fo 6.5分 前50% 系统技术报告 #语音增强 16. On the Role of Conversational Timing in Synthetic Train 6.4分 前50% 方法研究 #语音识别 17. Diarization-Guided Qwen-ASR Adaptation for Multilingual 5.7分 前50% 系统技术报告 #语音识别 18. Multimodal Digital Biomarker for Asthma: Complementary 5.3分 后50% 应用研究 #多模态模型 19. Vidu S1: A Real-Time Interactive Video Generation Model 5.2分 后50% 系统技术报告 #音视频交互 📋 论文列表 🥇 A Quantized Native Runtime for On-Device Semantic Audio Generation 8.4/10 | 创新 1.3/2 | 严谨 1.3/1.5 | 实验 1/1.5 | 清晰 0.8/1 | 影响 1.2/1.5 | 开源 1/1.5 | 复现 0.3/0.5 | 工程 1.5/1.5 ...

2026-07-10 · 更新于 2026-08-14 · 17 min · 3559 words

MADB: A Large-Scale Music Aesthetics Dataset with Professional and Multi-Dimensional Annotations

📄 MADB: A Large-Scale Music Aesthetics Dataset with Professional and Multi-Dimensional Annotations #音乐理解 #数据集 #基准测试 #对比学习 #多模态模型 8.1/10 | 创新 1.5/2 | 严谨 1/1.5 | 实验 1/1.5 | 清晰 0.9/1 | 影响 1/1.5 | 开源 1/1.5 | 复现 0.5/0.5 | 工程 1.2/1.5 🔥 8.1/10 | 前25% | #音乐理解 | #对比学习 | #数据集 #基准测试 | arxiv 👥 作者与机构 第一作者:Sirui Zhang(中央音乐学院、北京通用人工智能研究院) 通讯作者:Duo Xu(天津音乐学院、北京通用人工智能研究院)、Xin Jin(北京电子科技学院、北京通用人工智能研究院)、Feng Yu(中央音乐学院、北京通用人工智能研究院)、Songchun Zhu(北京大学、北京通用人工智能研究院) 作者列表:Sirui Zhang(中央音乐学院、北京通用人工智能研究院)、Tianle Wang(中央音乐学院、北京通用人工智能研究院)、Xinyi Tong(中央音乐学院、北京通用人工智能研究院)、Peiyang Yu(中央音乐学院、北京通用人工智能研究院)、Jishang Chen(中央音乐学院、北京通用人工智能研究院)、Liangke Zhao(中央音乐学院、北京通用人工智能研究院)、Haoxin Zhang(中央音乐学院、北京通用人工智能研究院)、Duo Xu(天津音乐学院、北京通用人工智能研究院)、Xin Jin(北京电子科技学院、北京通用人工智能研究院)、Feng Yu(中央音乐学院、北京通用人工智能研究院)、Songchun Zhu(北京大学、北京通用人工智能研究院) 💡 毒舌点评 该工作为音乐美学评估贡献了目前最大规模、最细粒度的专业标注基准,多维度框架与多标注者设计很有诚意,显著超越了现有MusicEval/SongEval等数据集。然而,基准实验仅停在轻量回归和零样本LLM预测,缺乏精心设计的专用美学模型对比,且训练超参数几乎完全不公开,削弱了其作为“benchmark”的深度说服力。CLAP的语义适应增益微弱,暴露了当前音文对齐模型在捕捉细粒度美学信号上的根本性局限,而论文对此并未提出有效的解决方案。 ...

2026-07-09 · 更新于 2026-08-14 · 6 min · 1075 words

MMGenre: Benchmarking Singing Voice Synthesis across Multiple Musical Genres

📄 MMGenre: Benchmarking Singing Voice Synthesis across Multiple Musical Genres #基准测试 #领域适应 #数据集 8.3/10 | 创新 1.5/2 | 严谨 1.2/1.5 | 实验 1.1/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 1.5/1.5 | 复现 0.2/0.5 | 工程 1/1.5 🔥 8.3/10 | 前25% | #基准测试 | #领域适应 | #数据集 | arxiv 👥 作者与机构 第一作者:Wenhao Feng(AIM3 Lab, Renmin University of China) 通讯作者:未明确说明(通讯邮箱为 wenhaofeng@ruc.edu.cn,推断为第一作者) 作者列表:Wenhao Feng(Renmin University of China)、Yuxun Tang(Renmin University of China)、Jiatong Shi(Carnegie Mellon University)、Qin Jin(Renmin University of China) 💡 毒舌点评 本文以“流派”为刀,一刀切开了歌唱合成领域长期自我麻醉的“风格多样性”幻觉——所有模型在非流行曲风上集体摆烂的雷达图堪称年度恐怖片。Suno 代孕产出的数据集虽有“合法避税”之巧妙,但用合成数据去诊断合成系统,到底是黑吃黑还是互相照镜子,仍要打个问号。Gemini 打分的“流派判官”角色虽与人类看似相关不低,但在 5 分制的狭窄空间里对“野嗓门”和“伪摇滚”的区别有多敏锐,恐怕连 Gemini 自己都说不清。 ...

2026-07-09 · 更新于 2026-08-14 · 4 min · 699 words

Text-Independent Speaker Verification Using Discrete Audio Tokens

📄 Text-Independent Speaker Verification Using Discrete Audio Tokens #说话人验证 #知识蒸馏 #语音编码 #基准测试 5.2/10 | 创新 1/2 | 严谨 1/1.5 | 实验 0.8/1.5 | 清晰 0.7/1 | 影响 0.8/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 0.6/1.5 📝 5.2/10 | 后50% | #说话人验证 | #知识蒸馏 | #语音编码 #基准测试 | arxiv 👥 作者与机构 第一作者:Zheng Liang(The Hong Kong Polytechnic University) 通讯作者:未明确说明,推测为 Kong Aik Lee(The Hong Kong Polytechnic University) 作者列表:Zheng Liang(The Hong Kong Polytechnic University)、Junjie Li(The Hong Kong Polytechnic University)、Kong Aik Lee(The Hong Kong Polytechnic University) 💡 毒舌点评 这篇论文用一个标准的“蒸馏教你说话”范式,让离散token在说话人验证任务上勉强跟上了Fbank的步伐。诊断实验的思路尚可,但方法本质上是知识蒸馏在跨特征域的工程迁移,理论贡献聊胜于无。更糟糕的是,在对比基线严重不足、代码与模型完全缺失的情况下,文章依然试图得出“开创了有效范式”的结论,未免过于乐观。这更像是一份技术报告,而非一项经得起顶会拷问的扎实研究。 ...

2026-07-09 · 更新于 2026-08-14 · 2 min · 415 words

语音/音乐/音频论文速递 2026-07-09

语音/音乐/音频论文速递 2026-07-09 共分析 13 篇论文 ⚡ 今日概览 📥 抓取 13 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音识别 4篇 ████ #音乐理解 2篇 ██ #基准测试 1篇 █ #语音交互 1篇 █ #语音情感识别 1篇 █ #语音活动检测 1篇 █ #音乐生成 1篇 █ #说话人验证 1篇 █ 📊 论文评分排行榜(13 篇,按分数降序) 排名 论文 总分 分档 主任务 🥇 MMGenre: Benchmarking Singing Voice Synthesis across Mu 8.3分 前25% #基准测试 🥈 Decoupling Conversational Dynamics in Full-Duplex Spoke 8.2分 前25% #语音交互 🥉 MADB: A Large-Scale Music Aesthetics Dataset with Profe 8.1分 前25% #音乐理解 4. Gradient-Based Speech-to-Text Alignment for Any ASR Mod 7.3分 前50% #语音识别 5. UBG-Net: An Uncertainty-aware Bayesian Gating Network f 7.1分 前50% #语音识别 6. Compress the Cache, Not the Speech Embedding: KV Compre 7.0分 前50% #语音识别 7. Audio Sentiment Analysis via Distillation and Cross-Mod 6.9分 前50% #语音情感识别 8. Multimodal Voice Activity Projection for Turn-Taking in 6.7分 前50% #语音活动检测 9. Extending Xenakis: From Architectural Geometry to Sonif 5.6分 前50% #音乐生成 10. Text-Independent Speaker Verification Using Discrete Au 5.2分 后50% #说话人验证 11. Transformer-based segmentation of prosodic boundaries i 4.0分 后50% #语音识别 12. Rag Classification of Tagore Songs using Symbolic Music 3.0分 后50% #音乐理解 13. EscFOA: Enhancing Spatial Learning for Visually Impaire 2.8分 后50% #教育 📋 论文列表 🥇 MMGenre: Benchmarking Singing Voice Synthesis across Multiple Musical Genres 8.3/10 | 创新 1.5/2 | 严谨 1.2/1.5 | 实验 1.1/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 1.5/1.5 | 复现 0.2/0.5 | 工程 1/1.5 ...

2026-07-09 · 更新于 2026-08-14 · 13 min · 2708 words

Goodbye Equal Error Rate, Hello Local Information Disclosure: Evaluating Voice Anonymisation against 1-to-N Linkage Threats

📄 Goodbye Equal Error Rate, Hello Local Information Disclosure: Evaluating Voice Anonymisation against 1-to-N Linkage Threats #语音转换 #理论分析 #基准测试 #模型比较 6.5/10 | 创新 1.5/2 | 严谨 1/1.5 | 实验 0.9/1.5 | 清晰 1/1 | 影响 1.2/1.5 | 开源 0/1.5 | 复现 0.2/0.5 | 工程 0.7/1.5 ✅ 6.5/10 | 前50% | #语音转换 | #理论分析 | #基准测试 #模型比较 | arxiv 👥 作者与机构 第一作者:Dāvis Šterns (Aalto University, Finland) 通讯作者:未说明 作者列表:Dāvis Šterns (Aalto University, Finland), Konstantinos Drossos (Nokia, Finland), Natasha Fernandes (Macquarie University, Australia), Tom Bäckström (Aalto University, Finland), Catuscia Palamidessi (Inria, France) 💡 毒舌点评 这篇论文用信息论的放大镜精准定位了语音匿名化社区长期靠EER“平均及格”的幻觉,LID指标把局部隐私塌方从全局大海绵里挤了出来,动机清晰且论据有力。但读完之后,论文的落地性被“零开源”和校准对正态假设的强依赖死死卡住,更像一份立场鲜明的审计檄文而非立即可用的攻击工具箱——社区想跟上你的旗帜,却发现连旗杆都没递出来。 ...

2026-07-08 · 更新于 2026-08-14 · 3 min · 459 words

Music I Care About: Automated Multimodal Benchmarking of LLM Music Perception Skills on (Almost) Any Music

📄 Music I Care About: Automated Multimodal Benchmarking of LLM Music Perception Skills on (Almost) Any Music #音乐理解 #基准测试 7.8/10 | 创新 1.2/2 | 严谨 1/1.5 | 实验 1.1/1.5 | 清晰 0.7/1 | 影响 0.9/1.5 | 开源 1.2/1.5 | 复现 0.5/0.5 | 工程 1.2/1.5 ✅ 7.8/10 | 前25% | #音乐理解 | #提示学习 | #基准测试 | arxiv 👥 作者与机构 第一作者:Tomáš Sourada(查尔斯大学数学与物理学院,形式与应用语言学研究所) 通讯作者:未明确提及,推断为 Jan Hajič jr 作者列表:Tomáš Sourada,Katia Vendrame,Jan Hajič jr 机构:查尔斯大学数学与物理学院,形式与应用语言学研究所 💡 毒舌点评 论文用"用户数据即benchmark"的元框架戳中静态基准的致命伤,程序化生成和基准尺寸校准做得聪明又实用。遗憾的是,问题模板仍停留在音乐理论的"小学算术"级别,无输入基线在修改提示语后才可能更干净,现在对"真正在听"的论证依然有点虚。跨模态对齐的想法很好,但音频模态下"第n个音符"这种需要强音高追踪的题目,本质上就比读乐谱难一个量级——这不完全是模型的锅,部分是出题的问题。 ...

2026-07-08 · 更新于 2026-08-14 · 2 min · 346 words

语音/音乐/音频论文速递 2026-07-08

语音/音乐/音频论文速递 2026-07-08 共分析 26 篇论文 ⚡ 今日概览 📥 抓取 26 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音属性识别 3篇 ███ #音频分类 3篇 ███ #语音合成 3篇 ███ #语音识别 3篇 ███ #声源定位 2篇 ██ #音乐生成 2篇 ██ #语音交互 1篇 █ #音频事件检测 1篇 █ 📊 论文评分排行榜(26 篇,按分数降序) 排名 论文 总分 分档 主任务 🥇 Hierarchical Acoustic-Semantic Modeling: Modality Separ 9.2分 前10% #语音交互 🥈 Propose and Attend: Training-free MLLM Grounding Confid 8.2分 前25% #音频事件检测 🥉 Music I Care About: Automated Multimodal Benchmarking o 7.8分 前25% #音乐理解 4. Escaping the Procrustean Bed: Groupwise Orthogonal Conn 7.8分 前25% #语音属性识别 5. TriA Pipeline: A Large-Scale Automatic Audio Annotation 7.4分 前50% #音频分类 6. InsideSSL: Understanding Self-Supervised Speech Represe 7.4分 前50% #语音属性识别 7. Precise Video-to-Audio Generation with Cross-Modal Alig 7.4分 前50% #音视频生成 8. WordVoice: Explicit and Decoupled Multi-Dimensional Wor 7.2分 前50% #语音合成 9. ForestIR: Physics-Informed Forest Sound Simulation for 7.2分 前50% #声源定位 10. Uncovering Latent Depression Severity for Binary Depres 7.0分 前50% #音视频理解 11. Determinantal point process sampling for bioacoustic ac 6.9分 前50% #音频分类 12. From Sinhala to Dhivehi: Cross-Lingual Transfer Learnin 6.6分 前50% #语音识别 13. Goodbye Equal Error Rate, Hello Local Information Discl 6.5分 前50% #语音转换 14. BlueMagpie-TTS: A Token-Efficient Tokenizer, Language M 6.5分 前50% #语音合成 15. Fréchet Distance Loss on Speech Representations for Tex 6.5分 前50% #语音合成 16. NAVER LABS System Re-implementation for the IWSLT 2026 6.4分 前50% #语音翻译 17. Few-Shot Class-Incremental Audio Classification Using P 6.3分 前50% #音频分类 18. Gemma 4 Technical Report 6.2分 前50% #语音识别 19. Revisiting the Relation Between Language Model Perplexi 6.0分 前50% #语音识别 20. Multimodal Video-to-Music Recommendation via Semantic R 5.4分 后50% #音乐检索 21. Designing Maintainable Hybrid Generative Systems: A Qua 5.3分 后50% #音乐生成 22. Learning-based Physics-Constrained Neural Kernel for So 5.2分 后50% #声源定位 23. Distributed Multichannel Wiener Filtering for Topology- 5.1分 后50% #语音增强 24. Flow Matching-Based Speech Source Separation with Best- 4.9分 后50% #语音分离 25. Umm… With Transformers? Insights from Filled Pause Us 4.8分 后50% #语音属性识别 26. From Textural Counterpoint to Feature Encoding: A Multi 2.1分 后50% #音乐生成 📋 论文列表 🥇 Hierarchical Acoustic-Semantic Modeling: Modality Separation and Semantic Coherence for Full-Duplex SLMs 9.2/10 | 创新 1.8/2 | 严谨 1.2/1.5 | 实验 1.1/1.5 | 清晰 0.8/1 | 影响 1.3/1.5 | 开源 1.2/1.5 | 复现 0.3/0.5 | 工程 1.5/1.5 ...

2026-07-08 · 更新于 2026-08-14 · 20 min · 4152 words