Transformer

📄 SpeechLLM Meets Federated Learning for End-to-End ASR: English and Italian Case Studies 标签：#语音识别 #联邦学习 #音频理解 #Transformer #模型评估 7.1/10 | 创新 1/2 | 严谨 1/1.5 | 实验 0.8/1.5 | 清晰 0.8/1 | 影响 1/1.5 | 开源 1.2/1.5 | 复现 0.1/0.5 | 工程 1.2/1.5 ✅ 7.1/10 | 前50% | 文档类型：方法研究 | 评分置信度：高 | #语音识别 | #联邦学习 | #音频理解 #Transformer | arxiv 👥 作者与机构 第一作者：Mohamed Nabih Ali（未说明） 通讯作者：未说明 作者列表：Mohamed Nabih Ali（未说明）、Daniele Falavigna（未说明）、Alessio Brutti（未说明） 💡 毒舌点评 论文首次将联邦学习与 SpeechLLM 结合用于端到端 ASR，选题具有应用价值，框架设计也基本合理。但方法创新十分有限，本质上是“LoRA + 学习率衰减的 FedAvg”的工程组合，且对“通信高效”这一核心卖点的量化分析完全缺失。实验仅在小规模、干净数据上进行，客户端划分过于理想化，对真实联邦场景中常见的强非IID、设备算力异构等挑战的压力测试严重不足。总体而言，工作停留在概念验证阶段，距离有说服力的系统创新尚有明显距离。 ...

📄 Text-Prompted CLAP: Learning Query-Conditioned Audio Representations via Contrastive Learning 标签：#音频理解 #对比学习 #参数高效微调 #音频检索 #Transformer 6.6/10 | 创新 1.2/2 | 严谨 1.2/1.5 | 实验 1.1/1.5 | 清晰 0.8/1 | 影响 1/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ✅ 6.6/10 | 前50% | 文档类型：方法研究 | 评分置信度：高 | #音频理解 | #对比学习 | #参数高效微调 #音频检索 | arxiv 👥 作者与机构 第一作者：Mohan Li（未说明） 通讯作者：未说明 作者列表：Mohan Li（未说明）、Rama Doddipatla（未说明）、Philip C. Woodland（未说明） 💡 毒舌点评 本文在 CLAP 上嫁接交叉注意力以实现查询条件化音频表示，思路直观且训练方案务实，利用 Audio-MCQ 数据监督训练也颇具巧思，在多个基准上取得了稳健提升。但所谓“轻量级”方案本质上是对 pretrained backbone 做后装式改造，创新深度有限；更致命的是完全不开源，方法细节虽写了但关键实现（如融合模块与原有 encoder 的精确对接、池化策略等）存在模糊地带，复现门槛高，难以推动后续工作。 ...

📄 Unlocking Spatial Grounding in Large Audio-Visual Retrieval models 标签：#声源定位 #对比学习 #多模态模型 #音频理解 #Transformer 7.2/10 | 创新 1.6/2 | 严谨 1.3/1.5 | 实验 1.2/1.5 | 清晰 0.8/1 | 影响 1/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ✅ 7.2/10 | 前50% | 文档类型：方法研究 | 评分置信度：高 | #声源定位 | #对比学习 | #多模态模型 #音频理解 | arxiv 👥 作者与机构 第一作者：Hugo Malard（LTCI, Télécom Paris, Institut Polytechnique de Paris, France） 通讯作者：Stéphane Lathuilière（Inria at Université Grenoble Alpes, CNRS, LJK, France），根据其机构隶属关系及项目主导角色推断 作者列表：Hugo Malard（LTCI, Télécom Paris, Institut Polytechnique de Paris）、Michel Olvera（LTCI, Télécom Paris, Institut Polytechnique de Paris）、Sanjeel Parekh（Meta, Reality Labs Research）、Gaël Richard（LTCI, Télécom Paris, Institut Polytechnique de Paris）、Slim Essid（NVIDIA, France）、Stéphane Lathuilière（Inria at Université Grenoble Alpes, CNRS, LJK） 💡 毒舌点评 这篇工作巧妙地证明了大型检索模型内部存在可解锁的空间信息，并以此在多个基准上大幅碾压此前最佳结果，做到了“鱼与熊掌兼得”。然而，声源静默时效果不佳这一已知难题并未被解决，且推理时的音频条件化需求使得该局部化模块无法直接用于大规模检索，管挖不管填，留下了明显的实用性缺口。 ...

📄 VAD to the Bone: Ultra-Tiny Speech Activity Detection for Edge Deployment 标签：#语音活动检测 #模型压缩 #音频理解 #Transformer #模型评估 7.4/10 | 创新 1/2 | 严谨 1.1/1.5 | 实验 1/1.5 | 清晰 1/1 | 影响 0.8/1.5 | 开源 1/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 ✅ 7.4/10 | 前50% | 文档类型：系统技术报告 | 评分置信度：高 | #语音活动检测 | #模型压缩 | #音频理解 #Transformer | arxiv 👥 作者与机构 第一作者：Stephen Bauer（Analog Devices, Inc.） 通讯作者：Sheila Seidel（Analog Devices, Inc. / UCLA） 其他作者：Shanza Iftikhar（Analog Devices, Inc.）、Scott Veidenheimer（Analog Devices, Inc.）、Gorkem Ulkar（Analog Devices, Inc.） 💡 毒舌点评 这篇论文把“为了让VAD能在单片机上跑通而自废武功”这件事做到了极致：砍掉循环层、禁止非因果、只用标准算子，然后用一堆工程技巧把性能往回捞。四个部署约束清单确实戳中了现有轻量VAD的肺管子，剪枝+量化的组合拳也打出了一套漂亮的工程样板。但泛化性评估的缺失是个大窟窿，仅靠AVA-Speech一个测试集撑不起“deployment-ready”的旗帜，更像是在单一赛道定制了一辆无敌的规则特化车。角度感知QAT在二分类下的那点提升，换个场景是否依然灵验也得打个问号。 ...

语音/音乐/音频论文速递 2026-07-29 共分析 27 篇论文 ⚡ 今日概览 📥 抓取 27 篇 → 🔬 深度分析完成 🏷️ 热门方向 方向 数量 分布 #语音交互 2篇 ██ #语音属性识别 2篇 ██ #语音识别 2篇 ██ #音视频理解 2篇 ██ #音视频问答 2篇 ██ #音频理解 2篇 ██ #Transformer 1篇 █ #声源定位 1篇 █ 📊 论文评分排行榜（27 篇，按分数降序） 排名 论文 总分 分档 文档类型 主任务 🥇 faster-enhancer.c: A Dependency-Free int8 Runtime for S 8.7分 前25% 系统技术报告 #语音增强 🥈 OmniScope: Modality-Decoupled Token Compression for Omn 8.3分 前25% 方法研究 #音视频问答 🥉 AVE-Compass: Towards Holistic Evaluation for Audio-Vide 8.3分 前25% 数据集与基准 #多模态模型 4. Extracting Voice Styles from Frozen TTS Models via Grad 7.9分 前25% 方法研究 #语音克隆 5. CARE: A Multimodal Corpus for Studying Speech and Non-V 7.9分 前25% 数据集与基准 #音视频理解 6. GraphIDyOM: A graph-native Python reimplementation of I 7.8分 前25% 系统技术报告 #音乐理解 7. VAD to the Bone: Ultra-Tiny Speech Activity Detection f 7.4分 前50% 系统技术报告 #语音活动检测 8. Unlocking Spatial Grounding in Large Audio-Visual Retri 7.2分 前50% 方法研究 #声源定位 9. SpeechLLM Meets Federated Learning for End-to-End ASR: 7.1分 前50% 方法研究 #语音识别 10. Joint Text-Audio Alignment for EEG-to-Text Decoding in 7.0分 前50% 方法研究 #语音交互 11. OmniDelta: Skill-Driven Budget Allocation for Token Com 7.0分 前50% 方法研究 #音视频问答 12. Text-Prompted CLAP: Learning Query-Conditioned Audio Re 6.6分 前50% 方法研究 #音频理解 13. Towards Operational Conversational Intelligence: A Spee 6.4分 前50% 系统技术报告 #说话人日志 14. Parallel Decoding Distillation for Fast Image and Video 6.2分 前50% 方法研究 #音视频生成 15. Spacing Out: On the Reliability of Binaural Music Sourc 6.1分 前50% 方法研究 #音乐源分离 16. MyMentorLLM: A psychotherapy GenAI environment with mul 5.9分 前50% 系统技术报告 #语音交互 17. MusiChat: Vibe Composing for Music Creation 5.8分 前50% 系统技术报告 #音乐生成 18. AMRD: Adaptive Multi-Teacher Relational Distillation fo 5.6分 前50% 方法研究 #语音情感识别 19. Multi-Phonation Graph Learning with Self-Supervised Spe 5.5分 前50% 方法研究 #语音属性识别 20. Evaluation of forced alignment of code-mixed speech: th 5.4分 后50% 方法研究 #语音识别 21. A Cross-lingual Comparison of Human and Classification 5.1分 后50% 方法研究 #Transformer 22. From Semantics to Readout: Mechanistic Understanding of 5.1分 后50% 方法研究 #音频理解 23. Finding the noise: Zero-shot AI Music Detection 5.1分 后50% 方法研究 #无监督学习 24. Depression Markers in Speech: An Approach based on Trac 5.1分 后50% 应用研究 #语音属性识别 25. Self-Supervised Audio Representation Learning for Pedia 5.0分 后50% 应用研究 #音频分类 26. DynaBridge: Dynamic Summary-Guided Cross-Task Multimoda 4.9分 后50% 方法研究 #音视频理解 27. Device Invariance using Domain Adaptation on Acoustic S 4.2分 后50% 方法研究 #领域适应 📋 论文列表 🥇 faster-enhancer.c: A Dependency-Free int8 Runtime for Streaming Speech Enhancement on Commodity CPUs 8.7/10 | 创新 1.2/2 | 严谨 1.3/1.5 | 实验 1/1.5 | 清晰 0.9/1 | 影响 0.8/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.5/1.5 ...

📄 Do Visual Features Improve Other-Initiated Repair Detection? A Dyadic Multimodal Approach 标签：#音视频交互 #多模态模型 #音频理解 #Transformer #模型评估 5.9/10 | 创新 1.2/2 | 严谨 0.9/1.5 | 实验 0.7/1.5 | 清晰 0.7/1 | 影响 0.7/1.5 | 开源 1/1.5 | 复现 0.3/0.5 | 工程 0.4/1.5 📝 5.9/10 | 前50% | 文档类型：方法研究 | 评分置信度：中 | #音视频交互 | #多模态模型 | #音频理解 #Transformer | arxiv 👥 作者与机构 第一作者：Anh Ngo（ALMAnaCH, INRIA Paris; ISIR, Sorbonne University, Paris, France） 通讯作者：未说明 作者列表：Anh Ngo（ALMAnaCH, INRIA Paris; ISIR, Sorbonne University）、Nicolas Rollet（ALMAnaCH, INRIA Paris; Télécom Paris, SES, Institut Polytechnique de Paris, I3-CNRS）、Catherine Pelachaud（CNRS, ISIR, Sorbonne University）、Chloé Clavel（ALMAnaCH, INRIA Paris; Télécom Paris, LTCI, Institut Polytechnique de Paris） 💡 毒舌点评 这篇论文做了一件对话分析和计算语言学早该有人做的事：把视觉行为系统地编码进OIR检测模型。特征工程有CA理论底子，不是拍脑袋凑的。但致命伤是数据规模——47个OIR正例，配上30多个特征、三窗口拆分和Transformer编码器，这是标准的"用小数据玩深度学习"高危操作。分类F1标准差13.2个百分点，说明模型在不同fold上表现像过山车，核心主张"视觉特征有用"的统计基础有多脆弱，各位自行判断。跨语料分析发现了场景依赖性，总算贡献了点insight，但整体仍是个理论驱动的小规模概念验证，离"对话系统可用模块"这条线还差得远。 ...

📄 Earnings25: A Comprehensive 500-Hour Speech Benchmark for Finance 标签：#语音识别 #数据集 #领域适应 #音频理解 #Transformer 7.1/10 | 创新 0.8/2 | 严谨 1/1.5 | 实验 0.6/1.5 | 清晰 0.9/1 | 影响 0.8/1.5 | 开源 1.5/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 ✅ 7.1/10 | 前50% | 文档类型：数据集与基准 | 评分置信度：高 | #语音识别 | #领域适应 | #数据集 #音频理解 | arxiv 👥 作者与机构 全部作者均来自 Bloomberg（彭博），无其他机构。 💡 毒舌点评 这篇文章干了一件“早就该做”但“做了也没那么惊艳”的事。它给金融ASR社区端上了一个行业均衡、元数据丰富的标准化评测基准，想法务实，产线化工程很扎实。但问题同样刺眼：500小时的大摊子，基线却只有现成Whisper和Parakeet的零样本推理，既没有领域微调，也没有和Earnings-22的同台对比，更没有对齐质量的人工校验。这就好比精心搭好了一个顶级赛道，却只让几辆没调校过的原厂车跑了一圈，然后告诉大家“这个弯道很难”——基准的真正区分度和对领域适应的驱动价值，完全没有被证明。 📌 核心摘要 Earnings25 是一个面向英语财报电话会议的金融领域语音识别（ASR）基准。它包含两个互补测试集：testset-full为498小时2025年Q4 S&P 500公司完整财报电话录音，保留完整对话动态；testset-segmented为46小时从2025全年美国公司财报电话中按290个行业分层采样出的5-10分钟片段，确保每个细分行业恰好有一段。其构建流程为：（1）基于Bloomberg行业分类对超2,000场美国公司财报电话进行分层采样；（2）利用NeMo CTC模型执行强制对齐得到词级时间戳；（3）将对齐后语音贪婪聚合成5-10分钟片段，经内容过滤和说话人轮次边界优化后得到干净评测单元。数据集附带了包括说话人角色（高管/分析师/运营商）、行业分类、公司标识在内的结构化元数据，支持角色感知和行业感知的细粒度WER分析。基线实验显示，Parakeet-TDT在testset-full上WER为10.8%，在testset-segmented上为11.1%；术语密集型行业（如生物科技、制药）WER可达15.4%，显著高于整体平均，验证了行业均衡设计对暴露长尾域偏移的有效性。主要局限为仅限英语和美国公司，且强制对齐噪声未被定量评估。 🔗 开源详情 代码：是，论文在Zenodo元数据页面提供了GitHub仓库链接（https://github.com/bloomberg/earnings25）。 模型权重：未提供。使用的均为开源模型： OpenAI Whisper（base, medium, large-v2）：https://github.com/openai/whisper NVIDIA NeMo Parakeet-TDT-0.6B-v2：https://huggingface.co/nvidia/parakeet-tdt-0.6b-v2 数据集：Earnings25，包含音频、转录稿、元数据、标注与评估划分，通过Zenodo发布，链接：https://doi.org/10.5281/zenodo.18762168。转录稿、标注、元数据、评估划分和对齐结果使用CC BY 4.0许可，音频受原始内容提供者条款约束。 Demo：未提及。 复现材料：论文中给出了固定随机种子（2025）、PYTHONHASHSEED=2025、确定性解码设置、标准化评估变体等。代码仓库提供了产线代码。 论文中引用的开源项目： Whisper：https://github.com/openai/whisper NVIDIA NeMo：https://github.com/NVIDIA/NeMo SPGISpeech系列：SPGISpeech（https://arxiv.org/abs/2104.02014）和SPGISpeech2（文中引用未给具体链接），数据集链接：https://datasets.kensho.com/spgispeech Earnings-21与Earnings-22：Earnings-21 https://github.com/revdotcom/speech-datasets；Earnings-22 https://github.com/revdotcom/speech-datasets wav2vec 2.0：https://github.com/facebookresearch/fairseq/tree/main/examples/wav2vec 🏗️ 方法概述和架构 Earnings25 的构建并非一个算法模型，而是一套标准化的数据产线，其核心流程为“分层采样 → 强制对齐 → 音段切分 → 元数据附加”，最终生成两个标准测试集。 ...

📄 Explainable AI through the Lens of Material Agency: Enabling Musical Interface Design with Neural Audio Models 标签：#音乐生成 #变分自编码器 #音频理解 #Transformer #模型评估 6.7/10 | 创新 1/2 | 严谨 1/1.5 | 实验 0.5/1.5 | 清晰 0.8/1 | 影响 0.8/1.5 | 开源 1.5/1.5 | 复现 0.1/0.5 | 工程 1/1.5 ✅ 6.7/10 | 前50% | 文档类型：应用研究 | 评分置信度：中 | #音乐生成 | #变分自编码器 | #音频理解 #Transformer | arxiv 👥 作者与机构 第一作者：Shuoyang Jasper Zheng（Queen Mary University of London, Centre for Digital Music） 通讯作者：未明确指定（按惯例可能为第一作者） 作者列表：Shuoyang Jasper Zheng, Anna Xambó Sedó（Queen Mary University of London, Centre for Digital Music）, Nick Bryan-Kinns（University of the Arts London, Creative Computing Institute） 💡 毒舌点评 论文试图从“材料能动性”视角重新包装“工具包+教程”的工作，概念嫁接的野心值得肯定。但作为一篇学术论文，其核心贡献——即“物质可解释性”框架——完全基于对自家工具包开发经验的自我反思，缺乏任何形式的方法论验证。仅凭4位受邀请艺术家的轶事反馈，就得出三条普适性的设计建议，论证逻辑如同空中楼阁。工程上，将研究模型封装成Max/MSP外部对象的流水线工作，在NIME社区虽有实用价值，但技术深度和创新性均有限，更适合作为Demo或Short Paper发表，而非作为提出新概念框架的完整研究。 ...

📄 Expose Your Disguise: Recovering Source Speaker Identity From Voice Conversion 标签：#对比学习 #音频理解 #Transformer #模型评估 7.5/10 | 创新 1.2/2 | 严谨 1/1.5 | 实验 1/1.5 | 清晰 0.7/1 | 影响 1/1.5 | 开源 1.2/1.5 | 复现 0.4/0.5 | 工程 1/1.5 ✅ 7.5/10 | 前25% | 文档类型：方法研究 | 评分置信度：高 | #对比学习 | #Transformer | #音频理解 #模型评估 | arxiv 👥 作者与机构 第一作者：Hanlei Zhang（浙江大学） 通讯作者：Yanjiao Chen（浙江大学）、Yushi Cheng（浙江大学） 作者列表：Hanlei Zhang（浙江大学）、Zhongming Ma（浙江大学）、Mingyang Zhang（蚂蚁集团）、Tengfei Liu（蚂蚁集团）、Yushi Cheng（浙江大学）、Yanjiao Chen（浙江大学） 💡 毒舌点评 本文在声纹恢复这个细分安全任务上，通过一个精心设计的三分支架构取得了显著优于现有方法的性能，实验覆盖了多种VC方法和鲁棒性场景，论证相对扎实。然而，该方法本质上是对已知组件（ECAPA-TDNN backbone、AAM Loss、对比学习）的巧妙工程化组合，核心创新性有限；此外，在某些低质量转换方法（如VQVC、BNE）及极端噪声下的绝对性能仍偏低，其声称的"实时"推断（30ms）也缺乏足够的硬件与系统细节支撑。 ...

📄 Improving Zero-Shot Phonetic Classification through Language-Agnostic Articulatory Features 标签：#语音属性识别 #多任务学习 #自监督学习 #音频理解 #Transformer 5.3/10 | 创新 1.2/2 | 严谨 1.2/1.5 | 实验 0.6/1.5 | 清晰 0.9/1 | 影响 0.8/1.5 | 开源 0/1.5 | 复现 0.1/0.5 | 工程 0.5/1.5 📝 5.3/10 | 后50% | 文档类型：方法研究 | 评分置信度：中 | #语音属性识别 | #多任务学习 | #自监督学习 #音频理解 | arxiv 👥 作者与机构 第一作者：Ryo Magoshi（京都大学大学院情報学研究科） 通讯作者：未说明 作者列表：Ryo Magoshi（京都大学大学院情報学研究科）、Jaeyoung Lee（NTT, Inc.）、Shinsuke Sakai（京都大学大学院情報学研究科）、Tatsuya Kawahara（京都大学大学院情報学研究科） 💡 毒舌点评 本文用连续发音特征搞零样本音素分类，绕开了G2P标签的臭毛病，在稀有鼻音、送气等难题上吊打离散token，思路确实聪明。可惜实验就测了两个语言的两种对立，数据规模小，缺乏与MMS、Whisper这类更强基线的公平较量，而且代码、模型毫无开源迹象，让它“语言无关”的泛化大饼暂时只能闻着香，吃不到嘴。 📌 核心摘要 要解决的问题：基于G2P转换得到IPA标签训练的多语言音素基础模型，在零样本场景下对未见过语言的细微音素区别（如送气、鼻音部位）判别能力不足，且离散IPA token无法充分表征音素间的连续相似性。 方法核心：利用预训练XLS-R编码器配合发音特征分类模块（AFCM）提取24维连续发音特征向量，在目标段内选取峰值帧或进行段平均，通过计算与PanPhon模板向量的L1距离完成零样本音素分类。 与已有方法相比的新处：将原有的AF辅助训练直接提升为分类依据，替代离散token后验，并根据音素特性选择单帧或段内聚合策略，而非一律使用整段解码。 主要实验结果：在中国普通话送气/不送气二元分类上，AF单帧法达95.4%平衡准确率，显著优于POWSM的CTC方法（56.7%）；在日语四种鼻音四分类上，AF段平均法达到72.6%，远高于其他方法（最高59.0%），其中稀有的[ɴ̩]召回率从不足7%提高到38.5%。详细数据见下表： 任务 模型 方法 [ph] [p] [th] [t] [kh] [k] 平衡准确率 中文送气 POWSM Decoder 58.8 43.9 69.0 37.7 39.9 63.3 53.1 CTC single-frame 10.2 99.5 16.1 99.0 12.7 98.8 56.7 CTC segmental 11.9 99.3 20.5 98.3 16.1 98.5 58.3 XLS-R+AFCM CTC single-frame 92.7 98.4 90.9 98.8 89.3 95.7 94.5 CTC segmental 82.5 96.5 96.2 80.5 85.0 91.9 87.5 AF single-frame 93.2 97.9 91.4 99.3 93.6 94.1 95.4 AF segmental 2.8 100.0 1.9 99.6 1.7 100.0 50.8 任务 模型 方法 [m] [n] [N] [ɴ̩] 平衡准确率 日语鼻音 POWSM Decoder 53.7 68.1 63.9 1.0 46.7 CTC single-frame 73.1 87.2 32.7 1.0 48.5 CTC segmental 74.6 88.4 30.2 4.2 49.3 XLS-R+AFCM CTC single-frame 65.7 97.9 69.3 3.1 59.0 CTC segmental 62.7 99.7 46.5 6.2 53.8 AF single-frame 74.6 92.8 83.2 12.5 65.8 AF segmental 86.6 71.6 93.6 38.5 72.6 实际意义：展示了用低资源方式实现语言无关音素分类的可行性，有望用于L2发音训练、濒危语言记音和零样本ASR的音素集扩展。 主要局限性：仅在两个语言、两种音素对立上验证，范围过窄；AF模块依赖PanPhon，对复杂变体和强语境差异的泛化能力未检验；分类需提前知道候选IPA范畴，不是完全开放的零样本识别。 🔗 开源详情 代码：论文未提供代码仓库链接。 模型权重：论文未提供模型检查点或权重下载。 数据集：训练基于IPAPack++（提供Common Voice和FLEURS的G2P标注，https://huggingface.co/datasets/zipa/ipapack），中文评估用FLEURS中文测试集，日语评估用CSJ（Corpus of Spontaneous Japanese，https://ccd.ninjal.ac.jp/csj/）并采用人工验证的IPA标签。所有数据均引用公开资源，无自有数据发布。 Demo：未提供。 复现材料：未提供训练脚本、配置文件或详细复现说明；超参数已在4.1节给出，但缺少训练步数、模型结构细节等，完全复现困难。 引用的开源工具： PanPhon (mortensen-etal-2016-panphon): https://github.com/dmort27/panphon XLS-R ([babu22_interspeech]): https://github.com/facebookresearch/fairseq/tree/main/examples/wav2vec POWSM (li2026powsmphoneticopenwhisperstyle): 未找到公开代码库 Common Voice: https://commonvoice.mozilla.org FLEURS: https://huggingface.co/datasets/google/fleurs CSJ: https://ccd.ninjal.ac.jp/csj/ G2P工具 (Epitran, Phonemizer, Phonetisaurus等): Epitran: https://github.com/dmort27/epitran Phonemizer: https://github.com/bootphon/phonemizer Phonetisaurus: https://github.com/AdolfVonKleist/Phonetisaurus 🏗️ 方法概述和架构 本论文提出一种基于连续发音特征（Articulatory Feature, AF）向量的零样本音素分类框架，旨在解决现有语音基础模型在未见语言上对细微音素对立（如送气与不送气、鼻音部位）判别能力不足的问题。整体流程可概括为 “预训练编码器提取声学特征→双分支并行预测→时间聚合与模板匹配分类” 三条链路。 ...