BlueMagpie-TTS: A Token-Efficient Tokenizer, Language Model, and TTS for Taiwanese-Accent Code-Switching Speech
📄 BlueMagpie-TTS: A Token-Efficient Tokenizer, Language Model, and TTS for Taiwanese-Accent Code-Switching Speech #语音合成 #多语言 #领域适应 #参数高效微调 #扩散模型 6.5/10 | 创新 1.2/2 | 严谨 1.2/1.5 | 实验 1/1.5 | 清晰 0.8/1 | 影响 0.6/1.5 | 开源 0.2/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 ✅ 6.5/10 | 前50% | #语音合成 | #领域适应 | #多语言 #参数高效微调 | arxiv 👥 作者与机构 第一作者:Ho Lam Chung(未说明) 通讯作者:未说明 作者列表:Ho Lam Chung(未说明)、Bo-Xuan Zheng(未说明)、Cheng-Chieh Huang(未说明)、Cheng-Han Chang(未说明)、Jung-Ching Chen(未说明)、Lok-Lam Ieong(未说明)、Ting-Lin Hsiao(未说明)、Yu-Cheng Lee(未说明)、Yi-Hsin Chung(未说明)、Yu-Kai Guo(未说明)、Hung-yi Lee(未说明) 💡 毒舌点评 论文从字节级 BPE 的 tokenizer 到十亿参数语言模型前端再到 TTS 合成,堆出了一条完整的台湾本土化语音合成栈。PangolinTokenizer 在台湾多脚本文本上做到了最低 token 率和最高词汇效率,Barbet 作为前端在中文生成任务上压过同类模型,BlueMagpie-TTS 的 CER 从 11.45% 降到 4.81%,盲听偏好遥遥领先。但整套方案的核心(声学堆栈、BPE、Mamba 混合架构)几乎全部复用现有组件,真正的创新在于针对台湾语境做数据适配和前端替换,并通过桥接蒸馏与联合微调把各部分粘在一起。更致命的是,所有资源一概未开源,整个 pipeline 的复现性极差,学术价值和社区推动力因此大打折扣。 ...