MIDI-RAE-JEPA: Hierarchical Representation Learning and Generation for Symbolic Music

📄 MIDI-RAE-JEPA: Hierarchical Representation Learning and Generation for Symbolic Music 标签:#音乐生成 #自监督学习 #音乐理解 #Transformer #流匹配 7.9/10 | 创新 1.5/2 | 严谨 1.2/1.5 | 实验 0.8/1.5 | 清晰 0.9/1 | 影响 1/1.5 | 开源 1/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 ✅ 7.9/10 | 前25% | 文档类型:系统技术报告 | 评分置信度:高 | #音乐生成 | #自监督学习 | #音乐理解 #Transformer | arxiv 👥 作者与机构 第一作者:Scott H. Hawley 通讯作者:Scott H. Hawley 作者列表:Scott H. Hawley 机构:Belmont University (从作者邮箱域名 belmont.edu 推断) 💡 毒舌点评 这篇论文的核心价值在于,它将JEPA这一在视觉和视频领域大放异彩的范式,首次系统地、工程化地移植到了符号音乐领域,并通过一系列针对音乐特性的损失设计(平滑等变性、软因子化)构建了一条完整的“自监督编码-重建-生成”流水线。然而,实验的“沙盒”性质(仅909首歌曲)让所有亮眼的数值(如F1≈0.995)都显得脆弱,生成评估的定性本质使其说服力大打折扣,而论文对高层表示“尚未捕获可解释抽象”的坦诚,也变相承认了其层级学习目标尚未完全达成。这是一篇扎实的工程探索,但离一篇能定义领域的重磅工作,还差一个数量级的数据和一套铁板钉钉的客观评估。 ...

2026-07-17 · 更新于 2026-08-14 · 3 min · 497 words

WanSong v1.0 Technical Report

📄 WanSong v1.0 Technical Report 标签:#音乐生成 #扩散模型 #歌唱生成 #强化学习 #音频理解 7.6/10 | 创新 1.8/2 | 严谨 1.3/1.5 | 实验 1/1.5 | 清晰 0.9/1 | 影响 1.2/1.5 | 开源 0/1.5 | 复现 0.1/0.5 | 工程 1.3/1.5 ✅ 7.6/10 | 前25% | 文档类型:系统技术报告 | 评分置信度:高 | #音乐生成 | #扩散模型 | #歌唱生成 #强化学习 | arxiv 👥 作者与机构 第一作者:未说明 通讯作者:未说明 作者列表:Binghui Chen, Pandeng Li, Yu Liu, Jingren Zhou (Wan Team, Alibaba Group) 💡 毒舌点评 亮点:双音轨(人声/背景)独立建模方案直击痛点,有效解决了CFG引导下两者质量此消彼长的困境,工程实现细节丰富,展现了工业级长音频生成系统的完整设计。 短板:作为一篇旨在展示“商业级”系统的技术报告,完全缺乏开源承诺与代码/模型释放计划,评估体系(尤其是自研的“音乐性”评估模型)的公正性和可验证性存疑,这极大地削弱了其作为学术论文的可信度和影响力。论文回避了与近期同期、架构相似的强基线(如DiffRhythm2, ACE-Step)的直接实验对比,使其声称的性能优势显得不完整。 ...

2026-07-17 · 更新于 2026-08-14 · 3 min · 529 words

Music-to-Dance Generation via Atomic Movements

📄 Music-to-Dance Generation via Atomic Movements 标签:#音乐生成 #扩散模型 #多模态模型 #音频理解 #Transformer 7.4/10 | 创新 1.5/2 | 严谨 1/1.5 | 实验 1/1.5 | 清晰 0.9/1 | 影响 0.5/1.5 | 开源 1.2/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ✅ 7.4/10 | 前50% | 文档类型:方法研究 | 评分置信度:高 | #音乐生成 | #扩散模型 | #多模态模型 #音频理解 | arxiv 👥 作者与机构 第一作者:Xinhao Cai(北京大学王选计算机技术研究所) 通讯作者:Yang Liu(北京大学) 作者列表:Xinhao Cai(北京大学王选计算机技术研究所)、Yixuan Sun(北京大学王选计算机技术研究所)、Minghang Zheng(北京大学电子学与计算机科学技术学院)、Qingchao Chen(北京大学)、Xin Jin(国家健康数据科学研究院)、Song-chun Zhu(北京大学通用人工智能国家重点实验室、北京通用人工智能研究院)、Yang Liu(北京大学智能科学与技术学院) 💡 毒舌点评 论文敏锐地抓住了现有音乐驱动舞蹈生成方法在结构建模上的缺失,提出的“原子动作”概念及相应的两阶段生成框架具有清晰的工程洞察,其通过将舞蹈解耦为符号化规划与连续化执行,确实提升了生成舞蹈的结构一致性和可控性。然而,其核心贡献——“原子动作”的发现流程高度依赖外部模型(TMR编码器、Gemini、GPT)与特定超参数选择,可复现性与泛化性存疑。更关键的是,所有验证仅在AIST++这一较小且单一风格的基准上进行,缺乏跨数据集泛化与真实场景(如编辑、交互)的验证,使得其宣称的“结构化”优势的实际价值与普适性大打折扣。 📌 核心摘要 本文旨在解决音乐驱动舞蹈生成中,现有端到端方法将舞蹈视为连续信号而忽略其组合性质,导致生成舞蹈结构不连贯、难以编辑控制的问题。作者提出了一种基于“原子动作”的结构感知生成框架。方法核心包含两部分:1)原子动作发现流水线,通过自适应分割、基于运动特征的聚类以及引入大语言模型进行语义重聚类,从连续舞蹈数据中提取出语义可解释、可重复且包含变化的基本运动单元。2)两阶段生成框架,第一阶段使用离散扩散模型规划原子动作序列(类型、时长、时序),第二阶段使用带有过渡损失的连续扩散模型完成舞蹈,实现动作的重新生成与平滑过渡。与现有的Bailando、EDGE、Lodge等方法相比,本文的核心创新在于引入了显式的结构化中间表示(原子动作),并将生成过程解耦为规划和执行,以模拟人类编舞过程。实验结果表明,该方法在FID(运动保真度)、多样性、节拍对齐分数(BAS)和检索准确率(RR)上均取得最优或接近最优的结果,特别是RR指标(26.6%)远超其他基线,验证了其在结构一致性上的优势。该工作的实际意义在于提高了生成舞蹈的可控性、可解释性和编辑性。主要局限性在于实验仅在AIST++数据集(约5.2小时)上进行,数据规模有限,且评估对舞蹈艺术性的考量不足。 ...

2026-07-16 · 更新于 2026-08-14 · 3 min · 453 words

ChartGenEval: Corruption-Tested Multi-Dimensional Feedback for Rhythm-Game Chart Generation

📄 ChartGenEval: Corruption-Tested Multi-Dimensional Feedback for Rhythm-Game Chart Generation 标签:#音乐生成 #模型评估 #基准测试 #开源工具 #游戏音频 8.8/10 | 创新 1.7/2 | 严谨 1.3/1.5 | 实验 1.1/1.5 | 清晰 0.8/1 | 影响 0.6/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.3/1.5 🔥 8.8/10 | 前25% | 文档类型:方法研究 | 评分置信度:高 | #音乐生成 | #模型评估 | #基准测试 #开源工具 | arxiv 👥 作者与机构 第一作者:Jhen-Ke Lin(National Yang Ming Chiao Tung University) 通讯作者:Jhen-Ke Lin(National Yang Ming Chiao Tung University,邮箱:jacob.cs14@nycu.edu.tw) 作者列表:Jhen-Ke Lin(National Yang Ming Chiao Tung University) 💡 毒舌点评 这篇论文在方法论层面做出了扎实贡献:它摒弃了用单一参考序列或未经检验的代理指标来评估图表生成的粗糙做法,转而系统性地提出并验证了一个多维度、角色分离的评估框架。其“控制性损坏”测试范式尤为出色,像给评估指标做压力测试,精准暴露了“全局时间偏移”和“代理指标错位”这两个关键盲点,为评估方法论提供了宝贵的反面教材和验证范式。然而,其核心评估维度(六个问题、校准带、损坏操作)完全是为“太鼓达人”这类特定节奏游戏图表量身定做的,评估框架本身深度嵌入该子领域。因此,尽管其揭示的“需要外部音乐时间锚”和“代理指标可能激励错误方向”等方法论教训具有普适警示意义,但其直接贡献的评估工具对更广泛的音乐或音频生成研究者而言,可迁移性和实用性有限,影响力也因此受限。 ...

2026-07-15 · 更新于 2026-08-14 · 2 min · 381 words

Anysynth:Zero-Shot Instrument Cloning via In-Context Learning and Asymmetric Hierarchical Guidance

📄 Anysynth:Zero-Shot Instrument Cloning via In-Context Learning and Asymmetric Hierarchical Guidance 标签:#音乐生成 #流匹配 #扩散模型 #零样本 #音频理解 6.8/10 | 创新 1.5/2 | 严谨 1.3/1.5 | 实验 1.2/1.5 | 清晰 0.8/1 | 影响 0.8/1.5 | 开源 0.2/1.5 | 复现 0.3/0.5 | 工程 0.7/1.5 ✅ 6.8/10 | 前50% | 文档类型:方法研究 | 评分置信度:高 | #音乐生成 | #流匹配 | #扩散模型 #零样本 | arxiv 👥 作者与机构 第一作者:Chong Jing 通讯作者:未说明 作者列表:Chong Jing, Junan Zhang, Jing Yang, Yulun Wu, Fan Fan, Zhizheng Wu 💡 毒舌点评 论文的核心洞察——抛弃检索式嵌入、改用上下文学习——直击当前乐器克隆任务的要害,且非对称分层CFG的设计有内在逻辑。但最大的“但是”是:宣称的SOTA基于一个作者自建的、细节不完全透明的测试集,且整个系统完全闭源,使得其宣称的突破性大打折扣,更像是一份写得不错的工程报告而非可验证的里程碑。 ...

2026-07-14 · 更新于 2026-08-14 · 3 min · 627 words

BeatEdit: Symbolic Music Generation as Explicit Editing

📄 BeatEdit: Symbolic Music Generation as Explicit Editing 标签:#音乐生成 #自监督学习 #生成模型 #音频理解 #Transformer 8.9/10 | 创新 1.2/2 | 严谨 1.2/1.5 | 实验 1.4/1.5 | 清晰 0.9/1 | 影响 1.1/1.5 | 开源 1.5/1.5 | 复现 0.5/0.5 | 工程 1.1/1.5 🔥 8.9/10 | 前25% | 文档类型:方法研究 | 评分置信度:高 | #音乐生成 | #自监督学习 | #生成模型 #音频理解 | arxiv 👥 作者与机构 第一作者:Haoyu Gu(华南理工大学未来技术学院,广州) 通讯作者:未说明(Haoyu Gu 为主要联系人,邮箱 ghy20050104@gmail.com) 作者列表: Haoyu Gu(华南理工大学未来技术学院,广州) Lekai Qian(华南理工大学未来技术学院,广州) Haowu Zhou(华南理工大学未来技术学院,广州) Qi Liu(华南理工大学未来技术学院,广州) Shuai Wang(南京大学智能科学与技术学院,苏州) 💡 毒舌点评 论文核心洞察极具价值——将音乐生成重构为显式编辑任务,并系统证明了编码设计是决定编辑成败的关键杠杆,这为符号音乐领域开辟了新方向。但三种编辑机制(SeqTag、IterEdit、TagFill)本质上分别移植自NLP领域的GECToR、Levenshtein Transformer和Felix,音乐领域的机制级创新(除SHIFT操作外)相对有限。实验全部基于合成扰动数据,且主要在钢琴数据上验证,多乐器实验仅使用单一编码方案,距离真实音乐创作编辑场景仍有显著距离。此外,论文未与专门的音乐修复方法(如Music Transformer)进行对比,削弱了结论的完整性。 ...

2026-07-14 · 更新于 2026-08-14 · 5 min · 893 words

Dance to Music Generation leveraging Pre-training with Unpaired data and Contrastive Alignment

📄 Dance to Music Generation leveraging Pre-training with Unpaired data and Contrastive Alignment 标签:#音乐生成 #自监督学习 #多模态模型 #对比学习 #扩散模型 7.5/10 | 创新 1.3/2 | 严谨 1.2/1.5 | 实验 0.8/1.5 | 清晰 0.7/1 | 影响 1/1.5 | 开源 1.2/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ✅ 7.5/10 | 前25% | 文档类型:方法研究 | 评分置信度:中 | #音乐生成 | #自监督学习 | #多模态模型 #对比学习 | arxiv 👥 作者与机构 第一作者:Ryota Keio(Keio University, Sony Computer Science Laboratories) 通讯作者:未说明 作者列表:Ryota Keio(Keio University, Sony Computer Science Laboratories)、Sangheon Park(Georgia Institute of Technology)、Natalia Polouliakh(Sony Computer Science Laboratories)、Taketo Akama(Sony Computer Science Laboratories) 💡 毒舌点评 论文将单模态预训练、跨模态对比对齐和ControlNet生成三个模块“缝合”起来,系统设计思路清晰,实验也证明了模块组合的有效性。然而,其核心的对比学习目标与最终的生成质量之间缺乏深入的理论联系,且实验主要在一个较小的数据集上验证,音乐生成的主观质量也未显著超越移除核心模块的变体,让人不禁怀疑这更多是一次成功的工程集成,而非根本性的技术突破。 ...

2026-07-14 · 更新于 2026-08-14 · 3 min · 456 words

MusicMark: A Robust Generative Watermarking Framework for Music Generation

📄 MusicMark: A Robust Generative Watermarking Framework for Music Generation 标签:#音频水印 #扩散模型 #音乐生成 #鲁棒性 #音频理解 7.3/10 | 创新 1.4/2 | 严谨 1.2/1.5 | 实验 1.3/1.5 | 清晰 0.9/1 | 影响 1/1.5 | 开源 0.2/1.5 | 复现 0.3/0.5 | 工程 1/1.5 ✅ 7.3/10 | 前50% | 文档类型:方法研究 | 评分置信度:高 | #音频水印 | #扩散模型 | #音乐生成 #鲁棒性 | arxiv 👥 作者与机构 第一作者:Seohwan Yun(高丽大学人工智能系) 通讯作者:Sungwoong Kim(高丽大学人工智能系) 作者列表:Seohwan Yun(高丽大学人工智能系)、Jeeyoung Yun(高丽大学人工智能系)、Yongjin Kim(高丽大学人工智能系)、Juyeon Lee(仁荷大学计算机工程系)、Sungwoong Kim(高丽大学人工智能系) 💡 毒舌点评 论文瞄准了AI生成音乐版权保护的真实痛点,并提出了一套在生成阶段就深度耦合水印的完整框架,其在神经网络编解码器重合成攻击下的鲁棒性提升是显著且令人信服的。然而,论文在方法创新上更多是“组合式创新”——将成熟的生成式水印思路(如在文本生成领域)迁移到复杂的音乐生成扩散模型上,并辅以巧妙的工程设计;同时,论文声称的“第一个生成式音乐水印框架”可能忽略了某些未被充分引用的相关工作,且未开源代码与模型的做法严重削弱了其影响力与可验证性。此外,评估中对“翻唱”攻击的定义与主流理解存在偏差,且评估数据均来自AI生成平台,其结论对真实世界音乐的泛化能力存疑。 ...

2026-07-14 · 更新于 2026-08-14 · 8 min · 1524 words

Qwen-Music Technical Report

📄 Qwen-Music Technical Report 标签:#音乐生成 #多模态模型 #歌唱生成 #扩散模型 #大语言模型 7.4/10 | 创新 1.4/2 | 严谨 1.1/1.5 | 实验 1.2/1.5 | 清晰 0.9/1 | 影响 1.3/1.5 | 开源 0/1.5 | 复现 0.1/0.5 | 工程 1.4/1.5 ✅ 7.4/10 | 前50% | 文档类型:系统技术报告 | 评分置信度:高 | #音乐生成 | #多模态模型 | #歌唱生成 #扩散模型 | arxiv 👥 作者与机构 作者列表:来自 Qwen Team。论文附录列出了 Core Contributors 和 Contributors 的名单,其中 Jin Xu 标注为通讯作者。机构未在论文中明确说明。 💡 毒舌点评 亮点在于其将大语言模型的生成范式与专业音乐渲染管线深度融合,构建了一个完整、可控且在评测中表现突出的工业级系统,展现了团队强大的工程整合能力。短板在于整个系统完全闭源,且训练数据筛选、奖励模型构建等关键工程细节的“黑箱”属性,使其学术贡献的可验证性和可复现性大打折扣。 📌 核心摘要 本文介绍了Qwen-Music,一个用于生成带有人声完整歌曲的大规模音乐生成系统。该系统旨在解决从文本描述、歌词和音乐属性生成高质量、结构连贯歌曲,以及基于参考音频进行翻唱的技术挑战。核心方法是将生成过程解耦为语义作曲与声学渲染两个阶段,构建了Qwen-Music-Tokenizer、Qwen-Music-LLM和Qwen-Music-Render三大组件,并引入了旋律链式思维(Melody-CoT)机制进行显式旋律规划。相较于现有方法,其创新在于将大语言模型用于语义token序列建模,并设计了质量分级预训练课程和多阶段偏好对齐策略。在600个中英文提示词的客观评测中,Qwen-Music在16项音乐性和音频质量指标中的13项上取得最优结果;在盲测主观评估中,其生成质量优于MiniMax Music 2.6、Mureka V8、Suno V5等多个商业系统,并相对于最强的Suno V5.5略有优势(50.3% vs 49.7%)。该系统的实际意义在于推动了可控、高保真、结构连贯的端到端歌曲生成技术。主要局限性在于整个系统完全闭源,且训练数据筛选、奖励模型构建等关键工程细节不够透明,限制了其可复现性与学术影响力。 ...

2026-07-14 · 更新于 2026-08-14 · 4 min · 657 words

Verifier-Guided Twelve-Tone Composition: A Generate-Verify-Repair Harness for Symbolic Music Generation

📄 Verifier-Guided Twelve-Tone Composition: A Generate-Verify-Repair Harness for Symbolic Music Generation 标签:#音乐生成 #音频理解 #Transformer #模型评估 6.0/10 | 创新 1.2/2 | 严谨 1/1.5 | 实验 1/1.5 | 清晰 0.8/1 | 影响 0.5/1.5 | 开源 0/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 ✅ 6.0/10 | 前50% | 文档类型:系统技术报告 | 评分置信度:高 | #音乐生成 | #Transformer | #音频理解 #模型评估 | arxiv 👥 作者与机构 第一作者:Congren Dai(清华大学、北京人工智能研究院) 通讯作者:Maosong Sun(清华大学、北京人工智能研究院) 作者列表:Congren Dai(清华大学、北京人工智能研究院)、Danni Zhao(清华大学)、Enyang Liu(清华大学)、Michael Ching Yam(清华大学)、Zhancheng Guo(清华大学、北京人工智能研究院)、Siyi Gu(清华大学)、Wentao Yang(清华大学)、Bo Dai(清华大学)、Xiaobing Li(清华大学)、Maosong Sun(清华大学、北京人工智能研究院) 💡 毒舌点评 本文最出色的洞察在于抓住了“奖励黑客”在结构化生成中的核心困境:LLM 可以通过生成表面合规但毫无音乐性的“退化纹理”来满足规则代理。提出的“生成-验证-修复”范式用确定性符号验证器对抗 LLM 的取巧倾向,工程实现完整,评估系统(包括对抗性提示和专家盲评)设计扎实。然而,该框架的实用性被其天文数字般的计算成本(数百次 API 调用)严重拖累,且评估局限于基础的技术练习,未触及十二音作曲中真正复杂和有趣的方面。本质上,这更像是一个精心设计的、昂贵的“约束执行系统”,而非提升 LLM 音乐创造力的工具。 ...

2026-07-14 · 更新于 2026-08-14 · 2 min · 405 words