不用硬压相邻帧连续:用多跳音高差把损坏段落桥接起来的平滑
针对逐帧基频估计后时序平滑易在连续坏帧锁定八度错误的问题,论文用可变 Q 变换互相关估计多跳相对音程并与绝对估计做 L1 联合优化,等价转为最小费用循环流用线性规划求解,在语音歌唱器乐上干净时接近维特比、白噪声低信噪比下提升更明显,但巴布尔噪声与强前端上收益有限且偏移集合依赖估计器。
针对逐帧基频估计后时序平滑易在连续坏帧锁定八度错误的问题,论文用可变 Q 变换互相关估计多跳相对音程并与绝对估计做 L1 联合优化,等价转为最小费用循环流用线性规划求解,在语音歌唱器乐上干净时接近维特比、白噪声低信噪比下提升更明显,但巴布尔噪声与强前端上收益有限且偏移集合依赖估计器。
针对舞蹈到音乐生成中身体部位与快慢运动混在一起、音乐隐变量局部变化缺乏直接监督的问题,Dyna2Music 用五部位慢快能量加 MotionBERT 特征做条件、用隐动态一致性约束相邻帧变化幅度,在 AIST++ 上 F1 达到 55.76 但最高 F1 对应的权重不是 FADc 最低权重。
论文用冻结 MusicGen 的 token 损失曲线、预测熵曲线与稀疏自编码器隐变量训练轻量评分器,在五个听感基准上拟合人类评分,并用过自信错误与频谱结构解释低分来源,代价是仍需按基准训练映射且组合不总是更优。
论文把带宽扩展限定为只补输入截止频率以上频带,用冻结的 48 kHz 编解码器加一个在量化深度上自回归的变换器完成码字,在 MUSDB18 四个输入率上客观指标超过两个基线,代价是 8 kHz 主观听感只与较强基线相当且仍依赖单一冻结码字分布。
该文用跳字模型在贝多芬与披头士和弦序列上学习 24 个大小三和弦嵌入,证明移调增广能恢复五度圈、调中心分离与可转向的调区域,并用和弦到调距离与上下文距离构造张力量,与匹配的音调区间向量量中等对应、与人类紧张度中等对齐,但输入丢掉了转位与织体信息。
该研究把六首有文献记载背景的流行歌曲旋律抽出后交给同一可解释和声器重新配和声,对比发现高旋律适配分不等于保留原有持续、重复与非调式特征,部分曲目保留经济型 I-IV-V 结构,部分则扩张声部词汇或压制标志性进行。
该文把增量作曲定义为持久 ABC 工件上的操作感知状态转移,用 496038 条对话记录对 Llama 3.1 8B Instruct 做 LoRA 适配,在 1750 次尝试下检查器准入从 29.37% 升至 99.37%、条件合规从 0.7205 升至 0.9798,代价是结论限于爱尔兰传统音乐域且不证明审美优越或无人抄袭。
JazzSAMBA 针对爵士标准曲缺少干净乐队分轨与演奏对齐曲式标注的问题,用 50 首异步叠录加 26 首同步合奏录制 76 首标准曲并配小节和弦段落独奏者标注,以爵士微调分离基线与谱面条件伴奏消融验证标注可用性,代价是同步存在串音且测试规模小、生成仍困难。
该挑战要求在多轮对话下同时给出前 20 首排序和有依据的回复,最强可复述证据是多路候选加保留来源证据的学习排序在受控对比中提升 nDCG,而冷启动与模糊单目标仍是主要代价。
针对从混合音乐中检索库中相似分轨的问题,Stembed 用四个槽嵌入分别表示候选分轨并以匹配后的对比损失训练,在 MoisesDB 三轨检索上以 56.8% 全库 R@1 超过单嵌入 CIR 基线 23.6%,代价是需要匹配、存在分数和槽数等额外机制。
针对弦乐四声部在同音高与泛音重叠下难以仅凭混合区分的问题,SCISSOR 用乐谱音高加乐器身份构成逐帧查询去竞争共享音频表示,证据显示在少量真实录音参与训练后其在留出真实集平均 SDR 最高,而乐器身份类乐谱错误仍会使其回落到音频对照以下。
YuE2 用同一模型先写包含旋律与和声的可读乐谱再生成语义与声学表示,在相同检查点对照中符号规划提升了专家感知的整体质量,并以可编辑的乐谱接口支持改编与零样本翻唱,但多候选筛选与自动指标仍带来额外代价与解释边界。
MotiGen 针对 NotaGen 等符号音乐大模型缺少动机级控制的问题,用移调不变的音程类别提示行加训练与推理一致的注意力偏置和先聚焦裁剪后全曲的两阶段课程来改造模型,在分层动机评估中显著高于无提示基线,代价是仅限单声部且依赖自动包含判定而非大规模人评。
共收录 1354 篇 interspeech-2026 会议论文的 Reader 深度解读
该文把音调区间向量改写为可逆算子并做感知平滑,用置换搜索做对齐、用四五度圈上圆形最优传输做插值,再以圆柱几何表征分解音阶根音、密度与色彩,代价是平滑后不再保证非负且圆形传输仍要求非负输入。
SAGE 用复数 STFT 上的三阶段 SwinV2 变分自编码器加延迟蒸馏 CLAP 语义,在 105M 参数和 Stable Audio Open 同级推理成本下达到 SAME-L 的主观质量并在客观重建与十九个探测任务上领先,代价是两阶段大算力训练与对 SDR 类样本精确指标的让步。
针对长篇沉浸式音频故事中人声与角色错配和生成质量波动问题,AuDirector 用身份感知预制作加评论者主导的合成修正闭环与人工交互修订组织语音、音效和音乐,论文报告其在结构连贯、情感表达和声学保真上优于基线,但非语音多样性不足仍是代价与边界。
针对音乐重建中相位不准与声像塌陷问题,论文用 K 加权感知滤波、相位相关损失与幅度相位分离的 MSLR 监督改造连续变分自编码器,并在多分辨率评价与消融中验证高频谐波与空间保持的收益及其对内部数据的依赖。
针对语音到音乐的域漂移与打分尺度不一致,CAQA-Net 用可训练波形分支学生成可塑性、用冻结频谱分支做稳定性锚、用多头加蒸馏正则与原型门控做任务无关推理,在五数据集序列上报告与联合学习上界相差 0.036 SRCC,而冻结与门控等设计带来推理与调参代价。
针对文本到中国传统器乐音乐生成缺少配对数据的问题,论文构建 741 对超 42 小时的 CTMusic 并用独奏到合奏的两阶段 LoRA 微调验证 Stable Audio Open,最强证据是微调后客观与主观指标全面超过预训练基线,而代价是新增 TTT 层带来额外可训练参数与两阶段训练开销。