GaMMA: Towards Joint Global-Temporal Music Understanding in Large Multimodal Models

📄 GaMMA: Towards Joint Global-Temporal Music Understanding in Large Multimodal Models #音乐理解 #多模态模型 #预训练 #强化学习 #基准测试 ✅ 7.0/10 | 前25% | #音乐理解 | #多模态模型 | #预训练 #强化学习 | arxiv 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 中 👥 作者与机构 第一作者:未说明(摘要仅列出作者顺序,未明确标注第一作者) 通讯作者:未说明(摘要未提供此信息) 作者列表:Zuyao You、Zhesong Yu、Mingyu Liu、Bilei Zhu、Yuan Wan、Zuxuan Wu(所属机构均未说明) 💡 毒舌点评 亮点:论文的野心不小,试图用一个统一模型搞定音乐的“全局理解”和“时序理解”两大类任务,并顺手造了个号称最大最全的音乐问答基准MusicBench,对推动领域标准化评估功不可没。 短板:模型架构本身是LLaVA在音频领域的直接迁移,核心创新“混合专家音频编码器”听起来很美,但在摘要中缺乏具体的结构对比和性能消融来证明其不可替代性,更像是工程上的“搭积木”而非原理突破。 🔗 开源详情 代码:论文中未提及代码链接。 模型权重:论文中未提及。 数据集:论文中提及使用了“精心策划的规模化数据集”,但未给出具体名称或开源链接。同时,论文推出了 MusicBench 基准,但未提供其数据集的公开获取地址。 Demo:论文中未提及。 复现材料:论文中描述了“包含预训练、监督微调(SFT)和强化学习(RL)的渐进式训练流程”,但未提供具体的训练配置、检查点或详细的复现指南附录。 论文中引用的开源项目: LLaVA:论文指出其架构继承自LLaVA,但未在文中提供该项目的具体链接。 📌 核心摘要 问题:现有的大型多模态模型在音乐内容理解方面,难以同时高效处理需要时序分析的(如节奏、旋律跟踪)和非时序的(如风格、情绪识别)任务,且缺乏全面的评估基准。 方法核心:提出GaMMA模型,基于LLaVA架构,采用混合专家(MoE)模式整合多个音频编码器,以一套参数统一处理时序与非时序音乐任务。采用包含预训练、监督微调(SFT)和强化学习(RL)的渐进式训练管线。 新意:1) 架构上,MoE音频编码器的设计使模型能自适应地从不同“专家”获取处理不同任务所需的特征。2) 流程上,结合大规模数据与预训练-SFT-RL的三阶段训练,系统性地提升模型能力。3) 贡献了当前最大的音乐理解基准测试集MusicBench。 实验结果:在多个基准上取得SOTA:MuchoMusic上79.1%准确率,MusicBench-Temporal上79.3%,MusicBench-Global上81.3%。论文声称一致超越了先前方法。 实际意义:为音乐信息检索、音乐生成评估、智能音乐助手等应用提供了更强大的底层理解模型,并设立了新的评估标杆(MusicBench)。 局限性:摘要未提及模型的具体参数规模、训练计算开销以及在更广泛音乐流派或噪声环境下的泛化能力。其通用性与效率的权衡有待进一步探讨。 🏗️ 模型架构 GaMMA的整体架构继承自LLaVA,是一个典型的“视觉(音频)编码器-投影层-大语言解码器”的三明治结构,但核心修改在于“音频编码器”部分。 ...

2026-05-04 · 更新于 2026-08-07 · 1 min · 162 words

Generative Adversarial Post-Training Mitigates Reward Hacking in Live Human-AI Music Interaction

📄 Generative Adversarial Post-Training Mitigates Reward Hacking in Live Human-AI Music Interaction #音乐生成 #强化学习 #对抗训练 #实时处理 #音乐信息检索 ✅ 7.0/10 | 前25% | #音乐生成 | #强化学习 | #对抗训练 #实时处理 学术质量 6.5/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者:Yusong Wu (Mila, Quebec Artificial Intelligence Institute, Université de Montréal) 通讯作者:Natasha Jaques (University of Washington), Cheng-Zhi Anna Huang (Massachusetts Institute of Technology) 作者列表:Yusong Wu (Mila, Université de Montréal), Stephen Brade (Massachusetts Institute of Technology), Aleksandra Teng Ma (Georgia Institute of Technology), Tia-Jane Fowler (University of Washington), Enning Yang (McGill University), Berker Banar (Independent Researcher), Aaron Courville (Mila, Université de Montréal), Natasha Jaques (University of Washington), Cheng-Zhi Anna Huang (Massachusetts Institute of Technology) 💡 毒舌点评 亮点:在强化学习后训练中巧妙引入对抗训练思想来解决“奖励黑客”问题,特别是通过一个自适应更新的判别器来平衡“真实感”与任务目标,方案设计精巧且有实验验证。短板:方法的核心创新是将GAN和RL思想结合用于序列模型,这并非完全原创;研究场景(实时旋律-和弦伴奏)非常垂直,其影响力可能局限于音乐生成领域,对更广泛的序列生成任务(如对话)的普适性未得到充分论证。 ...

2026-05-04 · 更新于 2026-08-07 · 2 min · 342 words

Gogo: Group-wise granularity-ordered codec for stable and efficient speech generation

📄 Gogo: Group-wise granularity-ordered codec for stable and efficient speech generation #语音合成 #语音编解码 #流匹配 #自回归模型 #语音大模型 ✅ 7.5/10 | 前25% | #语音合成 | #语音编解码 | #流匹配 #自回归模型 学术质量 7.0/7 | 选题价值 2.0/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者:Weidong Chen (The Chinese University of Hong Kong) 通讯作者:Xixin Wu (The Chinese University of Hong Kong) 作者列表:Weidong Chen(The Chinese University of Hong Kong)、Helen M. Meng(The Chinese University of Hong Kong)、Xixin Wu(The Chinese University of Hong Kong) 💡 毒舌点评 这篇工作最大的亮点在于将“组”作为语音量化的基本单元,并系统性地设计了粗细有序的token序列,这确实比传统逐帧量化更适合后续的语言模型建模,逻辑自洽且实验支撑有力。然而,其核心的token分配器虽然有效,但训练方法(GRPO)的引入略显“重”,对于一个动态分配离散资源的简单策略问题,是否有更轻量优雅的解法值得商榷,且论文最终未能开源代码,让这套精心设计的系统停留在了“可望”的层面。 ...

2026-05-04 · 更新于 2026-08-07 · 3 min · 461 words

Group Cognition Learning: Making Everything Better Through Governed Two-Stage Agents Collaboration

📄 Group Cognition Learning: Making Everything Better Through Governed Two-Stage Agents Collaboration #多模态模型 #跨模态 #多任务学习 #鲁棒性 ✅ 7.5/10 | 前25% | #多模态模型 | #多任务学习 | #跨模态 #鲁棒性 | arxiv 学术质量 6.5/7 | 选题价值 1.5/2 | 复现加成 0 | 置信度 高 👥 作者与机构 第一作者:Chunlei Meng 通讯作者:Chun Ouyang* 作者列表:Chunlei Meng、Pengbin Feng、Rong Fu、Hoi Leong Lee、Xiaojing Du、Zhaolu Kang、Zeyu Zhang、Weilin Zhou、Chun Ouyang*、Zhongxue Gan(所有作者所属机构均未在提供的论文文本中说明) 💡 毒舌点评 亮点:论文最大的亮点在于提出了一个完整且逻辑严密的“治理”范式来规范多模态交互,将“选择性交互”和“共识形成”拆分为两个有明确监督信号的阶段,这比单纯堆叠融合模块或依赖隐式梯度的学习方式更具可解释性和可控性。 短板:尽管效率分析显示其计算量低于部分近期基线,但引入多个代理模块(路由、审计、公共因子、聚合)不可避免地增加了系统设计的复杂度和训练的不确定性(例如多个辅助损失的平衡),其“复杂治理”是否是解决该问题的最优路径,而非一个工程上可行的解,值得商榷。 🔗 开源详情 代码:论文中未提及代码链接 模型权重:论文中未提及 数据集:论文中提及的公开标准数据集,未提供具体链接:CMU-MOSI, CMU-MOSEI, MIntRec Demo:论文中未提及 复现材料:论文中提供了部分实现细节(如使用PyTorch, Adam优化器,批量大小128, NVIDIA A100 GPU,早停耐心值6,5折交叉验证用于模型选择),但未提供具体的配置文件、检查点或附录材料的链接。 论文中引用的开源项目:未提及 补充信息 [实验结果] 补充:论文表1中,GCL在CMU-MOSI上的相关系数(Corr)为0.812,F1分数为86.40%;在CMU-MOSEI上的相关系数(Corr)为0.785,F1分数为86.55%。这些指标在已有分析的表格中未列出。 [实验结果] 补充:论文表4提供了详细的效率对比数据。GCL的参数量为117.56M,平均每个epoch的训练时间为20.06秒。对比基线包括MISA (114.2M, 24.18s)、FDMER (118.5M, 29.5s)、ConFede (256.98M, 40.12s)和EMOE (143.5M, 26.8s)。 [细节详述] 补充:论文在4.1节“Implementation Details”中明确列出了关键训练参数:学习率未在文中明确说明,但提到了使用Adam优化器、批量大小128、权重衰减1×10^{-4},并在单张NVIDIA A100 GPU (32GB)上训练。 [模型架构] 补充:论文在“Auditing Agent”部分(公式4)强调,最终的准入门控 α^{m→n} 是路由概率(softmax归一化)与基于增益的sigmoid门控值的乘积。这种乘法组合确保了交互必须同时满足“路由意图”和“预测增益”两个条件。 [核心摘要/毒舌点评] 补充:论文在引言和结论中隐含了一个关键局限性:审计代理在训练时依赖“教师增益”(公式2),该增益通过临时融合消息计算得到,引入了训练与推理时的不一致性(推理时使用学习到的增益预测器,公式3)。这种设计虽然有效,但可能带来训练不稳定性或泛化误差,分析中未明确点出这一机制固有的挑战。 [消融实验] 补充:论文表3的消融实验还包括“模态配置”的消融。例如,仅使用语言模态(only Language)在CMU-MOSI上的MAE为0.714,Acc-7为47.10%;完全移除语言模态(w/o Language)则性能急剧下降,MAE升至0.905,Acc-7降至38.60%。这凸显了语言模态的主导作用,而GCL通过治理机制有效融合了其他弱模态。 [评分理由] 补充:论文在4.5节“Efficiency Analysis”中自我声明了效率优势,并与近期基线ConFede和EMOE进行了量化对比(见补充的实验结果部分)。这是其学术质量的一个重要支撑点。 📌 核心摘要 要解决的问题:多模态学习中普遍存在的“模态主导”(优化倾向于利用简单模态,忽略弱但有用模态)和“虚假耦合”(模型过拟合于跨模态间偶然的、与标签无关的关联)两大问题。 方法核心:提出群组认知学习(GCL),一种受协议治理的协作范式。它采用两阶段架构:阶段一(选择性交互) 由路由代理提议模态间信息交换路径,审计代理基于预测增益进行采样级门控筛选;阶段二(共识形成) 由公共因子代理提取显式共享语义,聚合代理根据贡献度加权融合,同时保留模态专有通道。 新在何处:与以往依赖隐式融合或静态解耦的方法不同,GCL首次将多模态交互过程形式化为一个受监督、可审计的动态协议。它显式地调控“谁与谁交流”(路由)以及“交流是否被允许”(基于边际增益的审计),从而在过程层面抑制冗余耦合。 主要实验结果:在CMU-MOSI、CMU-MOSEI(情感分析)和MIntRec(意图识别)三个基准上达到SOTA。例如,在CMU-MOSI上,GCL的MAE降至0.685(相比最佳基线TSDA的0.695),二分类准确率提升至86.79%(相比TSDA的86.3%)。消融实验验证了每个组件(如审计代理、公共因子、冗余损失)的有效性。鲁棒性分析显示,GCL在注入高斯噪声或进行消息置换扰动时,性能下降更平缓,表现出更强的稳定性。 实际意义:为构建更鲁棒、可解释的多模态系统提供了一种新思路,其治理机制可推广至任何需要动态、可控协作的复杂智能体系统,有助于模型在现实噪声环境下稳定工作。 主要局限性:框架复杂度增加,引入了多个需要协同训练的代理和辅助损失项,可能带来调参困难。其效率优势是相对于特定基线而言,绝对计算成本仍高于单模态模型。未提供开源代码,影响验证与应用。 🏗️ 模型架构 GCL的整体架构是一个两阶段协议驱动的系统,其输入是语言、声学、视觉三种模态的特征(\(h^l, h^a, h^v\)),最终输出一个预测值 \(\hat{o}\)。核心在于在编码器后增加了一个治理层,将学习过程从“隐式融合”转变为“显式协作”。 ...

2026-05-04 · 更新于 2026-08-07 · 2 min · 367 words

Hierarchical Semantic-Acoustic Modeling via Semi-Discrete Residual Representations for Expressive End-to-End Speech Synthesis

📄 Hierarchical Semantic-Acoustic Modeling via Semi-Discrete Residual Representations for Expressive End-to-End Speech Synthesis #语音合成 #自回归模型 #流匹配 #预训练 #端到端 🔥 8.0/10 | 前25% | #语音合成 | #自回归模型 | #流匹配 #预训练 学术质量 7.0/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者:Yixuan Zhou(清华大学深圳国际研究生院) 通讯作者:Zhiyong Wu(清华大学深圳国际研究生院) 作者列表:Yixuan Zhou(清华大学深圳国际研究生院),Guoyang Zeng(ModelBest Inc),Xin Liu(ModelBest Inc),Xiang Li(清华大学深圳国际研究生院),Renjie Yu(清华大学深圳国际研究生院),Ziyang Wang(ModelBest Inc),Runchuan Ye(清华大学深圳国际研究生院),Weiyue Sun(ModelBest Inc),Jiancheng Gui(ModelBest Inc),Kehan Li(清华大学深圳国际研究生院),Zhiyong Wu(清华大学深圳国际研究生院),Zhiyuan Liu(清华大学计算机科学与技术系) 💡 毒舌点评 亮点:论文提出的“半离散残差表示”框架设计精巧,通过一个可微的量化瓶颈在单一端到端模型中优雅地实现了语义和声学的隐式解耦,有效规避了传统连续模型的误差累积和离散模型的信息损失,堪称“鱼与熊掌兼得”的架构设计典范。短板:模型的高性能(VoxCPM)严重依赖海量内部数据(1百万小时),而公开验证(VoxCPM-Emilia)的性能与SOTA仍有差距,这使得其宣称的“架构优越性”在多大程度上可迁移到受限数据场景存疑,也削弱了其作为普适解决方案的说服力。 📌 核心摘要 解决的问题:现有端到端语音合成模型面临一个根本权衡:离散token方法稳定但会丢失声学细节(量化天花板),而连续表示方法保留了丰富声学信息但容易在长序列上因语义和声学任务纠缠而产生误差累积,影响稳定性。 方法核心:提出VoxCPM,一个端到端的层次化语义-声学建模框架。其核心是一个可微的有限标量量化(FSQ)瓶颈,它自然诱导出两个专门化模块:文本-语义语言模型(TSLM) 负责生成稳定的语义韵律骨架,残差声学语言模型(RALM) 负责恢复FSQ量化后丢失的精细声学细节。最终,由层次化表示共同引导一个局部扩散Transformer解码器(LocDiT) 生成高保真语音隐变量。 新意:与依赖外部离散语音token化器的多阶段管道不同,该框架将量化作为正则化机制内置于连续数据流中,实现了在单一端到端训练框架内的功能分离,消除了对外部预训练token化器的依赖,并缓解了连续模型中的任务纠缠。 主要结果:在超过1百万小时的双语数据上训练的0.5B参数VoxCPM,在SEED-TTS-EVAL基准上取得了开源系统中的最优性能,英语WER为1.85%,中文CER为0.93%,说话人相似度SIM分别为72.9%和77.2%。关键消融实验证明,去除FSQ瓶颈(w/o FSQ)会导致在困难测试集上性能急剧恶化(中文CER从18.19%升至24.92%),验证了其核心作用。 实际意义:该工作为构建表达力强、稳定性高的端到端语音合成系统提供了新的架构范式,有望推动更自然、更具情感的语音交互技术发展。 主要局限性:SOTA性能严重依赖大规模内部训练数据,在较小公开数据集上的验证(VoxCPM-Emilia)表现虽具竞争力但非顶尖,表明其对数据规模可能较为敏感。此外,框架的整体复杂度(包含LM、RALM、扩散解码器)对部署资源有一定要求。 详细分析 VoxCPM是一个层次化、端到端的自回归语音生成模型,其核心设计是通过内部半离散瓶颈实现语义和声学建模的解耦。 ...

2026-05-04 · 更新于 2026-08-07 · 4 min · 776 words

Human Behavior Atlas: Benchmarking Unified Psychological And Social Behavior Understanding

📄 Human Behavior Atlas: Benchmarking Unified Psychological And Social Behavior Understanding #多模态模型 #音频分类 #音视频 #预训练 #模型评估 🔥 8.5/10 | 前25% | #多模态模型 | #预训练 | #音频分类 #音视频 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 1.0 | 置信度 高 👥 作者与机构 第一作者:Keane Ong(MIT;National University of Singapore) 通讯作者:未说明 作者列表:Keane Ong(MIT;National University of Singapore)、Wei Dai(MIT)、Carol Li(MIT)、Dewei Feng(MIT)、Hengzhi Li(MIT;Imperial College London)、Jingyao Wu(MIT)、Jiaee Cheong(Harvard University)、Rui Mao(Nanyang Technological University)、Gianmarco Mengaldo(National University of Singapore)、Erik Cambria(Nanyang Technological University)、Paul Pu Liang(MIT) 💡 毒舌点评 亮点:在行为理解领域,该工作首次系统性地将分散在情感、认知、病理和社会过程等多个维度的异构数据集、任务和评估指标统一成一个标准化基准,为构建行为基础模型提供了至关重要的“数据-任务-评估”三位一体的基础设施。短板:论文更像是一个扎实的工程整合工作,其核心创新在于“统一”而非提出解决行为理解某一具体子任务(如深度讽刺识别或复杂社交推理)的新算法或架构,对于寻求领域内技术深度突破的读者来说,可能略显“广而不深”。 ...

2026-05-04 · 更新于 2026-08-07 · 2 min · 384 words

Human or Machine? A Preliminary Turing Test for Speech-to-Speech Interaction

📄 Human or Machine? A Preliminary Turing Test for Speech-to-Speech Interaction #语音对话系统 #模型评估 #基准测试 #多模态模型 ✅ 7.5/10 | 前25% | #语音对话系统 | #模型评估 | #基准测试 #多模态模型 学术质量 6.5/7 | 选题价值 1.5/2 | 复现加成 1.0 | 置信度 高 👥 作者与机构 第一作者:Xiang Li(北京邮电大学网络与交换技术国家重点实验室,深圳大数据研究院,香港中文大学(深圳),深圳环域研究院) 通讯作者:Jiale Han(香港科技大学) 作者列表:Xiang Li(北京邮电大学网络与交换技术国家重点实验室,深圳大数据研究院,香港中文大学(深圳),深圳环域研究院),Jiabao Gao(香港中文大学(深圳)),Sipei Lin(香港中文大学(深圳)),Xuan Zhou(香港中文大学(深圳)),Chi Zhang(香港中文大学(深圳)),Bo Cheng(北京邮电大学网络与交换技术国家重点实验室),Jiale Han(香港科技大学),Benyou Wang(深圳大数据研究院,香港中文大学(深圳),深圳环域研究院) 💡 毒舌点评 亮点是首次对语音到语音系统进行了图灵测试,并构建了一个包含18个细粒度维度的诊断框架,不仅指出了“通过/失败”,更深入剖析了“为何失败”,将瓶颈精准定位在非语义层面。短板在于,作为开创性工作,其评估的S2S系统数量和对话场景多样性仍有限,且伪人对话的脚本部分由GPT-4o生成,可能引入了额外的偏差。 🔗 开源详情 代码:论文中提供了GitHub仓库链接:https://github.com/Carbohydrate1001/Turing-Test。 模型权重:论文中明确提到公开了模型(“Our code, dataset, and model are publicly available”),但未直接提供权重下载链接,需从上述GitHub仓库获取。 数据集:论文中明确提到公开了数据集,同样需从上述GitHub仓库获取。 Demo:论文中提到了部署了一个游戏化的在线评测平台,但未提供公开的在线演示链接。 复现材料:提供了极其详细的复现信息,包括: 数据收集的完整流程、参与者画像、初始化策略(附录B)。 Turing测试平台的设计细节(附录C)。 18个细粒度维度的定义、标注指南、标注员信息及质量保证流程(附录D)。 AI评委模型的训练框架、嵌入读取策略消融、模型消融、超参数调优(网格搜索与敏感性分析)的完整细节(附录E)。 论文中引用的开源项目:论文在构建伪人对话数据集时,引用了两个开源TTS模型:Nari Dia-1.6B (nari-labs, 2025) 和 Spark-TTS (Wang et al., 2025c)。在评估模型泛化性时,引用了CosyVoice2、Fisher和MultiDialog数据集。 📌 核心摘要 本文旨在回答一个关键问题:当前的语音到语音(S2S)系统能否像人类一样进行对话?为解决此问题,作者首次对S2S系统实施了图灵测试。核心方法是构建一个包含人-人、人-机和伪人(TTS合成)对话的高质量数据集,通过一个游戏化的在线平台收集了近3000次人类判断。与已有工作相比,新在于将图灵测试范式首次全面引入端到端S2S评估,并超越二元通过/失败的结论。主要实验结果显示,所有评估的9个最先进的S2S系统均未通过图灵测试,成功率最高仅为0.31(人类为0.87)。为了诊断失败原因,论文提出了一个包含5大类18个细粒度维度的“拟人度”分类法,并对数据进行了人工标注。分析表明,当前S2S系统的瓶颈不在语义理解(如逻辑连贯性、记忆一致性接近人类水平),而在于韵律特征(如节奏、重音)、情感表达不足以及过度恭维、书面化的“机械人格”。此外,论文探索了使用AI作为评委的可能性,发现9个现成多模态模型表现不佳,因此提出了一个基于Qwen2.5-Omni微调的可解释评委模型,该模型先预测18个细粒度维度分数,再通过线性分类器做出人/机判断,其在测试集上的二分类准确率达到96.05%,显著优于人类评委(72.84%)和基线模型。这项工作的意义在于为S2S系统建立了一个系统化的拟人度评估与诊断框架,并指明了超越语义理解、在副语言和情感个性化方面突破的研究方向。主要局限性是评估的系统和场景覆盖范围可能无法代表整个S2S领域,且伪人对话的脚本部分依赖大语言模型生成。 ...

2026-05-04 · 更新于 2026-08-07 · 2 min · 233 words

ICLR 2026 - 动作生成 论文列表

ICLR 2026 - 动作生成 共 1 篇论文 ← 返回 ICLR 2026 总览 排名 论文 评分 分档 🥇 Unified Multi-Modal Interactive and Reactive 3D Motion Gener 7.5分 前25% 📋 论文详情 🥇 Unified Multi-Modal Interactive and Reactive 3D Motion Generation via Rectified Flow ✅ 7.5/10 | 前25% | #动作生成 | #流匹配 | #检索增强 #多模态 👥 作者与机构 第一作者:Prerit Gupta (Purdue University, Department of Computer Science) 通讯作者:未说明(但Aniket Bera为最后作者,通常为通讯作者) 作者列表:Prerit Gupta (Purdue University), Shourya Verma (Purdue University), Ananth Grama (Purdue University), Aniket Bera (Purdue University) 💡 毒舌点评 ...

2026-05-04 · 更新于 2026-08-07 · 1 min · 115 words

ICLR 2026 - 图像生成 论文列表

ICLR 2026 - 图像生成 共 1 篇论文 ← 返回 ICLR 2026 总览 排名 论文 评分 分档 🥇 A Hidden Semantic Bottleneck in Conditional Embeddings of Di 8.5分 前25% 📋 论文详情 🥇 A Hidden Semantic Bottleneck in Conditional Embeddings of Diffusion Transformers 🔥 8.5/10 | 前25% | #图像生成 | #扩散模型 | #多任务学习 #模型评估 👥 作者与机构 第一作者:Trung X. Pham(韩国科学技术院,KAIST) 通讯作者:Chang D. Yoo(韩国科学技术院,KAIST) 作者列表:Trung X. Pham(KAIST)、Kang Zhang(KAIST)、Ji Woo Hong(KAIST)、Chang D. Yoo(KAIST) 💡 毒舌点评 本文首次系统性地揭示了扩散Transformer条件嵌入中高达99%的角相似性和超过66%的维度冗余,这是一个反直觉且重要的发现,为模型压缩和条件机制设计指明了新方向。但遗憾的是,论文对“为何如此”的理论解释仍停留在假设阶段(如“训练动态导致稳定信号”),缺乏更深入的数学分析或机制性验证,使得这个精彩观察的理论深度打了折扣。 ...

2026-05-04 · 更新于 2026-08-07 · 1 min · 100 words

ICLR 2026 - 基准测试 #数据集 论文列表

ICLR 2026 - 基准测试 #数据集 共 1 篇论文 ← 返回 ICLR 2026 总览 排名 论文 评分 分档 🥇 Omni-Reward: Towards Generalist Omni-Modal Reward Modeling w 8.0分 前25% 📋 论文详情 🥇 Omni-Reward: Towards Generalist Omni-Modal Reward Modeling with Free-Form Preferences 🔥 8.0/10 | 前25% | #基准测试 #数据集 | #强化学习 #多任务学习 | #多模态模型 #基准测试 👥 作者与机构 第一作者:Zhuoran Jin(中国科学院大学人工智能学院,中国科学院自动化研究所,国家认知与决策智能重点实验室) 通讯作者:Jun Zhao(中国科学院大学人工智能学院,中国科学院自动化研究所,国家认知与决策智能重点实验室) 作者列表:Zhuoran Jin(中国科学院大学人工智能学院,中国科学院自动化研究所), Hongbang Yuan(中国科学院大学人工智能学院,中国科学院自动化研究所), Kejian Zhu(中国科学院大学人工智能学院,中国科学院自动化研究所), Jiachun Li(中国科学院大学人工智能学院,中国科学院自动化研究所), Pengfei Cao(中国科学院大学人工智能学院,中国科学院自动化研究所), Yubo Chen(中国科学院大学人工智能学院,中国科学院自动化研究所), Kang Liu(中国科学院大学人工智能学院,中国科学院自动化研究所), Jun Zhao(中国科学院大学人工智能学院,中国科学院自动化研究所) 💡 毒舌点评 ...

2026-05-04 · 更新于 2026-08-07 · 1 min · 136 words