论文解读

舞者身体如何实时转向音乐 Transformer:Con Moto 的可配置代理

Con Moto 针对舞蹈即兴中音乐连贯与低延迟难兼得的问题,用推理时掩码转向加 Max/MSP 与 Ableton 后渲染的双层控制连接身体与模型,并在约 70 人现场十分钟双人演出与 6 人问卷中显示可切换乐器与伙伴感知,其代价是实时多乐器密度受限且末段需离线生成。

 · 更新于 2026-10-15 · 约 20 分钟 · 9644 字 阅读 →
论文解读

把抖动的脑电驯成可演奏的四部和声:采样保持如何让大脑成为乐器

该系统用 Muse S Athena 头环采集脑电频段经 Mind Monitor 以 OSC 送入 Csound,以采样保持加 SATB 查表把生理抖动驯成稳定和声并用 MIDI 键盘做移调与乐句控制,在双人互换脑电的现场二重奏中验证了可演奏性,代价是放弃连续调制精度且未做定量听感与延迟测量。

 · 更新于 2026-10-15 · 约 21 分钟 · 10460 字 阅读 →
会议总览

cvpr-2026 论文深度解读

共收录 103 篇 cvpr-2026 会议论文的 Reader 深度解读

 · 更新于 2026-10-15 · 约 212 分钟 · 106059 字 阅读 →
会议总览

dafx-2026 论文深度解读

共收录 91 篇 dafx-2026 会议论文的 Reader 深度解读

 · 更新于 2026-10-15 · 约 181 分钟 · 90282 字 阅读 →
会议总览

eusipco-2026 论文深度解读

共收录 127 篇 eusipco-2026 会议论文的 Reader 深度解读

 · 更新于 2026-10-15 · 约 247 分钟 · 123292 字 阅读 →
论文解读

把三处非线性压成一处:OCD 非对称削波的显式波数字建模

针对 Fulltone OCD v2 中 MOSFET 加锗二极管构成的非对称削波级难以实时求解的问题,论文把三个非线性合并为单个等效一端口并用分段线性函数显式映射,在 1 V、1 kHz 正弦和 96 kHz 采样下时域误差低至千分之量级,而显式方法实时比 0.14 约为迭代方法 3.12 的二十二分之一。

 · 更新于 2026-10-15 · 约 19 分钟 · 9303 字 阅读 →
论文解读

不打断演奏的反馈:用游戏引擎把鼓面击打变成实时可视练习

针对声音稍纵即逝导致同步指导难的问题,作者用混合鼓传感器接游戏引擎做实时可视,并以第一作者一个月练习的质性案例显示其能辅助自我观察,但也报告了高密度节奏下指示不清等代价。

 · 更新于 2026-10-15 · 约 19 分钟 · 9224 字 阅读 →
论文解读

不做迭代生成:用一次重建加音频到姿态解耦做实时唇同步

论文把唇同步拆成一步潜空间图像编辑器与音频到唇姿态变换器,用纯重建加流匹配代替对抗与扩散,并在重建与跨音频评测中以 109.41 帧每秒的单卡速度达到可比的同步与保真,代价是遮挡与极端姿态仍待加强。

 · 更新于 2026-10-15 · 约 20 分钟 · 9995 字 阅读 →
论文解读

从外接电脑到装进鼓里:混合鼓如何把合成声再送回木腔

该研究以旅行卡洪鼓为腔体、用压电拾取驱动 Daisy Seed 上的 Karplus-Strong 合成,并经两轮迭代实现锂电池供电与内置激励器回路,探索性试奏显示交互直观但致动器与拾取间的结构耦合仍需抗反馈控制。

 · 更新于 2026-10-15 · 约 21 分钟 · 10416 字 阅读 →
论文解读

合并交叉才能发声:用两个三端口结点把一个结交叉改写为可调音色的波导环

论文把一个数学纽结交叉改写为两个三端口并联结点串起的环形波导,用采样率 96 kHz 下 1.0 seconds 脉冲响应证明中段长度能重塑共振峰包络而基频平均仅偏移约几 Hz,代价是在特定中段出现约 25.0 Hz 与约 20.0 Hz 量级的估计尖峰和部分谐波抵消。

 · 更新于 2026-10-15 · 约 20 分钟 · 9977 字 阅读 →
论文解读

把高维潜轨迹铺成可走的地形:Latent Terrain 如何驯服神经音频自编码器

针对解码器独奏式潜空间漫游难以控制且标准多层感知机存在谱偏置的问题,论文用傅里叶特征坐标映射把音频集的潜轨迹铺成二维可交互地形,在鼓、弦乐与语音三类素材上提升映射精度且仅轻微增加实时开销,代价是高斯尺度需手工权衡欠拟合与过拟合。

 · 更新于 2026-10-15 · 约 21 分钟 · 10117 字 阅读 →
论文解读

不追紧同步的混音台:Mezcal 用浏览器 MCU 把远距离合奏做成电台

Mezcal 要解决多人随时随地用浏览器做协作电台的问题,选择 Janus 网关的 MCU 集中混音加 N-1 返送与档案代理,最强的实践证据是持续 6 年的 Conduction Series 等跨国直播,代价是放弃紧同步演奏并承担集中带宽与代理成本。

 · 更新于 2026-10-15 · 约 21 分钟 · 10469 字 阅读 →
论文解读

不等未来语音:MIBURI 如何用对话模型的内部 token 流直接生成全身手势

针对具身对话需要因果、低延迟且富有表现力的手势问题,MIBURI 直接复用 Moshi 语音文本模型的内部 token 流,用身体分区残差码本与时间加运动学双变换器逐帧生成手势,并以 36 ms 每帧的在线演示和多说话人评测支撑其因果实时主张,但仍未达到真值自然度且未建模用户身体。

 · 更新于 2026-10-15 · 约 20 分钟 · 9813 字 阅读 →
论文解读

不训练新模型:在编解码器令牌上借音色、保节奏

问题是用现成神经音频编解码器做可演奏的音色迁移,方法是不训练新生成器而检索调色板令牌颗粒并做连续性约束的序列选择与分组替换,最强证据是调色板扩展下中位实时系数仍低于实时,而代价是分块渲染与完整上下文不等价且缺乏听感验证。

 · 更新于 2026-10-15 · 约 21 分钟 · 10168 字 阅读 →
论文解读

把交互逻辑搬离琴体:nOdes 用服务器集中映射支撑 24 球合奏

nOdes 为社区合奏设计 24 个手持球体与 50 Hz 服务器集中控制环,用重力向量选十二音高类别并接入外部生成系统实证,以 10.6 微秒级发包抖动换来可热重载的映射迭代能力,代价是 20 球以上丢包陡增与近距离饱和干扰。

 · 更新于 2026-10-15 · 约 22 分钟 · 10846 字 阅读 →
论文解读

测得的空间房间脉冲响应:先分离早晚反射,再把阵列缺陷一起重建

该文针对球形阵列测得的高阶 Ambisonics 空间房间脉冲响应,用 Herglotz 分析重建早期反射的方向与到达时间并显式仿真散射与空间混叠,用方向反馈延迟网络重建晚期混响的方向相关衰减,在 IRCAM Espro 厅 EM32 实测上以球面相关和能量衰减浮雕贴近测量,代价是保留单斜率指数衰减假设与阵列阶数限制。

 · 更新于 2026-10-15 · 约 19 分钟 · 9433 字 阅读 →
论文解读

把步进音序器当乐器演奏:低维规则如何保住手势与作者权

该文把欧几里得节奏与方向性旋律遍历做成可在 Pure Data 中多实例叠层的 MIDI 音序器,用两次第一人称即兴回答可演奏性问题,最强证据是双实例下手势与结果的即时可读性与四实例下受约束调制对复杂度的缓解,主要代价是复调层数增加带来的感知负荷与旋律多样性受限。

 · 更新于 2026-10-15 · 约 25 分钟 · 12035 字 阅读 →
论文解读

把传感与表面分开:为照护合奏重建触感与低延迟的模块乐器

针对社区合奏中运动障碍乐手的表达与照护后勤矛盾,该研究用可调硬度的 TPU 晶格加非接触霍尔传感与星形无线音频链实现约 7 毫秒端到端延迟,但开放式可拆洗结构与 2.4GHz 拥挤仍是代价与边界。

 · 更新于 2026-10-15 · 约 19 分钟 · 9047 字 阅读 →
论文解读

椰壳共鸣的两根丝弦如何被算出声音:耶胡的刚性弦、弹塑性弓毛与模态琴桥

该文把耶胡拆成两根刚性弦、按压手指、弹性弓毛与模态琴桥来做有限差分声音合成,用锤击与激光测振标定弦与琴桥参数,在弓弦稳态速度拟合与 10 秒音频约 1.49 秒算完的实时性上给出证据,代价是手指参数靠经验选取且弓力弓速在演奏验证中未知。

 · 更新于 2026-10-15 · 约 18 分钟 · 8802 字 阅读 →
论文解读

把长相交给参考图:参考引导深度压缩如何让说话人像视频实时可流式生成

针对语音驱动说话人像需要同时满足实时流式、高保真和大范围躯干动态的问题,该工作用参考图引导的因果视频 VAE 把压缩率做到 768 并用块自回归整流流 Transformer 生成潜变量,在单卡实现 512×512 下 42 FPS,代价是强依赖参考图质量与训练数据分布且本次未能确认代码模型可达。

 · 更新于 2026-10-15 · 约 20 分钟 · 9937 字 阅读 →