VoCa:让语音助手边说边在画布上写画的交互设计
VoCa 针对多轮语音对话中纯语音难回看、难指代、难修订的问题,用语音与画布动作协同规划的方案组织讲解与留痕,五天 18 人实地使用显示易用但跟随与修订仍受限。
下方只统计已核验方向的论文记录,按已核身份去重,身份待核时按页面保留。“直接”只含明确标注该方向的论文;“含子树”同时包含下级方向。点击名称进入论文库继续筛选;数量与上方按标签名称收录的页面数不同。
VoCa 针对多轮语音对话中纯语音难回看、难指代、难修订的问题,用语音与画布动作协同规划的方案组织讲解与留痕,五天 18 人实地使用显示易用但跟随与修订仍受限。
针对通用智能体能推理却做不出跨模态多产物的问题,论文用分层技能加声明式执行图与资产注册表做编排,在 UniM-90 上把两类宿主的输入支持率提到 100% 并把相对语义质量分提到 74.94 与 77.78,代价是依赖外部专家后端与显式建图验证。
共收录 1354 篇 interspeech-2026 会议论文的 Reader 深度解读
论文要解决从常态嗓到嘎裂嗓转变点的自动定位问题,选择不惩罚八度跳变的 REAPER 基频加声门闭合时刻估计配合导数阈值与能量峰约束,最强证据是 474 个澳式英语/hVt/样本上与人工标注的组内相关系数为 0.768 且元音长短效应结论一致,代价是自动法系统性偏早一至两个脉冲且仅验证了一种音系来源的尾部嘎裂。
针对通用语音模型预标注与人工精修脱节、现有工具缺少流水线编排和私有部署的问题,SpeechBench 用前后端分离加可视化流水线与层级编辑把多模型串接起来,展示了离线笔记本演示的可运行性,代价是本文未报告定量效率与精度对照。
针对嗓音质量语用功能难于快速假设与验证的问题,论文用微调的 VoiceQualityVC 加 Streamlit 交互界面实现词级嘶哑、气息、鼻音调节,以约 17 小时 20 分高表现力语料和 45k 步微调为代价换来可直接对比的刺激生成能力。
VoxKit 针对无桌面工具同时集成强制对齐与发音优度分析的问题,用可扩展的桌面流水线串起数据集注册、对齐器训练、双引擎对齐与声学优度打分,其最具体的可核对条件是 42 音素库存下 10 ms 分辨率的帧级后验打分,而代价是本文未报告对齐精度与评分有效性的定量实验。
共收录 60 篇 icmc-2026 会议论文的 Reader 深度解读
该研究把协作节奏乐器与多人空间布局放在 PatchWorld 内共同设计,用 9 人两组迭代得出通用节奏盒与三人半圆分层舞台,并报告视觉反馈为主、归因模糊为关键代价的发现。
针对大语料深度模型不适用个人作曲且只处理音高时值的问题,该文把带表情的动机表示为音程状态轨迹并以卡尔曼式随机偏离生成变体,用作曲家自己的选择在线调节方差与结构编辑概率,代价是只做单声部且无定量评测与用户研究。
本文回溯 1980 年代中期以来以西方记谱与音高节奏形式化为核心的计算机辅助作曲,指出其在音色连续性、实时性与多模态输出上的局限,并提出以多模态输入输出与人机协作为方向的扩展愿望,但未提供定量实验验证。
该文用离线描述符分析加四种可堆叠查询在 Max/MSP 里动态形成空间化声音组,并以四组共用 150 个声源的固定媒体作品验证流程,其代价是离线分析耗时、堆叠与动态查询受限和空间化带来的 CPU 压力。
论文要解决高层作曲组织与底层实时 DSP 长期分离的问题,选择全部用 Common Lisp 重建调度、合成、记谱与界面,最强证据是同一 Lisp 映像内改 UGen 与预设并即时发声,代价是依赖 Incudine 与 CLOG 等外部生态且无受控定量评测。
针对光学动捕只记大位移而漏掉 popping 式收缩与紧张的问题,KinoGroove 用预录动捕加肌电在 XR 里异步作曲,以 27 相机加 41 点骨架与上半身多通道肌电为证据,代价是设备昂贵且暂无用户评估。
论文以 2021 年为波伦-皮尔斯单簧管与电子音乐而作的 Linear A 为对象,用 bach 可视化与约束微分音高、用标记驱动卡农与量化、用 MuBu 分段与 SuperVP 重排加 Antescofo 跟谱串起构思到演出,最强证据是同一套标记同时生成乐谱与实时指令,代价是全流程依赖特定 Max 生态与手工校准且无定量对照。
共收录 160 篇 nime-2026 会议论文的 Reader 深度解读
针对多声部各自保持独立拍号又需周期性对齐的多层节拍现场编程问题,OrbitScore 用 beat(n by m) 直接对应 4:(n/4) 理论并以独立循环加 SuperCollider 合成实现,50 分钟公开演出验证了 4:4/5:4/7:4 可实时修改与自动同步,代价是仅 macOS、只做采样回放且不能听外部声音自适应。
针对沉浸式空间音频意图难落实的问题,Satie 用音频优先领域专用语言加浏览器运行时承载大模型代码生成与文本生音频,行数对比显示同需求下脚本约为游戏引擎代码五分之一,而代价是依赖第三方接口与浏览器空间保真度限制。
针对沉浸式音频中轨迹编辑多为单用户、难以共享操控的问题,WeSp 把可共同修改的共享轨迹与每人独占的声音对象分开,并用 4 组共 16 人的协同任务与问卷显示可用性为正向,但密集交互下仍存在听觉区分难与视觉依赖重的代价。
该作品把冒充者现象转写为三关网格游戏,用观众喊格、故障 tile 与成就和自信双计分来演奏自我怀疑,最强的可复述证据是三段软件流水线与足部追踪校准流程,代价是每关之间必须回起点做校准步且目前没有定量听众评估。