推理时改标签能不能救回声音场景分割:检测与提取流水线的更新实验
论文针对空间语义分割中检测错误会拖累提取的问题,比较重标注器、适应函数与评估模型的推理时更新组合,发现只在基线较差的片段上有改善,而不加筛选地全量更新会降低整体指标。
下方只统计已核验方向的论文记录,按已核身份去重,身份待核时按页面保留。“直接”只含明确标注该方向的论文;“含子树”同时包含下级方向。点击名称进入论文库继续筛选;数量与上方按标签名称收录的页面数不同。
论文针对空间语义分割中检测错误会拖累提取的问题,比较重标注器、适应函数与评估模型的推理时更新组合,发现只在基线较差的片段上有改善,而不加筛选地全量更新会降低整体指标。
论文把同一空间内多位置房间脉冲响应的短时傅里叶功率写成衰减率参数化的非负矩阵分解,用 Itakura-Saito 散度做损失并提出贡献加权 SAGE 来加速衰减率更新,在真值分离较好的合成双衰减上恢复准确、在耦合房间实测中得到平滑的频率相关混响时间曲线,代价是分量数需预先给定且相距很近的衰减仍难分辨。
为把只支持至多双声道的 GMLv2 扩展到 5.1 声道,论文比较信号、预测、隐变量、特征四层融合,提出特征带组注意力 FGAtt 在感知主干前自适应融合空间组,在五个 5.1 测试集上总体 PCC/SCC 达 0.9063/0.8303,代价是需 5.1 主观数据训练轻量融合模块且冻结主干。
针对低码率一阶 Ambisonics 编码问题,论文保留标准 DirAC 分析合成、只重做空间元数据量化,用三维指向向量加跨频带残差向量量化实现恒定码率,在 750bps 元数据下重建接近 48 kbps 参考并保留可用于声事件定位检测的空间线索,代价是仍依赖外部单声道编解码器恢复 W 通道。
共收录 1354 篇 interspeech-2026 会议论文的 Reader 深度解读
SAID 把四通道音频先转成按方向排布的全景特征再为每个活动声源预测一张带类别的声学图,在 DCASE2026 任务 3 轨道 A 评估集上报告 0.1080 宏观平均精度与 0.3962 宏观皮尔逊相关,代价是需要仿真预训练加真实微调与稀疏压缩才能满足存储限制。
针对端到端全双工语音模型语义弱而双通道对齐易被打断的问题,TurnGuide 用语音活动检测加停顿合并做轮次切分并在轮内交错生成文本与语音,在 Fisher 上显著提升语义连贯性与轮次转换行为,代价是块级交错带来约 0.69 秒量级的理论首包延迟与对码本和声码器的依赖。
针对双麦克风手机上换姿势就失效的贴近麦克风语音检测问题,Ada-Mic 用广义互相关向量隐式携带到达方向信息辅助距离判决,在保持主干不变的可插拔双分支结构下过渡距离与噪声条件下取得最高约 24% 的准确率提升,而额外计算量仅为 ProxiMic 的 7.6% 与 HuBERT 的可忽略水平。
论文把估计两组麦克风之间相对传递矩阵的问题转成监督学习映射,用 SCoNet、FuSNet 和 LAeNet 三套网络分别建模频域与时域关系,在仿真房间中以协方差法为基线比较五项估计误差与语音去噪效果,代价是长窗、固定声源布局与较大的时序推理开销。
针对流水线式语音助手靠静音超时切轮导致迟钝打断的问题,DualTurn 用双通道生成式语音预训练学对话动态再微调出六种信号组合成五种智能体动作,在 Switchboard 上以 wF1 0.633 超过 VAP 的 0.389 并提前约 220 毫秒预判轮替,但回声信号精度仍低且训练限于英语双人对话。
针对双耳录音中方向与混响参数标注稀缺的问题,该工作用跨通道重建加软声学对比约束预训练空间编码器,在五个仿真房间参数任务上多数超过重建基线,但吸收系数等弱几何任务仍有未胜出项且只在仿真条件下验证。
针对含噪混响单通道分离缺空间线索问题,该文用双通道三元组预训练单通道空间编码器并以 MHCA+FiLM 调制 TF-Locoformer,在 WHAMR!上 S 模型 17.4 升至 17.7 dB、M 模型 18.6 升至 18.9 dB,代价是增加 1.0-1.2M 参数并依赖仿真空间条件构造。
针对多通道含噪混合中空间建模易受非平稳与扩散噪声干扰的问题,该文在神经全秩空间协方差分析与说话人活动模型上增加干净混合的信噪比、似然与后验三项半监督目标,在合成会议数据上报告分离指标明显提升而日志小幅改善,但仍依赖干净混合与噪声录音可得且未验证运动声源。
针对参量阵列扬声器非线性解调导致传统声区控制失效的问题,论文把超声载波从固定背景变为与边带交替优化的控制量,在相同功率约束下用声对比度控制验证,实验报告宽带声对比度提升 11.2 dB 且亮区声压级提升 7.0 dB,代价是每阶段都要重测传递函数且载波优化只在 1 kHz 单频上完成。
该研究把 GCC-PHAT 拆成可探测的中间目标,追踪 MLP、CNN、Transformer 各层学到什么,最强证据是互功率稳定可解码而 PHAT 相位始终不可解码,代价是混响下时延本身的可解码性仍随 T60 下降。
针对双耳混合中目标说话人提取后空间线索易失真的问题,该工作选择直达路径头相关传输函数作为空间先验并在窄带分离骨干上做潜空间调制,在仿真上报告了更高的信失真比改善和更小的耳间线索误差,在头颈模拟器实录上报告了更高的非侵入式质量分,代价是依赖目标方位已知与头相关函数库的角度采样密度。
YODAS v3 用分语言关键词搜索与去重爬取解决大规模多语料的语言偏斜问题,以 48 kHz 多声道原始 OPUS 保存与带宽声道实测为证据支撑高保真主张,并以 7 语种识别与三采样率编解码基线显示数据可直接使用,代价是弱标注噪声与网络音频域复杂性仍在。
针对日本长期照护高龄有症状人群的六通道前胸数字听诊任务,论文用 X 线监督训练共享权重 ARP-N 卷积网络并在病人级重复交叉验证下比较临床诊断监督,最强证据是听诊单模态 XRAY 模型 F1 为.729、准确率为.783 而融合模型 AUC 为.791,代价是单中心 185 例与域漂移限制外推。
针对立体声电影音频要同时分出对白、音乐、音效并保住空间感的问题,LiteCASS 用确定性子带重排加两级紧凑 U-Net 做掩码分离,在 DnR v3 立体声扩展上以 1.06 M 参数和 0.72 G 每秒运算量取得平均 SI-SDR 最高,代价是语音感知指标仍落后于更大基线与视觉辅助系统。
针对单通道自监督音频编码器空间盲的问题,Bearings 用掩码重建方向场与双尺度扩散度学习可复用的声场嵌入,冻结拼接后在两个 SELD 数据集上把位置相关 F 值从 4 以下提升到 40 以上,代价是仍需轻量融合头训练且部分指标未超越联合训练模型。