靠自身运动学会去卷积:空中声呐图像如何变清晰
针对稀疏麦克风阵列延迟求和图像旁瓣高、两侧变宽且发射器指向性难标定的问题,该文用里程计驱动的声流预测同时学习去卷积网络与物理结构点扩散函数,在仿真中把全视场分辨率稳定到 5 到 6 度,代价是依赖运动、里程计和仿真验证。
针对稀疏麦克风阵列延迟求和图像旁瓣高、两侧变宽且发射器指向性难标定的问题,该文用里程计驱动的声流预测同时学习去卷积网络与物理结构点扩散函数,在仿真中把全视场分辨率稳定到 5 到 6 度,代价是依赖运动、里程计和仿真验证。
论文用视觉估计的相机旋转与平移方向约束同一视频前后两段立体声的方位预测,并叠加左右声强差约束,在野外步行视频与仿真对照上验证了该弱监督的有效性与重叠声下的局限。
针对定位误差导致分离质量下降的问题,该工作把单点质量优化改为同一音频窗内多位置波束形成加质量加权平均,在真实办公室与商场录音上用更大初始误差验证了更快更稳的纠正过程,代价是质量估计智能体单次响应时间随测试点数增加。
针对噪声与混响下固定频率加权和严格对位匹配不可靠的问题,QK-GCC 用双通道幅度相位频点表征的查询键局部匹配替代手工匹配,并在仿真混响与变信噪比条件下报告了优于 GCC-PHAT 与神经 GCC 变体的帧级精度,同时保持轻量双通道算子结构。
针对麦克风布局与数量变化时的三维波达方向估计,GAMF 用候选方向阵列传输函数做声学描述,分别构建可学习的麦克风对齐匹配与解析的归一化匹配,并以门控融合,在仿真噪声混响下学习分支更稳健,而八麦克风 LOCATA 上混合达到球面平均误差 3.76 度、方位角 2.87 度,但干净低混响下解析方法仍有优势。
论文把单声道音频视觉实例分割扩展为双耳音频视觉实例分割,用纯音频声源定位学图像平面空间与语义先验再注入查询解码器,在 BiAVIS-Bench 上报告相对最强单声道基线提升 17.22% mAP 与 7.71% FSLA,代价是依赖固定相机与仿头采集几何并受类别规模限制。
共收录 1354 篇 interspeech-2026 会议论文的 Reader 深度解读
EchoLoc 针对无声源框标注下热图模糊、阈值后处理难优化的问题,用空间与全局对比学习训练热图并从热图导出伪框来监督查询式框预测器,在 VGG-SS 上报告 36.36 cIoU 和 38.28 AUC,在 Flickr-SoundNet-Test 自适应指标上相对最优基线提升,但固定阈值 AUC 存在未胜出项且框质量依赖热图。
针对紧凑均匀线阵在端射附近小到达时延差扰动被放大成大角度误差的问题,论文在可靠性相位变换框架内分别做加权转向响应功率能量聚合与余弦域加权最小二乘时延融合,并在 1 米与 2 米家用混响实录上用端射误差与退化宽度验证,同时保留不增大孔径与远场单声源等适用边界。
针对分布式麦克风阵列中网格分辨率与计算量的矛盾,G2C-NET 用自适应成对特征聚合压制不可靠麦克风对、用高置信邻域加权求连续坐标,在 625 网格和同分辨率下把仿真 RMSE 降到 25.52 cm、实测降到 23.35 cm,代价是仍需调 λ 并依赖仿真预训练加混合微调。
针对双耳录音中方向与混响参数标注稀缺的问题,该工作用跨通道重建加软声学对比约束预训练空间编码器,在五个仿真房间参数任务上多数超过重建基线,但吸收系数等弱几何任务仍有未胜出项且只在仿真条件下验证。
该文研究用可移动机器人作已知位置校准源时的分布式麦克风几何标定问题,以含时钟捕获偏移的到达时间差模型推导克拉美罗下界并最小化该下界来求最优声源位置,最强证据是在高斯噪声与声学仿真下定位与偏移估计误差均低于随机放置,代价是一阶段联合优化计算量随声源数增大而显著上升。
该研究不做端到端定位或增强,而是冻结 13 个预训练音频编码器、用线性探针检验 7 个声源级与房间级因子是否可解码,发现声源因子系统性易读、房间因子系统性难读,且输入格式与训练范式决定编码偏置。
针对会议中重叠语音难分的问题,该文把 SRP-DNN 估计的波达方向作为显式辅助输入注入 S2SND 主干,并在 AliMeeting 上报告离线相对降低 7.4% 与结合通道注意力后超 19% 的改善,代价是依赖多通道估计与两阶段训练。
BiEAR 针对多说话人方位与距离联合估计,用左右耳各自的神经控制器逐帧调节 Gabor 滤波器组 Q 值,在消声与真实房间中以双控制器相对控制取得方位误差下降,但距离估计仍有被 AuralNet 超越的配置,代价是控制器与自适应滤波带来的额外参数和推理逐帧计算。
针对悬停无人机自噪声在极低信噪比下同时破坏方位估计、噪声协方差估计和残留噪声抑制的问题,该研究用相位一致性选时频格、交叉频率混合掩蔽做最小方差无失真响应波束形成、再加零陷参考后滤波,在无混响负 25 分贝输入下报告方位准确率 98.12% 并提升语音质量,但计算只计乘加操作且只验证悬停状态。
该研究把 GCC-PHAT 拆成可探测的中间目标,追踪 MLP、CNN、Transformer 各层学到什么,最强证据是互功率稳定可解码而 PHAT 相位始终不可解码,代价是混响下时延本身的可解码性仍随 T60 下降。
该研究把板混响脉冲响应转成多分辨率幅度谱图加相位通道后用 ResNet-18 回归七个原始物理参数,在 200 条 5 秒对照上把平均 NMSE 从基线 0.0605 降到 0.0058,代价是依赖下采样到 1470 Hz 的低频段与仿真分布。
针对极角估计中声源谱与头相关传输函数纠缠的病态问题,论文用相关性贝叶斯观察者联合评估生态声源先验与五种空间先验,最强证据是所有变体复现了谱分辨率提高时极角误差与象限错误率单调下降而非对称先验整体更贴合,但生态声源先验增益有限且组水平无一致最优先验。
针对球麦测得空间房间冲激响应中早期反射互相重叠且高度相关的问题,该文把声场写成连续平面波叠加并反演方向核,再用球面高斯拟合与信息准则数出反射个数,在仿真与实测中提高了多回声同时存在时的定位精度与检出率,但弱回声仍受动态范围与阶数限制。