从划区域到指一点:SPOT-TSE 用距离加方位点查询做目标语音提取
针对固定区域边界敏感与单维度距离或方位重叠歧义问题,SPOT-TSE 用距离加方位连续空间点查询结合空间查询编码与歧义感知训练做多通道提取,在仿真智能眼镜数据上把 D1 到 D3 的 SDR 提升到 14.95、13.94 和 11.05 dB 并把 WER 降到 0.12、0.14 和 0.22,代价是参数量从 0.52M 增加到 1.46M 但运算量下降 …
针对固定区域边界敏感与单维度距离或方位重叠歧义问题,SPOT-TSE 用距离加方位连续空间点查询结合空间查询编码与歧义感知训练做多通道提取,在仿真智能眼镜数据上把 D1 到 D3 的 SDR 提升到 14.95、13.94 和 11.05 dB 并把 WER 降到 0.12、0.14 和 0.22,代价是参数量从 0.52M 增加到 1.46M 但运算量下降 …
针对流式多说话人下感兴趣区语音提取,Sweep-RSE 用目标中心相位对准加窗内显式扫描锁定目标并用差异特征抑制窗外干扰,报告在 Realistic 集 Q=1 取得 12.88 dB 并在空区实现 96 dB 以上衰减,代价是因果流式相对非因果仍有约 0.84 dB 下降。
针对只有无标注混响语音时的单说话人去混响问题,USDnet++ 在 USDnet 混合重建约束上增加对 WPE/WPD 信号处理结果的重建约束并配合多阶段迭代与 SPD 特征输入,在 WSJ0CAM-DEREVERB 上把无监督基线从 PESQ 2.64 提升到 2.94 左右,代价是需要先训练 USDnet 再交替计算 SPD 与微调且推理可能要跑两个模型 …
论文把目标说话人提取重构为线索结构与可用性可变的条件学习问题,用解耦的线索前端与分离器主干实现可配置组合,并在注册、空间、视觉、文本及缺失线索条件下以相同优化流程验证了互补性与稳定性,主要代价是缺失时仍需占位表示且强空间先验依赖准确方向估计。
针对悬停无人机自噪声在极低信噪比下同时破坏方位估计、噪声协方差估计和残留噪声抑制的问题,该研究用相位一致性选时频格、交叉频率混合掩蔽做最小方差无失真响应波束形成、再加零陷参考后滤波,在无混响负 25 分贝输入下报告方位准确率 98.12% 并提升语音质量,但计算只计乘加操作且只验证悬停状态。
针对受物理约束只能放少量麦克风的问题,论文用生成虚拟麦克风信号与特征去增强多通道语音增强,在受限的仿真条件下接近全阵列性能,但虚拟通道位置与阵列几何绑定且需额外计算。
论文以口部辐射为唯一声源的边界元仿真为对照,用假头扫频与两人真人发声的相对传递函数对比,报告耳周尤其是耳下麦克风在 1 千赫兹以下出现仿真无法解释的幅度抬升,代价是样本仅两人且振动传感器未标定。
针对多通道语音增强中均匀 SDR 损失忽视音素级时频线索的问题,该研究提出基于局部语音存在、语音干扰比和谱通量加权的时频加权 SDR 框架,在白噪声下实现更强的干扰抑制和辅音与爆破音识别提升,代价是在语音形噪声下部分失真指标和短时客观可懂度略有下降。
针对多通道增强依赖固定阵列几何的问题,该工作提出由麦克风坐标动态生成卷积核的 Geo-DConv 适配器,在 RealMAN 真机录制数据上让 SpatialNet 与 TF-GridNet 适配可变阵列并在多拓扑与跨数据集上保持提升,代价是增加少量坐标建模参数与计算。
针对可穿戴设备低算力实时增强能力不足的问题,论文用冻结的大容量云端模型以延迟输出、中间层特征和协方差融合三种方式辅助边缘小模型,在标准集上把 SI-SDR 从 1.97 dB 提升到 5.74 dB,在挑战集上从 -1.16 dB 提升到 2.33 dB,边缘侧仅增加约 1.5% 参数和 2.4% 计算量。
该文研究多通道语音增强训练数据的房间声学仿真保真度问题,对比几何声学与波加几何混合仿真训练的 SpatialNet 在实测 Eigenmike 数据上的词错误率,最强证据是混合仿真在 OV40 上相对 ISM-U 降低 38.3%,代价是需要高精度几何、频变材料与全波接收建模。
针对球麦测得空间房间冲激响应中早期反射互相重叠且高度相关的问题,该文把声场写成连续平面波叠加并反演方向核,再用球面高斯拟合与信息准则数出反射个数,在仿真与实测中提高了多回声同时存在时的定位精度与检出率,但弱回声仍受动态范围与阶数限制。
针对分布式麦克风阵列下去中心化独立向量分析的跨阵列序号错乱与强跨阵列耦合问题,该文引入波达方向几何约束与按阵列分带的源模型,在 2 至 8 阵列、无噪与噪声混响仿真中提升分离指标与序号一致性,但依赖已知方向与同步假设且未测通信延迟与真实录音。
针对固定白噪声增益阈值在阵列失配下顾此失彼的问题,该工作用双分支网络同时预测噪声掩蔽与频率相关 WNG 约束并嵌入可微 QEP 鲁棒 MVDR 层,在 8 元线阵仿真与变间距失配条件下以 SNR 增益和 SDR 改善为证据,代价是依赖仿真训练与早期参考信号监督。
针对可穿戴少麦克风阵列在高直混比下双耳信号匹配退化的问题,论文提出由卷积循环网络直接回归视场中心与张角并加权匹配滤波器的 FoV-BSM-Net,在仿真单声源数据上把全条件改善做到 1.0 dB、高直混比下做到 1.7 dB,但评估限于仿真且本次无可验证的开源链接。
针对多个移动说话人方向接近时纯空间线索难以稳定归属的问题,SpkGuideDOA 用压缩分辨率的说话人门控对直接路径相位差估计器做残差调制,在仿真与 LOCATA 上报告了更低的漏检与角度误差,代价是引导分支带来的参数增加与联合排列约束。
论文研究餐馆噪声下四人对话的同伴语音抽取,选择带说话人注册的目标说话人抽取与因果约束,用听音转写正确率与 P.835 质量分证明头部系统相对基线有实质提升,而客观指标与听感排名不一致且保留噪声与保真度不可兼得。
针对双麦克风线性阵列只能做一阶、难以保持波束形状随指向平移的问题,该研究用深度网络直接估计两通道复权值去逼近预设的一阶与三阶心形差分图案,在端射方向取得高于经典差分与参数化方法的信号失真比,同时保持跨指向与跨频率的形状一致,并以左右各一个转向模型演示立体声录制,代价是训练依赖无混响仿真与固定阵列几何。
针对反无人机音频定位中固定窗长在声学证据与时间对应延迟之间的矛盾,该工作用最小探针提取无标签声学状态并以 PPO 同时选择窗口长度与 Mamba 时间特征权重,在 MMAUD-V1 上以 0.23 s 平均窗口取得 0.30 m 误差与 0.136 s 延迟,代价是需要三阶段训练与跟踪反馈维持。
论文把空间房间脉冲响应的聚合回声方向建模为球谐非负密度,用平方和半定规划做极大似然估计与逆变换采样,再以球面切片 Wasserstein 位移插值直线路径上的声源与反射密度,实验显示 Wasserstein 插值在整条路径上切片距离最小,但代价是切片离散化与非负约束带来的两步优化。