静态权重跟不上突发噪声时,用噪声即时生成适配参数
针对非平稳噪声下静态说话人验证泛化不足的问题,论文用全局噪声生成低秩权重、用局部噪声做帧级门控并以对比蒸馏对齐干净流形,在 VoxCeleb1 混合 MUSAN 上报告带噪平均 3.05% 与干净 1.70%,代价是 ECAPA 配置总参数增至 24.19M。
下方只统计已核验方向的论文记录,按已核身份去重,身份待核时按页面保留。“直接”只含明确标注该方向的论文;“含子树”同时包含下级方向。点击名称进入论文库继续筛选;数量与上方按标签名称收录的页面数不同。
针对非平稳噪声下静态说话人验证泛化不足的问题,论文用全局噪声生成低秩权重、用局部噪声做帧级门控并以对比蒸馏对齐干净流形,在 VoxCeleb1 混合 MUSAN 上报告带噪平均 3.05% 与干净 1.70%,代价是 ECAPA 配置总参数增至 24.19M。
论文把冻结说话人嵌入放到含大量干扰者的 1:N 检索中,测信道、噪声、语言、年龄四类失配,发现 ERes2Net 等多尺度监督模型抗滤波和老化但都过拟合英语语音,自适应对称归一化不改前端只校准分数即在电话到网络失配下带来普遍增益,但自监督跨语言骤降等短板仍在。
针对歌声合成检测中伴奏遮蔽与幅度谱丢失相位 discontinuity 的问题,OPERA-Net 以相位一致 CQT 捕捉瞬时频率异常并以 WavLM 语义门控抑制伴奏,在 CtrSVDD 混合 EER 做到 1.54% 而代价是双流结构与预训练依赖。
针对级联语音翻译中识别错误传导问题,论文先量化越南语各类语音替换错误对翻译的破坏,再用基于 XPhoneBERT 音节相似度的文本替换增强做微调,在 FLEURS 越英上把 PhoWhisper 前端的语音翻译提高了 2.04 BLEU 且没有拉低干净文本翻译。
该研究在 Whisper-small 上用免微调的一次性幅度剪枝证明剪对位置可降低词错误率,解码器自注意力剪 50% 在 LibriSpeech test-other 上带来 2.38% 绝对增益,而 40.8% 稀疏度的敏感度感知压缩仅使词错误率恶化 0.20%
针对二值目标粗糙、时序对齐易错和真类概率坍缩问题,论文提出结合排序分与分布距离的连续目标 RanD 并为四种解码结构训练词级置信度估计器,在印地语与英语实验中报告了更低的校准误差与更高的区分度,但删除词与低资源表征仍未解决。
论文提出稳定性-码率-失真三维视角并用连续编辑距离度量几何漂移,在 26 种方言上显示连续隐变量尚稳定而量化后离散序列 катастрофически 破碎,且低资源语言要额外缴纳语言税。
论文用两维逻辑回归探针检验 ADReSS 与 ADReSSo 的声学变异性,发现固定测试集上双特征可达 0.875 与 0.831 的宏 F1,但标签置换仍可偶发高分且蒙特卡洛均值回落到 0.622 与 0.667,代价是固定划分成绩不能作为病理相关性的证据。
针对 AVA 电影数据与现实部署差距,论文构建 44.5 小时多语言多噪声多人脸的 UniTalk 基准,用同协议证明最强 TalkNCE 仅 83.2 mAP 且 Hard 子集降至 77.9 mAP,而 UniTalk 训练的模型能跨库泛化并以 3 小时 AVA 微调达到 92.4 mAP。
针对连续情绪识别中标注滞后于语音的问题,该文提出在特征上做因果滑动平均以引入群延迟来代替直接平移标签,并在 RECOLA 上显示其峰值与移位法相当但对时间参数更不敏感,代价是效价需要更长的累积窗且长窗下个别种子会失效。
针对跨语料口语语种识别的域偏移问题,该研究用音频文本双模态编码加半正样本对比损失约束同语跨域样本以弱权重靠近,印度 12 语实验显示 Whisper 版在未见域上取得最高准确率,但 IndicVoice 绝对精度仍低且推理只用音频分支。
针对强噪声下音频不可靠而视觉融合又难以精细控制的问题,AVUR-LLM 用上层稀疏对齐、声学不确定性门控融合与视觉离散单元重打分三步处理,在 LRS3 上干净 0.75% 与 0 dB 噪声 1.7% 词错误率显示改进,代价是两阶段流程与额外视觉编码和大模型重打分开销。
针对无源数据的多源声场景适配中设备异质导致的预测偏置问题,论文提出先做后验校准再按标签一致性加权的 FASOLA,在 DCASE 2020 六个仿真目标设备上平均准确率报告为 54.43%,代价是需要遍历目标集估计全局统计量且依赖多模型间的一致性假设。
论文研究噪声混响和重叠说话下的零前视流式识别,采用在线语音分离前端加只用干净语音训练的流式识别后端的解耦框架,最强证据是在 LibriSpeech 模拟噪声、CHiME-4 和 LibriCSS 上用 oTF-CrossNet 加干净后端超过同等数据量的多条件训练基线,代价是系统好坏高度依赖分离前端的强度。
针对流匹配零样本语音合成中跳词和复读的对齐失稳,RobustSpeechFlow 用等长复读与跳读隐变量构造难负样本做对比流匹配,在 0.06B 参数下把 Seed-TTS-eval 词错误率从 1.44 降到 1.38,并把 ZERO500 在 NFE=24 的英韩字符错误率分别降到 0.35% 和 0.57%,代价是公开基准说话人相似度未提升且主观听感尚 …
针对语音情感识别中时序建模重而跨库易失效的问题,SETEAB 以深度可分离下采样压缩、SE-Res2Block 通道校准、TEAB 双向门控建模与加权融合组织轻量多尺度流程,在五库平均 UA 达 47.69% 与跨库平均 WA 达 37.53% 的同时把计算控制在 0.06-0.12GFLOPs 量级,代价是跨库方差仍较大且部分基线细节依赖原文表头口径。
针对自监督预训练偏重语音内容而忽视局部伪造痕迹的问题,该文提出混帧扰动加帧级监督的中间后训练阶段,在 ASVspoof5 上以无增强单模型取得 4.50% 等错误率,并在 ASVspoof2021 上把 LA 与 DF 差距压缩到 0.16 个百分点,代价是需要额外调拼接比例与 LoRA 位置。
论文以跨生成器与黑盒低资源两条赛道检验环境声真假判别,第一名在两赛道均把等错误率压到 0.3% 左右,代价是依赖大规模自监督表征、针对性增广与多系统集成。
论文在同一神经音频编解码器下比较连续表示预测与离散词元分类两种增强路线,报告全微调连续路线在多组 DNS-MOS 上领先且增强器计算量更低,代价是仍需完整编解码流水线与干净语音先验码本。
针对超声舌成像的探头位移与散斑噪声及协同发音长时依赖,论文用聚类降采样加物理增强与三维卷积加双向循环建模,在儿童超声数据集的重叠与未见说话人两种划分上把词错误率降到 0.1595 与 0.0597,代价是增强幅度与掩蔽比例需小心约束且大模型在小数据上并未占优。