一个冻结编码器如何同时做说话人确认与伪造检测
论文用冻结的 W2V-BERT 2.0 加两套混合小波提示分别适配说话人验证与伪造检测分支,仅训练约 7M 参数就在 SpoofCeleb 评测上得到 0.03% 伪造检测等错率与 0.038 最小 a-DCF,代价是推理时要做两次提示条件前向。
论文用冻结的 W2V-BERT 2.0 加两套混合小波提示分别适配说话人验证与伪造检测分支,仅训练约 7M 参数就在 SpoofCeleb 评测上得到 0.03% 伪造检测等错率与 0.038 最小 a-DCF,代价是推理时要做两次提示条件前向。
针对多用户共享语音助手跨会话谁说了什么的问题,该研究用冻结说话人编码器加可训练轻量投影器生成说话人句柄输入冻结文本大模型,并在受控的 SpeakerBind 上以 70.40% 接近文本标签上限 71.88%,而破坏绑定后性能崩塌,代价是仍依赖转写级联与合成受控评测。
共分析 55 篇语音/AI 论文
共收录 1354 篇 interspeech-2026 会议论文的 Reader 深度解读
针对音频预填充随主干增大而变贵与音频微调损伤文本能力的问题,论文用与主干同层数的窄卷积注入器直接生成层相关键值缓存,在冻结 Qwen3-0.6B 下以音频预填充激活参数从 1108M 降至 552M 为代价逼近微调基线,并用噪声旋转位置编码与键值尺度匹配解决长句泛化。
针对少见说话风格上零样本语音合成出现域偏移而失真的问题,VoiceTTA 在推理时冻结主模型、只用组相对偏好优化更新轻量可学习前缀,并以基频与能量变异系数差异加说话人相似度和可懂度为奖励做在线适配,最强证据是在五类少见场景平均上取得词错误率 3.12 与说话人相似度 0.64 的同时保持自然度,代价是每个说话人需做 50 步候选采样与奖励计算的测试时优化开销 …
共收录 52 篇 odyssey-2026 会议论文的 Reader 深度解读
针对跨语言说话人确认退化与语种识别走说话人捷径的纠缠问题,论文用冻结 W2V-BERT 2.0 加小波前缀调谐与减加双路径融合,在 TidyVoice 上报告 3.16% 和 4.35% 等错误率,代价是依赖后处理校准与多阶段调参。