论文解读

按需分配算力的多语言目标说话人提取前端

针对多语言混合语音中不同输入提取难度不同,该研究用样本级难度估计加共享多出口提取器做自适应路由,在 PolyExtract 上以 0.30 GFLOPs 达到 15.07 dB 宏平均 SI-SNRi 并把下游平均词错误率从 16.8% 降到 14.6%。

 · 约 18 分钟 · 9000 字 阅读 →
论文解读

语义和声学分开建模的目标说话人提取

该文研究编解码器词元怎样用于目标说话人提取,提出判别语义分支加生成声学分支的分工结构,在 Libri2Mix 上把可比基线的 dWER 从 0.388 降到 0.118,代价是依赖两阶段结构和冻结的 DualCodec 编解码器。

 · 约 17 分钟 · 8109 字 阅读 →
论文解读

看得见说话人脸的助听放大:AV-NeuroAMP 一次做完增强与个性化补偿

论文要解决竞争说话人下目标难分离且分阶段放大易放大残留干扰的问题,用目标说话人视频加听力图端到端估计 NAL-R 与 WDRC 目标,最强证据是噪声下客观与听感在竞争语音条件提升最大,代价是整句离线处理与视觉编码器带来约 232 GMACs 计算量。

 · 更新于 2026-10-15 · 约 18 分钟 · 8849 字 阅读 →
论文解读

用一个可连续调节的半径从单通道混合中取出近处语音

论文把查询半径以内的说话人累加和作为直接目标,用连续半径调制和相邻半径一致性约束实现单模型连续区域提取,在实测混响上给出 29.25 dB 等结果,结论限定在两说话人训练和 0 到 4 米查询范围内。

 · 更新于 2026-10-15 · 约 9 分钟 · 4039 字 阅读 →
论文解读

不只靠注册语音找人:五类线索如何各自指定目标说话人

该综述把目标说话人提取组织为音频、视觉、空间、文本语义、神经五类目标线索与判别到生成建模的演进,报告了混淆与失配等条件下的定量变化,并强调无统一最优线索与范式,需按传感、同步与部署约束选择与评估。

 · 更新于 2026-10-15 · 约 19 分钟 · 9497 字 阅读 →
论文解读

没有干净目标时如何把目标语音提取搬到真实会议里:先对齐人,再重混练

针对合成训练与真实对话失配且无信号级真值的问题,该文用合成预训练加目标感知弱监督过渡再做质量过滤的 RemixIT 重混自适应,在 REAL-TSE 未见场景 EVAL-2 上把 TER 从 0.763 降到 0.713,代价是只保留 4.2 小时高置信伪标签且依赖说话人标注与转写质量。

 · 更新于 2026-10-15 · 约 15 分钟 · 7220 字 阅读 →
论文解读

文本线索与注册语音如何在一个模型里共同指向目标说话人

该研究用共享交叉注意力接口统一文本线索和注册语音两种目标指定方式,在 30000 个双说话人混合评估上以五字文本加注册语音达到总体字错率 8.80%,代价是单线索推理弱于并行融合且依赖 oracle 文本跨度。

 · 更新于 2026-10-15 · 约 17 分钟 · 8179 字 阅读 →
会议总览

interspeech-2026 论文深度解读

共收录 1354 篇 interspeech-2026 会议论文的 Reader 深度解读

 · 更新于 2026-10-15 · 约 2613 分钟 · 1309023 字 阅读 →
论文解读

从保音质到选对人:给个性化增强加上嘴部线索的低延迟视听提取

针对在线视听目标说话人提取中选错人且会议泛化差的问题,该研究把嘴部特征接到个性化增强模型的说话人条件输入并联合微调,在无未来帧与 20 ms 算法延迟下把 46% 的混淆降到 1.6%,并在会议上拉开分离差距与 0.57 和 0.63 MOS 整体质量提升,代价是仅在双人混合上微调且未报告设备端真实耗时。

 · 更新于 2026-10-15 · 约 18 分钟 · 8617 字 阅读 →
论文解读

域变了声纹条件该加多重:非对称引导在冻结模型下校准目标说话人识别

针对混合语音中重叠与噪声变化导致目标转写恶化的问题,该研究让同一 Whisper 分别学习目标转写与双说话人串行转写并在解码时以单一引导尺度调节声纹偏好,在冻结主干下用目标域开发集选全局尺度并以轻量预测器做逐句微调,取得可部署的全局加逐句增益而代价是需要标注开发集且预测器仍远低于逐句事后上限。

 · 更新于 2026-10-15 · 约 18 分钟 · 8929 字 阅读 →
论文解读

先分波束再互斥:用目标与干扰波束的帧级交互做提取

针对远场多说话人加噪声下目标说话人提取,论文采用第一阶段视听引导波束形成得到目标与干扰波束、第二阶段双分支跨波束注意力做互斥抑制,在自采真实录制集平均词错误率从 28.40% 降到 20.38%,代价是两阶段级联与双分支结构更复杂。

 · 更新于 2026-10-15 · 约 18 分钟 · 8699 字 阅读 →
论文解读

试次内高分靠捷径:两阶段训练切断脑电试次标识再做目标语音提取

针对端到端脑电引导目标语音提取在跨试次上因试次特异结构走捷径而失效的问题,论文提出冻结编码器的两阶段框架 TRUST-TSE,用同目标说话人负采样的对比预训练加置信度加权提取,在 KUL 上达到 62.27% 选择准确率、在 DTU 上达到 70.40%,代价是仍需处理部分脑电引导模糊片段的参考切换与加权。

 · 更新于 2026-10-15 · 约 21 分钟 · 10099 字 阅读 →
论文解读

儿童语音匿名化为何必须做儿童域适配:内容编码与声码器两端对齐

论文把成人训练的自监督匿名化流水线用 MyST 儿童语料微调内容编码器和声码器并换成儿童音色池,在单人域内与跨口音和双人混合下维持高隐私的同时改善可懂度和儿童感,但双人可用性仍受目标说话人提取质量限制。

 · 更新于 2026-10-15 · 约 18 分钟 · 8748 字 阅读 →
论文解读

不听我:把已注册的人声删掉来避开远场回传延迟

该文把远场回传增强中的本人声音当作已知干扰来删除,用注册语音条件化的时域掩蔽模型实现去噪加删人声,主证据是因果 2 ms 延迟下 Mamba-MinGRU 达到与 TD-SpeakerBeam 可比的 SDR 而主网络计算量从 4.97 GMAC/s 降到 0.33 GMAC/s,代价是小模型与多说话人时 SDR 明显下降且线性 RNN 辅助编码器在去噪条件 …

 · 更新于 2026-10-15 · 约 18 分钟 · 8638 字 阅读 →
论文解读

只用一句 Hi Pandora 做注册:唤醒词目标语音抽取为何听感上去了识别却掉下来

论文把唤醒词片段直接当注册语音研究无预注册的目标语音抽取,在五个真实噪声场景比较四个判别与生成模型并用大模型语音合成增强注册,发现合成注册能提升听感但语音识别错误率仍高于原始混合,存在可听度与可懂度脱节的代价。

 · 更新于 2026-10-15 · 约 16 分钟 · 7937 字 阅读 →
论文解读

不改解码器做多说话人理解:用声纹活动掩码把目标说话人先抽出来

针对远场多说话人音频让口语大模型直接做带说话人归属的转写和问答会遗忘推理能力的问题,论文选择冻结大模型解码器、只在声学编码器侧用 diarization 条件做目标说话人抽取,Dixtral 在四套转写集上宏平均 cpWER 为 15.4%,代价是每个说话人需独立编码解码一次且问答微调会损伤逐字转写精度。

 · 更新于 2026-10-15 · 约 18 分钟 · 8797 字 阅读 →
论文解读

从混合比位置直接跳到目标:MeanFlow-TSE 为何能把一步生成走直

针对多人混合中用注册语音抽取目标说话人的任务,MeanFlow-TSE 沿用背景到目标的混合比流形并改用平均速度训练,在 Libri2Mix 上以单步推理取得 Clean 集 3.26 PESQ 与 18.80 dB SI-SDR,代价是无参考自然度指标仍落后于部分多步模型且复现依赖原文超参数。

 · 更新于 2026-10-15 · 约 15 分钟 · 7243 字 阅读 →
论文解读

多视角训练、单视角可用:用乘法融合把侧脸唇动变成正面提取的增益

针对正面视角假设在转头时失效的问题,该工作用多视角张量融合在训练期学习跨视角唇动关联,单视角测试平均 15.718 dB,最强证据是比正面训练对照高 1.616 dB,代价是训练需同步多视角视频与少量额外计算。

 · 更新于 2026-10-15 · 约 16 分钟 · 7972 字 阅读 →
论文解读

四个人同时说话时,耳后脑电如何同时回答何时听与听谁

针对 4 人并发下单线索易选错人的问题,NeuroMultiSpEx 用耳脑电并行提取包络时间线索与说话人身份线索再门控融合,在 PKU 耳脑电数据上达到 9.613 dB 的 SI-SDRi 并以 82.4% 的四分类注意准确率支撑提取,代价是依赖同组说话人且试验内划分的评测条件。

 · 更新于 2026-10-15 · 约 18 分钟 · 8962 字 阅读 →
论文解读

用稳定的到来方向代替说话人注册:在长会议中直接抽出目标语音

针对长时多方对话中说话人活动不均衡与重叠导致归属困难的问题,论文提出以目标到来方向为空间先验的多通道目标说话人抽取前端 PATSE,在回放与真实对话上以词错率和 diarization 错误率衡量获得一致增益,代价是仍需已知目标方向且对极小角度间隔更敏感。

 · 更新于 2026-10-15 · 约 18 分钟 · 8792 字 阅读 →