提前保护参考语音:用对抗扰动阻止匿名语音的重识别
针对只匿名测试语音而参考语音仍可被对齐利用的问题,该文在参考端提前加入针对匿名系统量化瓶颈的对抗噪声,使等错误率从 14% 左右升到 45% 左右,而加噪后的参考语音本身在有界条件下仍保持可用。
针对只匿名测试语音而参考语音仍可被对齐利用的问题,该文在参考端提前加入针对匿名系统量化瓶颈的对抗噪声,使等错误率从 14% 左右升到 45% 左右,而加噪后的参考语音本身在有界条件下仍保持可用。
该文把已训练好的 Seed-VC v2 只在推理时改造,用随机说话人上下文重构内容条件再投影抑制源说话人方向,在 VoicePrivacy 2026 英语评测上提升隐私并保持可比的字错率与情感效用,但结论只在该协议与所选阈值下成立。
针对图表与语音数值推理中远端接口只收固定媒体的问题,ReCast 用本地文本中间记录改写实体主题并映射数值再重建同模态替身,远端只做选操作数写程序、本地恢复原始操作数后执行,在 4000 个 ChartQA 与 NMSQA 样本上保留 92.43% 远端原生精度而求解器侧泄露为 7.95%。
针对声码器伪造与编解码伪造分布差异大的问题,论文用本地 FedProx 加逐层按到中心距离加权的聚合做联邦伪造语音检测,最强证据是双客户端下平均等错误率降到 0.266% 接近集中联合训练,代价是仍略逊于集中训练且只验证了两客户端严重非独立同分布情形。
针对训练有 16 kHz 高分辨率音频而部署只有 1.25 kHz 低分辨率音频的活动识别错位,RAST 先把教师表示压缩为离散令牌与邻域结构做预热再做局部难负例对齐,在 SAMoSA 和 AudioIMU 上相对低分辨率基线提升约 6.1% 至 7.8%,代价是仍需配对高低分辨率训练数据与三阶段流程。
该文研究精神科双人对话中按角色删除一方语音后的漏删核验问题,用四种开源权重模型在推理模式下扫描删减后音频与转写文本,最强证据是 14 个转写引导配置的或集成达到合并 F1 0.478,代价是精度仅 0.330 而召回 0.870。
该文把说话人级遗忘定义为逼近去掉遗忘集后重训模型的分布,用五种近似遗忘方法在 E-Branchformer 上比较效用与成员推断隐私,发现梯度上升类在简单攻击下最接近理想权衡,但复杂方法会被知晓遗忘的攻击识别,多人同时或顺序遗忘则同时损伤效用与隐私。
共收录 1354 篇 interspeech-2026 会议论文的 Reader 深度解读
该文以链接成功率为逐说话人指标,在两种匿名器、三类攻击者与三种语音量下评估近五千人,发现分布高度两极化但易暴露人群高度不稳定,风险来自三者交互而非说话人固有属性。
本文追问现行人工智能透明度义务为何只盯合成语音输出而漏掉可携带的说话人嵌入模型与多分支合成工作流,并以文本转语音、声音转换、说话人验证与语音识别的趋同证据说明监管语言需要补上模型全生命周期与工作流环节,代价是需要处理助残与身份认同等特殊用途的例外设计。
论文把成人训练的自监督匿名化流水线用 MyST 儿童语料微调内容编码器和声码器并换成儿童音色池,在单人域内与跨口音和双人混合下维持高隐私的同时改善可懂度和儿童感,但双人可用性仍受目标说话人提取质量限制。
论文针对固定隐私变换在不同语句和说话人上泄漏差异大的问题,提出只用变换后音频计算异构 ASR 文本分歧的 CLEAR 方法,在 100 条语音乘 13 个 Kirigami 工作点上与留出强攻击者的音素错误率达到 Spearman 0.8 的跟踪能力,而三模型集成以约 0.30 s 延迟实现可部署的运行时反馈。
针对儿童中心长时录音跨库异构、无共享基准、儿童敏感语音难合规使用的问题,论文用 DataLad 加 ChildProject 标准化 27 个语料并给出四任务基准管线与 ELSI 分级治理,最强证据是全量数据重训语音类型分类在关键儿童类达 73.4% 而仅公开数据平均仅 44.4%,代价是 21 个语料仍需授权且人工筛选映射不可省。
针对精神病高危结构化访谈的长时双人对话问题,DIALOG-DeID 用可替换的语音识别加说话人分离加角色映射加文本去标识流水线产出带角色的脱敏转写,并用说话人归属词错率和限定词保留率证明总词错率 13.3±1.4 时归属词错率仍达 33.1±6.7 且 20-24% 片段丢限定词,代价是分离误差与小样本临床验证的局限。
针对韵律同时承载表达力和身份线索的矛盾,DiffAnon 在语音分词器的语义嵌入上做扩散精修并用无分类器引导连续控制韵律保留度,在同一模型上实现可调的效用隐私权衡,但韵律保留越强则等错误率越低且词错误率与情感召回随之变化。
该文把说话人匿名定义为区分两个说话人的高斯差分隐私权衡函数,用裁剪加噪的高斯说话人机制扰动低维说话人嵌入并经变分自编码器映射回有效嵌入,在 2024 语音隐私挑战上以词错误率低于 4% 实现最高 41.2% 等错误率,同时给出任意攻击者的等错误率理论下界。
论文研究分散在不同类群和地区、不能共享数据的生物声学分类器能否通过任务向量平均直接拼合,证据是 661 种上达到 59.2% 准确率且任务向量近正交,代价是相对联合训练仍有约 9.4% 的组成差距且大类群掉点。
针对语音情感描述在端侧算力不足与云端传输音频隐私风险之间的矛盾,该研究提出只把高熵词块送云端校验的不确定性引导推测解码,在 MER2024 中英子集上以 18.2% 词元上云比例缩小与全云差距,同时把端到端时间从 40.21 s 降到 28.67 s。
针对语音抑郁检测中联邦非独立同分布、多模态不一致与成员推理泄露问题,FedMPA 用模态特异原型与指数滑动平均全局原型库加原型引导损失与混合推理,在 E-DAIC 上以 0.89 无加权平均召回和 0.52 成员推理曲线下面积取得 0.92 隐私性能分数,但仍只验证了黑盒置信攻击与单一数据集。
论文报告 ELSI 已托管 40 余个儿童中心长时音频并用三角色分层隔离原始音频,但 10 个原住民社区语料的控制权仍集中在 3 名欧洲学术托管人手中,作者因此提出增设社区托管人并发出共同设计邀约。