残留说话人信息为何还在:用针孔损失直接压低可链接性
针对解耦后内容与韵律流中残留的说话人属性,该工作在训练好的匿名框架上加针孔损失微调以压低同源匿名话语的可聚类性,在三种基线与四种伪说话人策略上一致提升等错误率而词错误率与情感召回仅小幅波动。
针对解耦后内容与韵律流中残留的说话人属性,该工作在训练好的匿名框架上加针孔损失微调以压低同源匿名话语的可聚类性,在三种基线与四种伪说话人策略上一致提升等错误率而词错误率与情感召回仅小幅波动。
该文指出把声音仅当作可去标识数据的一次性合同授权无法满足知情同意,转而主张借鉴生物伦理的动态同意做持续治理,但其仅在可识别声音且权利人有谈判力的受控部署中可行。
针对通用语音模型预标注与人工精修脱节、现有工具缺少流水线编排和私有部署的问题,SpeechBench 用前后端分离加可视化流水线与层级编辑把多模型串接起来,展示了离线笔记本演示的可运行性,代价是本文未报告定量效率与精度对照。
针对神经音频编解码流式匿名中情感被续写偏置抹平的问题,论文用同说话人中性提示配情感源重构监督并在慢自回归声学隐状态做帧级蒸馏,在 VoicePrivacy 2024 上把情感保留推到流式最优,同时延迟保持 180 ms 且推理不新增模块。
该文把说话人匿名与内容匿名放在同一个声学令牌空间里做,用逐帧混合比例 β 融合编码器令牌与音素派生令牌并以命名实体识别触发敏感片段强制替换,在 VoicePrivacy 2024 上以 β=0.7 取得 EER 42.54% 与 WER 3.73%,代价是情感保持 UAR 40.11% 低于同类混合基线。
针对联邦环境中设备算力不一与语音任务所需表征深度不同,该工作在 Wav2Vec 2.0 中间层插入独立预测头并按层独立聚合,证据显示中间层常优于全 12 层,而浅层可大幅降低内存占用。
针对病理语音匿名需保留诊断线索的问题,Phy-VC 用发音到声道几何再到共振的物理瓶颈代替无约束谱包络估计,在只用标准语音训练下提升口吃与老年语音的可懂度与韵律并保持匿名,主代价是鼻音建模仍限于全极点滤波器。
针对手腕动作相似但物体材质不同时惯性传感器难分辨的问题,AnomaSense 用只在无声动作上训练的异常检测器决定何时打开麦克风至多一秒并做掩码,在 15 人 20 类受控实验中把识别从惯性单模态的 78.98% 提升到融合无掩码音频的 96.89%,而 90% 连续掩码下仍保持 86.32%,代价是触发器相对声音事件的召回为 74.28% 且结论限于安静离 …
针对匿名化语音仍残留说话人线索的问题,DAST 用 Fbank 与 WavLM 双流中层融合加原始语音、转换语音、目标匿名语音三阶段训练,在 VPAC 七个系统上以等错误率衡量实现更强攻击,而仅用 10% 目标数据微调就超过现有最优的代价是仍需目标系统数据做适配。
该文针对大音频语言模型的样本级成员推断提出先用多模态盲基线排除分布偏移再审计的流程,发现在分布匹配的数据上攻击降到接近随机,而残余信号只在特定人声与特定文本配对时出现,但跨数据集的高分主要由录音与切分差异带来。
论文用相位声码器时间尺度变换做前端匿名,研究其对语速停顿等交际特征和高层评分的影响,最强证据是微调后匿名与原始词错误率差距缩小到 0.17 个百分点,代价是停顿计数等切分细节仍有波动且说服力构念相关偏低。
针对零样本语音合成中退出说话人仍可被画廊检索重新识别的问题,GUARD 在冻结主干上用门控加逐层激活 steering 并以生成后奖励把遗忘相似度推向人群冒名者水平,在 CosyVoice2 上把遗忘相似度从 0.541 降到 0.103、150 人画廊重识别从 73.5% 降到 0.5%,代价是保留集与可懂度基本不变但新增门控与奖励调参依赖。
论文审计六个英语语音技术数据集,发现可测量的酷儿占比仅 0–1.4% 而不足以做稳健差异度量,并以两个酷儿社群语音库为对照,提出规模化与包容、效率与参与、开放与自主、静态类别与流动身份四组张力,且代价是现有众包与开放流程难以覆盖小而易受污名群体。
本文以酷儿群体为案例指出众包难以建立长期信任与性别多样覆盖,进而提出社区、项目制定、参与方式与个人自主权四阶段双向框架,其代价是协调成本上升且本文未做新的模型训练与定量验证。
针对解耦不彻底导致内容与韵律流残留说话人可链接性的问题,该文在冻结说话人编码器下用针孔损失微调内容编码器、韵律编码器与波形生成器,探测显示学习型韵律泄漏明显下降而词错误率与情感召回仅小幅波动。
该研究用说话人去标识任务同时检验验证抵抗、软生物属性、检索重识别、嵌入结构和可懂度五个维度,显示没有系统在全部维度占优且最保护隐私的系统可懂度损失最大。
DECAF 针对云端语音传输中声纹泄露问题,选择只量化传输内容嵌入并在接收端用共享典型说话人重建,在 0.5 kbps 下报告 43.5% 等错误率和相对 33.2% 词错误率下降,但未压缩时仍需承担重建与微调依赖。
论文在语音问答大音频语言模型上对比梯度上升、任务算术与两种拒答对齐遗忘方法,报告在中度记忆检查点上可把隐私泄露率降低约 80% 且非隐私问答基本保持,但压到接近零泄露时非隐私准确率必然明显下滑。
共收录 118 篇 jep-2026 会议论文的 Reader 深度解读
该研究以保留原说话人听感为前提替换语音中的敏感词,对比直接波形剪贴与经神经编解码器重建的插入路径以及克隆嗓音与合成语境的选择,用自然度、可懂度和信号质量自动指标报告编解码器路径更优,其中自然度倾向于带原句嵌入的编解码器与克隆嗓音,而信号质量倾向于通用嗓音与孤立词合成。