把嗯嗯放在对的时刻:用一个可调阈值的轻量头控制全双工模型的倾听反馈
针对全双工对话模型很少显式建模倾听反馈时机的问题,论文在冻结思路下外挂一个从主干隐藏状态预测反馈起始概率并用阈值触发强制解码的两层头,在 7B 与 1B 两个模型上验证了频率可调与人类评分持平,但高频档会抬高抢话率等代价同时代码链接当前不可用。
下方只统计已核验方向的论文记录,按已核身份去重,身份待核时按页面保留。“直接”只含明确标注该方向的论文;“含子树”同时包含下级方向。点击名称进入论文库继续筛选;数量与上方按标签名称收录的页面数不同。
针对全双工对话模型很少显式建模倾听反馈时机的问题,论文在冻结思路下外挂一个从主干隐藏状态预测反馈起始概率并用阈值触发强制解码的两层头,在 7B 与 1B 两个模型上验证了频率可调与人类评分持平,但高频档会抬高抢话率等代价同时代码链接当前不可用。
针对构音障碍语音可懂度低且隐式重构缺乏可解释性的问题,该研究选择先用共振峰对齐频谱变换显式修复元音空间再做说话人自适应合成,在中英文多库上报告 29% 到 72% 的识别错误率下降和主观可懂度近翻倍,但以说话人相似度轻微下降为代价。
论文比较语义、语义加声学、纯声学与标签四类语音表示在两种面部解码器下的三维面部动画质量,发现能编码音位类别且不含低结构声学信息的表示更准确,而标签表示支撑了文本到语音与面动的统一管线,但混合声学信息反而有害且重建误差与感知并不一致。
针对可穿戴少麦克风阵列在高直混比下双耳信号匹配退化的问题,论文提出由卷积循环网络直接回归视场中心与张角并加权匹配滤波器的 FoV-BSM-Net,在仿真单声源数据上把全条件改善做到 1.0 dB、高直混比下做到 1.7 dB,但评估限于仿真且本次无可验证的开源链接。
该研究针对外毛细胞损伤导致的可懂度下降,用听觉模型响应的正常与损伤差异训练 dCoNNear 助听模型,并在 19 名受试者的矩阵测试中获得显著可懂度提升,但客观音质指标 HASQI 出现下降 trade-off。
针对噪声下可懂度任务,论文用流匹配语音合成同时控制发声努力与清晰度两个维度,在发音拉开时词错误率明显下降,但极端用力合成会偏离识别器分布并带来自然度代价。
共分析 75 篇语音/AI 论文
论文研究餐馆噪声下四人对话的同伴语音抽取,选择带说话人注册的目标说话人抽取与因果约束,用听音转写正确率与 P.835 质量分证明头部系统相对基线有实质提升,而客观指标与听感排名不一致且保留噪声与保真度不可兼得。
共分析 62 篇语音/AI 论文
该文把一阶到三阶上采样定义为给定低阶信号生成缺失高阶通道的条件分布,用流匹配与得分扩散同骨干对比,在混响语音上流匹配信号与听感占优但参数与采样代价明显更大。
论文把声音事件识别的输出从单一确定标签改为类别加置信度加拟声词描述,用冻结编码器加可训练投影器与分类器实现分类与检索联合训练,在 31 类子集上保持分类能力,并在约 85% 准确率的模拟不确定条件下用大模型评价与 310 人听评显示拟声输出更有助于环境理解,代价是拟声不匹配会损害自然度。
论文研究角间隔 ECAPA-TDNN 分类器原型在单位超球面上的集中与有效维度坍缩问题,用铰链式 Riesz 对数能量与参与率最大化两项直接作用于原型的正则改善覆盖,并在 Fast-VGAN 零样本换声上以 WER 从 6.54% 到 5.97%、相似度从 0.65 到 0.69、UTMOSv2 从 2.47 到 2.70 为证据显示鲁棒性提升,而说话人识别 …
XSQ-AST 用冻结的 SQ-AST 做多维度打分、用 WhisperX 做音素对齐、用显著性加核密度估计定位时间毛刺,40 人听音验证显示 Rollout 等方法与听众标注呈中等相关且 AUC 高于随机,但不同伪影类型最优方法不同且存在未评测边界。
共分析 42 篇语音/AI 论文
针对对话语音只看文本历史会漏掉听者即时非言语线索的问题,用回应前 1 秒听者人脸时序做显式回应规划,在严格双人 MELD 协议上时序模型宏平均 F1 和 VAD 一致性略高于纯文本而准确率基本不变,合成阶段仅证明可端到端连通而未改善可懂度。
该文用 1000 组英文转写偏好标注比较词错率、字错率与多配置语义指标,发现词错率与人判断一致度最低而最优语义距离略优但未显著超过字错率,因此主张默认报告字错率并辅以语义指标。
共分析 26 篇语音/AI 论文
该研究用同一套自然对白与九种增强和锚点条件比较年轻正常听力组与四个年长听力组的绝对质量评分,报告年长组系统间可分差异收缩而整体水平随听阈加重下移,最强证据是核心增强两两对比点数范围的缩小与条件平均分差,代价是输出信噪比较高且助听模式高度简化。
论文把已知录音的谐波打击分离放在离线预处理、把相位声码器与叠加相加放在逐帧可变速的实时合成,并用预计算频谱查表把总运行时间降低约一半,代价是更小的预计算跳长需要更多预计算与内存。
共分析 36 篇语音/AI 论文