不听懂词也能数口吃:用相似度图搬运重复结构
该研究把冻结语音编码器的多层向量序列变成两两内积的二维自注意力权重图再用可训练 VGG-19 做多标签口吃检测,在中英德零样本评估中保留单语 F1 的 77-98% 并在词重复上超过最优模型,但在阻塞延长等声学主导类型上落后约 10-23%。
该研究把冻结语音编码器的多层向量序列变成两两内积的二维自注意力权重图再用可训练 VGG-19 做多标签口吃检测,在中英德零样本评估中保留单语 F1 的 77-98% 并在词重复上超过最优模型,但在阻塞延长等声学主导类型上落后约 10-23%。
针对自发话语中语义、句法和叙事逻辑的非线性退化问题,该研究用语义图、依存图和基于健康常模 PMI 的共现图三路图注意力建模并以样本级门控融合,在 ADReSSo 上报告测试集准确率 90.00%,代价是依赖 ASR 转写与 BERT 词嵌入且未引入声学韵律。
针对原发性进行性失语临床语音稀缺问题,HASS 用词汇检索损伤层与音素编码损伤层串行仿真 logopenic 变体的内容与语音共现损伤并经语音合成生成严重度可控语料,只用合成数据训练的 Wav2Vec2 低秩分类器在真实跨机构测试上报告更高曲线下面积与更小跨折方差,但离散音素编辑与为流利语音优化的合成器仍是明确代价。
针对看图说话中的痴呆检测问题,该方法用 Whisper 同时取声学表示与转写文本,再用大模型抽取可解释语言特征并门控融合,在 ADReSS 和 ADReSSo 上报告 F1 为 89.47% 和 90.14%,代价是依赖外部大模型接口且仅验证了英语看图任务。
该文以神经多样性为镜,对 1976 至 2025 年 Interspeech 与 ICASSP 的 117 篇论文做范围综述与话语分析,报告诊断检测占 78%、临床人员为目标用户占 56%、仅 2 篇由残障者参与评估的失衡格局,并提出转向社会模型的参与式研究路径。
该文针对语音痴呆检测中机器窃听转录与人类窃听声纹两类威胁,用关键词对齐的累积信号对抗混淆破坏转录、用梯度反转加互信息选维加噪抑制声纹,在 Pitt 语料上报告痴呆 F1 约 0.78 而说话人识别近机会水平,代价是信号级信噪比明显为负。
针对儿童自发语音中病理性口吃与发育性不流畅声学重叠的问题,论文用词节点与帧节点的异构图建模词汇意图与声学实现的层级交互,在 47 名儿童的 UCLASS 与 FluencyBank-CWS 合并语料上以说话人独立 5 折验证取得 82.4% 加权准确率和典型不流畅 F1 0.386,代价是核心口吃类 F1 仅 0.280 且依赖增强与过采样平衡。
该研究在一次未达到主要终点的早期帕金森 2 期试验中检验语音、面部与手指敲击客观测量是否与运动检查量表测到同一构念,并报告客观测量基线相关成立、纵向不跟随量表改善且受试者内变异更小,但眨眼率是例外且结论限于早期轻症人群。
该研究把 ALS 功能恶化定义为首次超过最小临床重要差异的事件并用生存分析比较到达时间,报告九项语音面部指标的中位事件时间与所需样本量均明显优于 ALSFRS-R,但代价是依赖指数近似恒定风险假设与存在删失偏倚的单中心远程队列。
针对自发语音内容多变、录音条件不可控下呼吸信号易被淹没的问题,SpiroPhonia 用声学扰动加频谱加停顿三类手工特征与两阶段特征筛选做被试独立分类,最强证据是在 41 人留出测试集上 78.05% 准确率与 87.14% AUC,代价是 201 人小样本与公开平台数据的选择偏差及跨语言跨设备泛化尚未验证。
针对病理嗓音数据稀缺与传统线性增广失效的问题,论文用临床状态词控制的 F5-TTS 合成持续元音,研究 100 到 100000 的合成规模律,最强证据是仅用 10 万合成样本训练的分类器在留存真数据上超过真数据基线并显著提升灵敏度,代价是特异度下降与远域过量合成出现非单调退化。
该研究用音频加文本加图片描述任务图像的三路融合回归预测 MoCA 与 MMSE 分数,最强证据是图片描述任务上 E6 达到 MoCA 均方根误差 2.11 与 MMSE 均方根误差 1.85 左右,代价是小样本波兰语队列、无外部验证且视觉接地只适用于图片描述任务。
针对跨语言时自监督表示混入语言结构导致帕金森病患者被大量漏检的问题,该研究用只从健康对照估计的质心平移做表示层语言归一化,在捷克语德语西班牙语口部轮替任务上把灵敏度和 F1 大幅拉回,代价是特异度下降且德语目标增益最小。
针对自然语音难以手工刻画心衰失代偿的问题,该研究用 3 天内拉近、100 天以上拉远的对比预训练学习录音表征,在 68 例入院与出院排序任务上以跨中心稳定性为主要证据,代价是小样本下差异不显著且高分辨率预训练指标更好但临床迁移更差。
该研究用同一批声学特征同时训练临床诊断模型与人类听判预测模型,发现两者整体部分对齐但在希腊语与男性组完全失齐,而病理模型在该两组未超随机水平,代价是全局可解释性会掩盖这种分组失效。
该研究把痴呆检测做成二分类语音任务,用冻结的基础语音编码器加轻量下游头比较单语与多语训练,最强证据是英语合并集 0.854 F1 与多语合并集 0.761 F1,而代价是小语种与跨语言零样本性能明显下降且依赖切分与时长等实验条件。
该研究针对语音认知障碍筛查中变换器不可解释的问题,选择在 SpeechCARE-AGF 筛查模型上叠加 SHAP 词归因、理论驱动语言特征与四阶段大模型推理,最强证据是测试集 AUC 86.83% 与 F1 72.11% 基础上的 70 例盲评一致率 98% 与可用性 82 分,代价是解释目前只覆盖语言分支而未解释声学分支。
PathBench 把病理语音可懂度评估限定为无需可懂度标签训练的协议比较问题,用六个公开数据集和三种取材协议检验参考条件与刺激类型的影响,新提出的 DArtP 在免参考方法中平均相关最高但仍以显式参考方法为上限且受对齐与录音条件制约。
针对零样本跨语言语音阿尔茨海默检测,ORBIT 用双向交叉注意融合多语言语音与文本预训练表示并以多抽头对抗与球面-双曲共识聚类抑制语言信息,在 mHuBERT+Qwen3 组合上取得 LOLO 平均 86.98% 准确率与 85.29% 宏 F1,但希腊语转写依赖 Whisper-large-v3 生成且 LTLO 仍明显低于混合训练。
该研究用同一批 66 名德语肌萎缩侧索硬化患者的五种语音任务预测言语功能评分与构音障碍生活质量问卷评分,最强证据是跟随个人的纵向设置下重复音节任务对生活质量问卷达到一致性相关系数 0.86,而持续元音在两种设置下均最弱,代价是随访样本仅 17 人且数据不公开。