词对齐韵律:说话人差异远大于抑郁或创伤后应激严重度
论文检验词级韵律能否作为抑郁与 PTSD 的行为标记,发现词特异偏差跨语境几乎不重复,而按说话人聚合后高度可重复,但仍与症状严重度无可检测关联。
论文检验词级韵律能否作为抑郁与 PTSD 的行为标记,发现词特异偏差跨语境几乎不重复,而按说话人聚合后高度可重复,但仍与症状严重度无可检测关联。
论文针对句子重读检测受子词切分影响而概率分散的问题,用冻结 Whisper 加句子级与音素级两个分支和词跨度正则项,在 TinyStress-15K 合成语料上把句子重读 F1 做到 0.934,代价是只在合成朗读条件下验证且两分支仍无直接交互。
论文用同一分类器比较手工韵律特征与冻结自监督表示在两套语料上区分对儿童说话和对成人说话的能力,最强证据是实验室语料上大模型达到约 91.7% 准确率而日常语料仅约 64.4%,代价是协方差池化首层参数膨胀到约 150.8 百万却没有带来对应提升。
论文把风格是否可从文本推断变成跨模态聚类预测问题,用六个说话人上文本嵌入预测声音聚类的提升只有 0.111 且四分之三来自词本身,句子语义只多加 0.026 且几何上不紧凑。
论文用只保留最低 12 个梅尔频带的低通语音微调 Whisper-Medium 来估计能恢复多少词,在 Yodas 上得到约 36% 词错误率、在 AnimeVox 上得到约 60% 词错误率,再用只由基频和能量重建的频谱做对照发现误差升至约 69%,说明低频与词内容联系比预想强但尚不能归因于纯韵律。
论文用冻结 HuBERT 加 12 个事后融合模块做对照,问 64 维韵律监督表示是否在参数量相同的零输入融合之外再降词错误率,最强证据是三语料上 Learned 与 Null 差值仅 +0.07、-0.09、+0.00 个百分点且不显著,代价是干预实验显示模型仍依赖该表示。
共收录 1354 篇 interspeech-2026 会议论文的 Reader 深度解读
针对卒中后构音障碍朗读中停顿是否恰当难自动评的问题,论文用逐字 Whisper 转写加 MFA 对齐与 VAD 修正再交大模型分类,专家评定上轻中度组宏 F1 达 0.68,加入不恰当停顿特征使构音障碍检出宏准确率提升 8.4 个百分点,但重度组因转写不可靠未纳入定量评价。
针对朗读英语词级感知重音评分任务,听觉对比网络用三个声学线索的相邻词非线性对比加轻量聚合,在跨语料迁移上以 202 参数达到 r=0.412 追平冻结 wav2vec2 个基线,加文本后到 r=0.451,代价是依赖外部词边界且仅在单语料对上验证。
该研究用超声舌图和唇图复现基频预测并检验信息来源、时序、过拟合与重音耦合四种假设,最强证据是朗读全局相关约 0.70 掉到自发约 0.39 而重音词预测更好,代价是只用不到 5 分钟微调与朗读训练难以推广到对话。
针对威尼托语 gambellarese 方言半自发陈述句中升调是否只是偶发变体的问题,论文用 269 个完整宽焦点陈述句的听辨分类与归一化基频建模证明升调与降调约各占一半且不受重音位置制约,但词尾重音会改变曲线形态与整体音高。
针对词级重音与语速控制易破坏全局自然度的问题,CraftTTS 用外部教师构造偏好数据再经 SFT 加 DPO 加 GRPO 渐进对齐,最强证据是完整模型在 NMOS 达 3.87 和 SPMOS 达 3.35 的同时 CER 为 7.01%,代价是 CER 与说话人相似度略低于原始 CosyVoice 2 个基线。
CtrlSpeech 针对整句级控制难以修改局部韵律的问题,在 DiTAR 连续声学建模上叠加全局说话人条件与音素对齐的音高、响度和时长信号,零-shot 可懂度和相似度与复现 DiTAR 相当,而显式控制使音高、响度和时长误差大幅下降,代价是纯文本时局部韵律仍不准且依赖基频提取与强制对齐质量。
针对韵律同时承载表达力和身份线索的矛盾,DiffAnon 在语音分词器的语义嵌入上做扩散精修并用无分类器引导连续控制韵律保留度,在同一模型上实现可调的效用隐私权衡,但韵律保留越强则等错误率越低且词错误率与情感召回随之变化。
该研究用 10000 条 7 语 34 情绪的三级感知重音标注检验 EmphaClass 与 WhiStress 在单语、跨语、多语、跨唤醒度和跨数据集下的泛化,报告语系内可迁移、跨语系与中文显著下降而多语联合训练可恢复鲁棒性的证据与代价。
该研究以英语、日语、俄语纵向自然互动为对象,用动态时间规整度量儿童话语后 2 秒内照顾者话语的基频轮廓距离,并以贝叶斯多层模型检验时间间隔与儿童年龄的作用,最强证据是三国儿童年龄越大轮廓距离越大,而短时邻近效应仅在俄语成立且在日语反向,代价是只看整句轮廓、只覆盖三种语言文化。
该文针对英译中语音翻译中词汇重音易丢失的问题,用自建中文重音语料训练音节级检出器 Syl-BiLSTM 定义跨语言评测 CETS,并用带重音标签微调 CosyVoice3 搭建级联系统,最强证据是 CETS 句级 58.30% 与人评高度一致,代价是翻译 BLEU 略低于大模型基线且仅两名录音人。
该研究用江淮官话灌南话的诱发问答任务检验窄焦点与中性焦点的基频实现,发现平均基频与基频起伏都呈现三区格局且跨成年年龄组保持,最强年龄证据是老年组在焦点后位置的平均基频压缩更深,代价是需要区分格局保持与微调变化且不能推广到时长与强度。
论文用试镜与选角双角色游戏收集多语言情境化韵律语音,再用冻结表征加轻量分类器做情感识别与分阶段探测,显示库内情感可学但跨库更难,且年龄与情感在中间表征仍可恢复,代价是整体规模小、非专业表演变异大。
该研究用 2×2×2 被试内设计比较自然与 SVC 合成语音在说话人相似性判断和语调识别中的表现,发现语调与语音类型、熟悉度与语音类型分别在准确率上交互,但合成语音在复杂韵律与社会线索上仍有局限。