喉部太小又动得快:中矢面实时磁共振里怎样用很少标注分割喉部
针对 0.55T 中矢面语音实时磁共振喉部分割难、专家标注少的问题,论文用 Mask2Former 有监督微调加 Mean Teacher 半监督精炼,在约每人 33 到 79 个标注后增益明显收敛,并用普通话声调实例展示声带长度、喉高、甲状软骨倾角与喉 constriction 变量的时程差异,半监督只能带来小幅且不稳定的提升。
针对 0.55T 中矢面语音实时磁共振喉部分割难、专家标注少的问题,论文用 Mask2Former 有监督微调加 Mean Teacher 半监督精炼,在约每人 33 到 79 个标注后增益明显收敛,并用普通话声调实例展示声带长度、喉高、甲状软骨倾角与喉 constriction 变量的时程差异,半监督只能带来小幅且不稳定的提升。
该研究用颈表加速度计与肩挂噪声剂量计的数天同步监测,把环境等效声级均值与波动映射到音强、基频、倒谱峰突出度和一二次谐波差,报告了随噪声上升音强基频与倒谱峰突出度上升、一二次谐波差下降且非线性模型最优,但噪声只能解释部分方差且组间差异集中在音质斜率上。
该研究用持续音三维磁共振做端点形状、用中矢面实时磁共振轮廓约束大形变微分同胚映射生成连续三维声道,再用有限元求解亥姆霍兹共振验证其共振峰轨迹,代价是系统性偏高与第三共振峰在释放段仍有约 257 赫兹残差。
该研究以三维可压缩流动仿真为基准检验一维模型中 Fant 噪声缩放因子,显示/a/正常闭合时常规值可用,而在气息声不完全闭合与/u/声道收缩下最优值明显偏移,因而一维噪声需按流动构型调整。
该研究把声带双质量振动与一维声道波动方程写成无监督物理损失,用分支输入声道形状、主干输入时空坐标的深度算子一次学习五个元音的稳态周期解,最强证据是基频误差约 0.1-0.2% 与声门流量和唇端声压波形接近传统求解器,代价是训练约 80 小时且目前只验证已见形状的稳态推理。
针对声音到人脸一对多映射导致口型不一致的问题,该文把可见发音拆成张开、展圆、前突三个方向,先用语音发音记忆检索方向运动再用网格拓扑组合成表面一致的顶点运动,在保持整体重建的同时改善了唇部距离与速度误差,代价是两阶段训练且不建模上半脸随机动态与口内结构。
STArK 针对文本到调音运动数据稀缺问题,用冻结 SPARC 提取的伪标签 EMA 加音高响度训练非自回归文本到调音模型,在 LibriTTS-R 上用对齐与韵律条件对照证明 EMA 轨迹与可懂语音可同时生成,而音高建模仍是主要代价。
论文针对开慧话极高调 T4 究竟是假声还是紧喉真声的问题,用全声调多维声学比较证明 T4 是低频谱倾斜更平的紧张型真声,且在与 T6 基频趋同时音质差异消失,代价是仅有声学证据、老年样本与句中单一语境。
该研究用英语音频加电磁发音数据同时估计 6 个口腔声道变量和周期性、非周期性、基频 3 个声源特征,再以鼻音度为腭咽代理跨语言测试,在未见过的法语和俄语上分别保持约 0.83 和 0.74 的平均相关,代价是俄语受噪声和鼻化差异影响更大且腭咽评估样本很少。
论文要解决说话时大脑、肌肉和声道运动无法同拍同看的问题,选择在 0.55T 实时磁共振里同步采脑电和表面肌电并做三级去伪迹,初步显示磁伪迹被压到接近机外水平而代价是单被试、低密度脑电和前极残留扰动。
针对成对电磁发音数据稀少导致声学到发音反演泛化受限的问题,论文用大规模语音网格数据提取伪发音轨迹做预训练再在真实电磁发音数据上微调,在 HPRC 上把 PCC 提升 2.9%、在 USC-TIMIT 上提升 45.3%,代价是伪监督只覆盖可见唇颌且需两阶段训练。
针对说话时颏舌骨肌手工量厚度慢且不一致的问题,论文用深度分割加骨架中线测厚组成 SMMA,在 11 名粤语人上做到高质量图 MAE 为 0.53 mm 且/a:/显著厚于/i:/,代价是对图像质量敏感且样本小而单一。
论文以语音经发音再到语音的闭环为问题,用发音特征加声源与说话人特征以及确定性合成与流匹配生成的对照,显示附加特征与采样步数能提升自然度与说话人相似度,但会削弱发音保真并在噪声与特征替换下暴露依赖。
该研究用三维有限元求解弯曲声道在 14 千赫兹以内的传递函数,发现均匀截面弯曲几乎不改变共振,而元音 A 型非均匀截面在 8 千赫兹以上出现随弯曲角移动的反共振和横向声压结构,代价是理想化圆形截面和开口边界假设限制了向真实发音的直接推广。
该研究固定说话人与文本、只系统改变常态、气声、嘎裂声和句末嘎裂四种发音,用开放式生成与情绪识别检验语音基础模型,发现在 LFMAudio2 上非常态发音显著改变能动性与领导力评价并伴随性别不对称,而商业实时接口连性别这一生物特征检查都未通过。
该文把情绪、语言、病理和源滤波器做成手工特征集,用有界神经互信息估计加非参数校验量化维度间依赖,最强证据是跨维度互信息低于 0.15 纳特而源滤波器互信息为 0.47 纳特,代价是结论只对手工静态特征和六个英语语料成立。
论文以口部辐射为唯一声源的边界元仿真为对照,用假头扫频与两人真人发声的相对传递函数对比,报告耳周尤其是耳下麦克风在 1 千赫兹以下出现仿真无法解释的幅度抬升,代价是样本仅两人且振动传感器未标定。
该研究用超声逐帧追踪舌背与舌骨并做多变量建模,报告/g/以更长更大更快的舌背抬升和舌骨后缩对应低 f0、/k/以舌骨上抬前移对应高 f0,代价是舌轮廓本身差异极小且无声带预振动可直接验证。
该文以 AVID 库 50 人在四个努力等级上的 F0、能量、频谱倾斜和语速斜率为表示,用 K 均值得到三类策略并以噪声、跨语料和 ASR 三重验证支撑,最强证据是簇内可分性与噪声可恢复性,代价是轮廓系数不高且性别关联不显著。
该研究用腭长缩放加咽腔测量锚定的前后向单自由度弯曲来对齐跨说话人 EMA,把 DDK 舌轨迹离散度从 31.28 mm 降到 26.13 mm,但留一说话人岭回归的 F1/F2 预测并未提升,说明几何可比性不等于说话人无关的发音到声学映射。