Posts

📄 Localizing Speech Deepfakes Beyond Transitions via Segment-Aware Learning #音频深度伪造检测 #数据增强 #自监督学习 #语音安全 #鲁棒性 🔥 8.0/10 | 前25% | #音频深度伪造检测 | #数据增强 | #自监督学习 #语音安全 学术质量 7.5/7 | 选题价值 0.5/2 | 复现加成 0.0 | 置信度 高 👥 作者与机构 第一作者：Yuchen Mao 通讯作者：Yanmin Qian 作者列表：Yuchen Mao (Auditory Cognition and Computational Acoustics Lab, MoE Key Lab of Artificial Intelligence, AI Institute, School of Computer Science, Shanghai Jiao Tong University), Wen Huang (同Yuchen Mao的单位), Yanmin Qian (上海交通大学计算机科学学院 听觉认知与��算声学实验室，教育部人工智能重点实验室，AI学院； VUI Labs) 💡 毒舌点评 亮点：论文精准地指出了现有方法过度依赖“过渡区域伪影”的“捷径学习”短板，并提出了简洁有效的“段感知学习”框架，通过位置监督和跨段混合，强制模型理解伪造内容本身，显著提升了在最具挑战性的“中间段”的检测能力和跨数据集泛化性能。短板：尽管实验充分，但对模型容量（如Conformer块的具体参数）、训练硬件和时长的描述不够详尽，且未公开模型权重，这为学术界和工业界的复现与直接应用设置了一定门槛。 ...

📄 LongSpeech: A Scalable Benchmark for Transcription, Translation and Understanding in Long Speech #基准测试 #数据集 #语音识别 #语音翻译 #多语言 ✅ 7.8/10 | 前25% | #基准测试 | #数据集 | #语音识别 #语音翻译 学术质量 5.5/7 | 选题价值 1.8/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：Fei Yang（上海交通大学；阿里巴巴国际数字商务） 通讯作者：Chenyang Lyu（阿里巴巴国际数字商务） 作者列表： Fei Yang（上海交通大学；阿里巴巴国际数字商务） Xuanfan Ni（阿里巴巴国际数字商务） Renyi Yang（代尔夫特理工大学；阿里巴巴国际数字商务） Jiahui Geng（林雪平大学） Qing Li（格罗宁根大学） Chenyang Lyu（阿里巴巴国际数字商务） Yichao Du（阿里巴巴国际数字商务） Longyue Wang（阿里巴巴国际数字商务） Weihua Luo（阿里巴巴国际数字商务） Kaifu Zhang（阿里巴巴国际数字商务） 💡 毒舌点评 亮点：论文直面语音模型从“短句能手”到“长卷大师”转型过程中的评测荒漠，构建了一个任务全面、数据量级宏大（10万+段，每段约10分钟）的“压力测试场”，其“内容分离”和“时序定位”等任务设计尤其刁钻，能有效暴露模型在长上下文推理上的短板。短板：作为基准，其自身的“创新”更多是工程整合与任务设计，论文对实验结果的剖析深度略显不足（例如，为何某些模型在特定任务上崩溃？），且完全依赖GPT-4作为某些任务的评估器，引入了“用更贵的模型评估便宜的模型”的黑箱与成本问题。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：论文评估了多个现有模型，但未提及公开自己训练的模型权重。 数据集：论文明确表示“The benchmark will be made publicly available to the research community.”，即数据集计划开源，但未给出具体的下载链接或平台（如Hugging Face）。 Demo：论文中未提及。 复现材料：论文提供了数据构建的方法论和流程描述，这是重要的复现材料。但未提供数据预处理脚本、评估脚本或具体的超参数配置。 引用的开源项目：论文引用了被评估的音频语言模型的代码库或技术报告，如Whisper [1], Qwen2-Audio [5], Kimi-Audio [6], AudioFlamingo3 [9], Voxtral [10], DashengLM [11]。也引用了评估工具如GPT-4-Turbo [14]和指标库如ROUGE [13]。 📌 核心摘要 解决问题：现有语音基准测试（如LibriSpeech）主要针对短音频，无法有效评估模型处理真实世界长时音频（如会议、讲座）的能力，特别是在需要跨片段理解、推理和跟踪复杂信息时。 ...

📄 Look, Listen and Segment: Towards Weakly Supervised Audio-Visual Semantic Segmentation #音视频语义分割 #弱监督学习 #对比学习 #跨模态 #视觉提示 ✅ 7.0/10 | 前25% | #音视频 | #对比学习 | #音视频语义分割 #弱监督学习 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 -0.5 | 置信度 中 👥 作者与机构 第一作者：Chengzhi Li（北京理工大学计算机学院） 通讯作者：Ping Jian（北京理工大学计算机学院） 作者列表：Chengzhi Li（北京理工大学计算机学院）、Heyan Huang（北京理工大学计算机学院）、Ping Jian（北京理工大学计算机学院）、Yanghao Zhou（北京理工大学计算机学院） 💡 毒舌点评 亮点：论文的“先看后听”直觉式框架设计非常巧妙，将人类感知顺序转化为模型中的“时序视觉提示”模块，有效提升了弱监督下的音频理解精度，是解决该问题的一个新颖且合理的思路。短板：作为一篇方法论论文，开源信息的完全缺失是硬伤，极大削弱了其可复现性和对社区的即时贡献，也与顶级会议推动可重复研究的目标背道而驰。 🔗 开源详情 论文中未提及任何开源计划、代码仓库链接、预训练模型权重或数据集获取方式。也未提供在线演示（Demo）。虽然文中提到了依赖的基线方法（如AST）和工具（如Dense CRF），但并未给出其具体使用的开源实现版本。因此，复现该工作需要读者自行实现所有模块并调试训练流程，门槛较高。 📌 核心摘要 本文旨在解决音视频语义分割（AVSS） 任务中标注成本高昂的问题。为此，作者首次提出了弱监督音视频语义分割（WSAVSS） 任务，仅使用视频级标签训练模型，以生成帧级的发声物体类别掩码。论文提出了渐进式跨模态语义对齐（PCAS） 框架，其核心包含两个模块：1）“先看后听” 模块，利用视觉特征作为提示来增强帧级音频理解；2）“先听后分割” 模块，通过实例级和令牌级的渐进式对比学习，实现从粗到细的跨模态对齐。与已有方法相比，新在：首次定义WSAVSS任务；首次在音视频分割中引入“视觉提示”来指导音频理解；设计了新颖的渐进式跨模态对比学习框架。实验结果显示，在弱监督设置下，PCAS在AVS-S4和AVS-MS3数据集上的性能大幅超越了现有弱监督基线（例如，在AVS-S4上以ViT-base为主干达到74.2 F-score 和 60.50 mIoU）。在更难的AVSS子集上，PCAS甚至达到了与全监督方法相竞争的性能（52.2 F-score， 42.07 mIoU）。其实际意义在于能够以低成本获取高质量的音视频语义分割数据，推动该技术的应用。主要局限性在于论文未开源代码，部分训练细节不完整，且实验主要在AVSS相关数据集上进行，泛化性有待进一步验证。 ...

📄 Loose Coupling of Spectral and Spatial Models for Multi-Channel Diarization and Enhancement of Meetings in Dynamic Environments #说话人日志 #语音分离 #麦克风阵列 #波束成形 #多通道 ✅ 7.2/10 | 前25% | #说话人日志 #语音分离 | #麦克风阵列 #波束成形 | #说话人日志 #语音分离 学术质量 7.2/7 | 选题价值 6.0/2 | 复现加成 -0.5 | 置信度 中 👥 作者与机构 第一作者：Adrian Meise (Paderborn University, Germany), Tobias Cord-Landwehr (Paderborn University, Germany) （论文标注“*Authors contributed equally”，为共同第一作者） 通讯作者：未说明 作者列表：Adrian Meise (Paderborn University), Tobias Cord-Landwehr (Paderborn University), Christoph Boeddeker (Paderborn University), Marc Delcroix (NTT, Inc., Japan), Tomohiro Nakatani (NTT, Inc., Japan), Reinhold Haeb-Umbach (Paderborn University) 💡 毒舌点评 亮点： 论文直击一个长期被忽略但非常实际的痛点——传统谱空联合模型在动态会议场景（说话人移动）下的根本性失效，并提出了一个数学上优雅的“松耦合”解法，实验也证明了其在模拟移动场景下的巨大优势。 短板： 该模型的性能高度依赖于谱特征（说话人嵌入）的质量，而论文本身也承认在重叠语音下嵌入质量会急剧恶化，这使得模型在高重叠率的真实复杂场景中的有效性存疑；此外，所有实验均基于模拟的位置变化（旋转麦克风通道），而非真实的说话人移动轨迹，验证的充分性打折扣。 ...

📄 LOTUSDIS: A Thai Far-Field Meeting Corpus for Robust Conversational ASR #语音识别 #数据集 #远场语音 #迁移学习 #低资源 ✅ 7.5/10 | 前25% | #语音识别 | #数据集 | #远场语音 #迁移学习 学术质量 5.5/7 | 选题价值 1.5/2 | 复现加成 0.5 | 置信度 高 👥 作者与机构 第一作者：未说明（论文作者列表未按顺序标注第一作者） 通讯作者：未说明（论文未明确标注通讯作者） 作者列表：Pattara Tipaksorn (NECTEC Speech and Text Understanding Research Team), Sumonmas Thatphithakkul (NECTEC Speech and Text Understanding Research Team), Vataya Chunwijitra (NECTEC Speech and Text Understanding Research Team), Kwanchiva Thangthai (NECTEC Speech and Text Understanding Research Team) 💡 毒舌点评 亮点：数据集设计非常“接地气”——在真实的、有冰箱和空调噪音的办公室里，用从领夹麦到10米远蓝牙音箱的多种普通设备录音，完美模拟了真实会议中“设备杂、距离远、有混响”的痛点，比用专业阵列录音更有工程实践价值。短板：论文的学术贡献主要停留在“造轮子立规矩”阶段，虽然验证了Whisper微调的有效性，但缺乏对ASR模型本身更深入的技术探索（例如如何更好地处理重叠或超远场语音），更像是一个详实的“产品说明书”和“测试报告”。 ...

📄 Low-Bandwidth High-Fidelity Speech Transmission with Generative Latent Joint Source-Channel Coding #语音增强 #语义通信 #端到端 #生成对抗网络 #流式处理 ✅ 7.5/10 | 前25% | #语音增强 | #端到端 | #语义通信 #生成对抗网络 学术质量 6.5/7 | 选题价值 0.5/2 | 复现加成 0.5 | 置信度 中 👥 作者与机构 第一作者：Guangkuan Li（北京邮电大学） 通讯作者：Jincheng Dai（北京邮电大学） 作者列表：Guangkuan Li（北京邮电大学）、Shengshi Yao（北京邮电大学）、Sixian Wang（上海交通大学）、Zhenyu Liu（University of Surrey）、Kai Niu（北京邮电大学）、Jincheng Dai（北京邮电大学） 💡 毒舌点评 亮点：该工作聪明地将神经音频编解码器（RVQ-GAN）与联合源信道编码（JSCC）解耦后又紧密融合，利用生成模型在低带宽下提供先验信息，有效缓解了传统JSCC在极低带宽下的质量崩塌问题。短板：虽然声称“节省60%带宽”，但对比基线（Opus+LDPC, Encodec+LDPC）的配置细节（如Opus的码率、LDPC的开销）未在文中清晰界定，使得“节省”的绝对值在不同实际部署条件下可能有所变化。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：未提及。 数据集：使用LibriSpeech数据集，该数据集为公开数据集。 Demo：提供了在线演示链接：https://semcomm.github.io/GLJSCC 。 复现材料：论文详细描述了模型架构、三阶段训练策略、损失函数、关键超参数（如网络维度、码本大小、学习率等），为复现提供了必要的理论细节。但未提供训练配置文件、预训练检查点或更细粒度的超参数搜索范围。 论文中引用的开源项目：引用了Encodec（神经音频编解码器）、5G LDPC编码等作为对比基线。具体代码仓库未在提供的文本中列出。 总结：论文提供了理论框架和部分实现细节，并附有Demo，但未开源核心代码和模型，因此严格复现仍需一定工作量。 📌 核心摘要 问题：现有的语音联合源信道编码（JSCC）方法在带宽极度受限时，感知质量会急剧下降，难以满足高保真传输需求。 核心方法：提出生成式潜在联合源信道编码（GL-JSCC）框架。该框架首先使用RVQ-GAN将语音压缩到一个与人感知对齐的潜在空间，然后在该潜在空间内使用流式Transformer执行JSCC，最后采用三阶段渐进式训练策略进行优化。 创新点：与传统在源空间或简单神经网络潜空间进行JSCC不同，本文在生成式潜在空间中进行JSCC，该空间具有更高的稀疏性和感知对齐性，且生成模型本身为低带宽下的重建提供了额外的先验知识。 主要实验结果：在AWGN和COST2100衰落信道下，GL-JSCC在低信噪比（SNR）和低带宽条件下均优于传统方法（Opus+LDPC, AMR-WB+LDPC）和神经网络基线（DeepSC-S, Encodec+LDPC）。例如，在SNR=2dB的AWGN信道下，GL-JSCC能达到与Opus+LDPC相同的感知质量（PESQ分数），但节省高达60%的带宽。主观MUSHRA测试也证实了其优越的听感。 实际意义：该框架为在带宽受限的弱网络（如工业物联网、偏远地区）中进行高质量语音传输提供了一种有效解决方案，推动了语义通信在音频领域的实用化。 主要局限性：性能上限受限于RVQ-GAN神经编解码器本身的重建质量（PESQ分数最高约4）；实验主要基于英文语音数据集（LibriSpeech），在其他语言或声学环境下的泛化能力未验证。 🏗️ 模型架构 GL-JSCC的整体架构分为两个核心部分：生成式潜在编解码器（Latent Codec） 和 联合源信道编解码器（JSCC Codec），其流程如公式(1)所示：语音 x -> 潜在编码器 E -> 潜在表示 l -> JSCC编码器 J_e -> 发送符号 s -> 无线信道 -> 接收符号 ŝ -> JSCC解码器 J_d -> 潜在表示 l̂ -> 潜在解码器 D -> 重建语音 x̂。 ...

📄 Low-Frequency Harmonic Control for Speech Intelligibility in Open-Ear Headphones #语音增强 #信号处理 #鲁棒性 #实时处理 ✅ 6.5/10 | 前50% | #语音增强 | #信号处理 | #鲁棒性 #实时处理 学术质量 5.0/7 | 选题价值 1.5/2 | 复现加成 0.0 | 置信度 中 👥 作者与机构 第一作者：Yuki Watanabe（NTT Inc., Tokyo, Japan）（基于作者列表顺序判断，论文未明确标注） 通讯作者：未说明 作者列表：Yuki Watanabe（NTT Inc., Tokyo, Japan）、Hironobu Chiba（NTT Inc., Tokyo, Japan）、Yutaka Kamamoto（NTT Inc., Tokyo, Japan）、Tatsuya Kako（NTT Inc., Tokyo, Japan） 💡 毒舌点评 亮点：巧妙地利用了语音基频与谐波之间的能量关系，通过“抑制基频、增强谐波”这种反直觉的方式，在特定硬件限制（小扬声器低频弱）和环境掩蔽（低频噪声强）下找到了一个提升可懂度的“巧劲儿”，想法很有针对性。 短板：实验部分过于“迷你”——仅用8位听众和6个语音样本就得出“显著提高”的结论，说服力不足，且完全没有与经典的语音增强算法（如谱减法、维纳滤波）进行对比，让人无法判断其在现有技术体系中的真实位置。 🔗 开源详情 论文中未提及任何开源计划。具体来说： 代码：未提供代码仓库链接或提及开源。 模型权重：未提及（本方法无需模型权重）。 数据集：未提及公开。所用6个评估样本来自内部数据集，未提供获取方式。 Demo：未提供在线演示。 复现材料：未提供训练细节、配置、检查点或附录说明。仅提供了方法原理和实验条件的概述。 论文中引用的开源项目：引用了MATLAB的Audio Toolbox中的pitch函数用于基频估计。 📌 核心摘要 解决的问题：开放式耳机因采用小型扬声器单元导致低频输出不足，在嘈杂环境中（尤其是存在大量低频成分的环境噪声时），语音的低频部分容易被掩蔽，导致可懂度下降。 方法核心：提出一种名为“低频谐波控制（LFHC）”的低复杂度后处理方法。核心是通过一个延迟为基频周期2.5倍（τ=τ₀/2.5）的FIR梳状滤波器来抑制语音的基频（F0），并同时增强其第二和第三谐波，然后将处理后的信号通过一个截止频率为5倍基频的低通滤波器，最后与原信号相加。 创新之处：与传统强调基频的音高增强不同，本方法反其道而行之，专注于将能量从易被掩蔽的基频重新分配到不易被掩蔽且耳机仍能有效重现的第二、三谐波频带。该方法计算复杂度低，适合在开放式耳机的DSP芯片上实时运行。 主要实验结果：在棕色噪声（69 dB SPL）环境下，使用类似MUSHRA的主观评估（但标准为可懂度）。当加权因子α=0.6时，处理后语音的可懂度得分（相对于未处理同音量语音）在6个测试语音样本中的3个上获得了显著提升，对另外3个无显著降低；当α=0.9时，过度处理导致2个样本的可懂度显著下降。散点图显示，处理前第二、三谐波能量相对基频较高的语音，处理收益较小（相关系数-0.93）。详细数据见下表： 处理条件 声压级 (dB SPL) 说明 OR (原始参考) 60 未经处理的原始语音 OR-3 57 未经处理，音量降低3 dB OR-6 54 未经处理，音量降低6 dB LFHC-3(0.6) 57 使用本文方法（α=0.6），音量与OR-3相同 LFHC-3(0.9) 57 使用本文方法（α=0.9），音量与OR-3相同 图5（论文中图片4）展示了不同条件下语音可懂度得分的均值及95%置信区间。与未处理的OR-3相比，LFHC-3(0.6)对多数样本有正向提升或无影响，而LFHC-3(0.9)则对部分样本产生负面影响。 ...

📄 Low-Latency Audio Front-End Region-of-Interest Beamforming for Smart Glasses #语音增强 #波束成形 #实时处理 #多通道 ✅ 7.0/10 | 前25% | #语音增强 | #波束成形 | #实时处理 #多通道 学术质量 6.0/7 | 选题价值 1.5/2 | 复现加成 -0.5 | 置信度 高 👥 作者与机构 第一作者：Ariel Frank（Technion – Israel Institute of Technology, Andrew and Erna Viterbi Faculty of Electrical and Computer Engineering） 通讯作者：未说明 作者列表：Ariel Frank（Technion – Israel Institute of Technology, Andrew and Erna Viterbi Faculty of Electrical and Computer Engineering）、Israel Cohen（Technion – Israel Institute of Technology, Andrew and Erna Viterbi Faculty of Electrical and Computer Engineering） 💡 毒舌点评 亮点：论文最大的价值在于其“公正裁判”的角色——它没有盲目声称自己方法最优，而是通过建立一个统一的数学框架，用同一套指标（延迟、复杂度、性能）系统地量化比较了时域和STFT域两种主流实现路径，结论清晰且有实验数据强力支撑，为智能眼镜产品的技术选型提供了坚实的工程依据。 短板：研究范畴严格限定在传统信号处理波束成形的对比上，完全未与当前火热的基于深度学习的波束成形/语音增强方法进行对比（即使引用了相关工作），使得结论的时效性和全面性打了折扣；实验在高度可控的消声室完成，对于智能眼镜实际使用中复杂的混响、噪声、多人的环境泛化性未经验证。 ...

📄 Low-Resource Guidance for Controllable Latent Audio Diffusion #音乐生成 #扩散模型 #控制生成 #推理优化 🔥 8.5/10 | 前25% | #音乐生成 | #扩散模型 | #控制生成 #推理优化 学术质量 6.2/7 | 选题价值 1.8/2 | 复现加成 0.7 | 置信度 高 👥 作者与机构 第一作者：Zachary Novack（UC San Diego & Stability AI， †表示工作完成于Stability AI实习期间） 通讯作者：未明确说明（论文未明确指定通讯作者） 作者列表：Zachary Novack（UC San Diego & Stability AI）、Zack Zukowski（Stability AI）、CJ Carr（Stability AI）、Julian Parker（Stability AI）、Zach Evans（Stability AI）、Josiah Taylor（Stability AI）、Taylor Berg-Kirkpatrick（UC San Diego）、Julian McAuley（UC San Diego）、Jordi Pons（Stability AI） 💡 毒舌点评 亮点：巧妙地将“Readout”思想引入音频扩散模型，并设计了“Latent-Control Heads”，绕过了极其耗时的解码器反向传播，将推理时间和显存占用降低了约一个数量级（端到端150秒 vs LatCH 17.5秒），这是非常实用的工程优化。短板：该方法本质上是给一个已有的“大模型”（Stable Audio Open）外挂一个“小控制器”，控制精度严重依赖这个小控制器的拟合能力，实验也显示对于快速变化的音高控制效果仍然不佳，且核心控制逻辑（TFG）并非首次提出。 ...

📄 Low-Resource Speech-Based Early Alzheimers Detection via Cross-Lingual and Few-Shot Transfer Learning #语音生物标志物 #迁移学习 #多语言 #少样本 #低资源 ✅ 7.5/10 | 前25% | #语音生物标志物 | #迁移学习 | #多语言 #少样本 学术质量 7.5/7 | 选题价值 8.5/2 | 复现加成 0 | 置信度 高 👥 作者与机构 第一作者：Yongqi Shao（上海交通大学） 通讯作��：未说明 作者列表：Yongqi Shao（上海交通大学）， Bingxin Mei（上海交通大学）， Hong Huo（上海交通大学）， Tao Fang（上海交通大学） 💡 毒舌点评 亮点： 论文首次将参数高效的LoRA技术系统性地应用于跨语言阿尔茨海默症（AD）语音检测，构建了涵盖四种语言的首个多语言基准测试，为低资源医疗AI提供了实用框架。 短板： 多源语言联合训练的效果反而不如单源迁移，这一反直觉的结果暴露了当前多语言数据集规模小、异质性高带来的严重瓶颈，使得“多源更优”的假设未能得到验证，也削弱了框架在复杂场景下的鲁棒性。 🔗 开源详情 代码：论文中未提及代码链接。 模型权重：未提及。 数据集：论文中提到所用数据集来自DementiaBank平台，但未提供具体整合后的数据集或下载链接。 Demo：未提及。 复现材料：论文提供了较为详细的实验设置（模型超参数、训练策略），但未提供具体的配置文件、检查点或附录。 论文中引用的开源项目：使用了预训练模型Wav2Vec2-large-XLSR-53 [18]，并参考了LoRA [17] 方法。 📌 核心摘要 要解决什么问题：解决在低资源语音环境下，利用语音进行早期阿尔茨海默症（AD）检测的难题。现有研究多局限于英语和单一数据集，无法有效服务于全球众多低资源语言人群。 方法核心是什么：提出一个跨语言、少样本迁移学习框架。以在多语言上预训练的Wav2Vec2.0作为语音编码器骨干，通过逐层分析确定最佳迁移层（第19层），并在此层插入低秩自适应（LoRA） 模块进行参数高效微调。框架支持从单源高资源语言（英语）或多个源语言向低资源目标语言迁移。 与已有方法相比新在哪里：1) 首次建立跨语言AD语音检测基准，涵盖英语、普通话、西班牙语、希腊语；2) 创新性地结合了Wav2Vec2.0的层级分析与LoRA，针对AD检测任务优化跨语言适应效率；3) 系统评估了单源和多源两种迁移范式在现实低资源条件下的表现。 主要实验结果如何： 在单源迁移（EN → ZH/ES/EL）中，LoRA微调一致性地提升了目标语言的分类准确率（例如，希腊语测试准确率从68.75%提升至76.52%）。 单源迁移的总体效果优于多源迁移（例如，EN→ZH测试准确率77.96% vs. EN+ES+EL→ZH 64.17%）。 存在显著的过拟合现象（训练准确率远高于测试准确率）和目标语言间性能差异。 消融实验（表3）证明LoRA在单源和多源设置下均能带来性能提升。 实际意义是什么：该研究证明了利用大规模预训练语音模型和参数高效微调技术，有望打破语言壁垒，为全球不同语言背景的人群提供低成本、可扩展的AD早期语音筛查工具，具有重要的公共卫生应用前景。 主要局限性是什么：1) 数据集规模小（特别是希腊语仅46人）且异质性大，是制约模型性能（尤其是多源迁移）的主要因素；2) 缺乏与其他现有AD检测方法的直接对比；3) 模型在所有设置下均表现出训练-测试性能差距，泛化能力有待加强。 🏗️ 模型架构 模型采用模块化设计，由三个核心组件构成，整体架构如图1所示。 图1展示了模型架构（上）和两种跨语言迁移学习范式（下）。绿色部分为模型：预训练的Wav2Vec2.0编码器共享于所有语言，其上连接语言特定的LoRA适配器，最后是线性分类头。蓝色部分说明单源（一种语言→另一种语言）和多源（多种语言→一种语言）的迁移流程。 ...