神经音频编解码器失真下,谁还能代表人耳:PESQ 与 SCOREQ 的对照
该文用 11 段纯语音与 11 段语音加背景音的 MUSHRA 听测检验 20 余种客观指标,发现 SCOREQ 在纯语音上 Pearson ρ 为 0.937、PESQ 在混合音频上 ρ 为 0.903,而 PEAQ 与多数免参考指标在混合内容上失效,代价是现有指标均不刻画立体声空间失真且样本与听音人数有限。
下方只统计已核验方向的论文记录,按已核身份去重,身份待核时按页面保留。“直接”只含明确标注该方向的论文;“含子树”同时包含下级方向。点击名称进入论文库继续筛选;数量与上方按标签名称收录的页面数不同。
该文用 11 段纯语音与 11 段语音加背景音的 MUSHRA 听测检验 20 余种客观指标,发现 SCOREQ 在纯语音上 Pearson ρ 为 0.937、PESQ 在混合音频上 ρ 为 0.903,而 PEAQ 与多数免参考指标在混合内容上失效,代价是现有指标均不刻画立体声空间失真且样本与听音人数有限。
针对标准残差向量量化各阶段频率纠缠与并行子带解码丢失谐波上下文的问题,HARP 只改训练损失、把 9 个阶段按低到高分成 4 组并做累积解码与软子带监督,在语音音乐通用音频上同时报告了客观与 MUSHRA 增益,代价是训练期约 2-3 倍解码器前向开销。
针对多麦克风通信中只想在接收端合成可配置指向虚拟麦克风的问题,论文提出联合空间编码与滤波的神经方向性编码,用 0.25 kbps 空间边信息加单通道参考在四麦 16 kHz 上达到与 7.5 kbps 级联基线相当或更好的 SDR 与 PESQ,代价是依赖单通道编解码质量与无混响训练条件。
针对冻结神经音频编解码器丢失词义性基频的问题,论文提出旁路音高注入残差适配器 PIRA,用 1.25M 至 1.65M 可训练参数和每帧 5 比特边信息把平均编解码器引入声调错误率降低 35.7%,同时保持英语质量不变且可完整移除。
论文提出稳定性-码率-失真三维视角并用连续编辑距离度量几何漂移,在 26 种方言上显示连续隐变量尚稳定而量化后离散序列 катастрофически 破碎,且低资源语言要额外缴纳语言税。
该文研究 16/24 比特全保真音频能否用自回归语言模型加算术编码做无损压缩,提出把每个样本拆成字节的 Trilobyte 使词表恒为 256,最强证据是 8 比特大幅超过 FLAC 而 16 比特平均只超 18%、24 比特落后 9%,代价是序列变长且推理远慢于 FLAC。
针对冻结且结构失配的编码器与解码器无法直接互通的问题,BridgeCodec 用薛定谔桥学习源潜变量到目标潜变量的最优传输并以 Mamba 增强 U-Net 建模长时依赖,在 8 kHz、1 kbps 输入到 48 kHz 重建的极端条件下把 STOI 从 0.23 提升到 0.88、SIM 提升到 0.96,代价是高频生成内容使 WER 略升至 2.11 …
针对声学传送编码器的语音与声学分区,该工作用冻结编码器加轻量探针分别回归房间参数与分类说话人,以分区间的性能差距度量解耦,发现说话人基本被锁在语音分区而房间信息仍泄漏进语音分区,且声学嵌入的盲估 T60 与全监督基线差距仅 0.02 s 量级。
针对语音音乐通用音频在低帧率下难以同时保真与保留语义的问题,OmniCodec 用预训练理解模型的音频编码器做语义分支输入并与声学分支解耦重组,配合自引导损失提升码本利用率,在同码率下重建指标领先 Mimi 但语音语义困惑度仍有代价。
该工作用分层向量量化变分自编码器把 Greenwood 频谱映射为每个时频格的 Gamma 分布参数并随机采样出平均发放率神经图,在低中频与静默段复现了原电刺激听神经模型的分布与结构,但高频与跨通道精细时间相关仍有明显误差,而计算时间从近 70 秒降到毫秒级。
针对固定帧率自编码器对不同信息密度分配相同时间预算的问题,该文用轻量潜在预测器度量可预测即冗余并做分段保留与回滚重建,在部署时按保留比例调节平均帧率,代价是边界决策离散且重度压缩下仍需权衡重建质量。
论文在统一骨干与训练配方下比较 4 种隐宽度与 4 种帧率共 16 个连续编码器,报告重建在 1024 维 25 赫兹处最好而下游识别与问答在 12.5 赫兹中等宽度处最好,且冻结模型的半数主成分干预显示重建容忍与识别失效可以分离,但窄瓶颈训练不等价于事后降维。
论文把音乐语义定义为可测的检索任务能力,用冻结语义单码本加声学残差量化双流在混合信号上重建,报告显示完整配置在内容保持与重建上占优而纯声学配置虽重建略高却显著更难建模。
针对多码本残差量化各层共享切分会留下不可消除的压缩误差问题,LACE 在每层独立压缩并用并集对齐与边界锚点解决时长不一致,重建与 TTS 实验显示其在相近码率下改善质量但对齐会抬高有效帧率。
针对无线音频需在有损与无损之间无断点切换的问题,OLAC 只做可逆时域混叠抵消加窗而不做整数 MDCT 变换,用前向线性预测与 Golomb-Rice 编码实现无损压缩,在 20 毫秒帧下平均压缩到 56.8%,代价是帧间预测被切断且随机访问需先解前一帧。
针对高阶全通变换 DCT 分析合成滤波器组相位与混叠失真难以同时补偿的问题,论文用凸最小二乘直接求解 FIR 合成子滤波器系数,以完全重建设计实现全局最优,并以混叠受限的近完全重建设计换取更好的合成滤波器频率选择性。
共收录 127 篇 eusipco-2026 会议论文的 Reader 深度解读
该文用带噪潜变量微调一致性音频自编码器加感知损失来学习由粗到细的感知层次,并用自回归整流流估计音高惊奇度,在重建保真、与 IDyOM 相关性和 EEG 预测上报告了提升,但干净重建略有损失且高噪声机制仍待验证。
针对固定通道神经音频编解码器换通道数就要换结构的问题,VCNAC 用分流卷积加统一量化瓶颈实现单套参数原生支持 1 通道、2 通道和 6 通道,在 7.9 kbit/s 量级取得与更高码率基线可比的主客观重建质量,代价是依赖合成环绕声训练且中置与后置通道客观指标仍偏低。
共收录 199 篇 acl-2026 会议论文的 Reader 深度解读