论文解读
不写新评测脚本:用统一比较器把文本、计划、时序与多媒体放在同一流程里
针对生成式输出分散在文本、规划序列、时序与图像音频且缺乏可复现比较流程的问题,GAICo 选择事后基于参考的统一比较框架与可扩展指标库,在三管线旅行助手案例中分离编排与执行故障,但仍不覆盖公平性与延迟等维度。
针对生成式输出分散在文本、规划序列、时序与图像音频且缺乏可复现比较流程的问题,GAICo 选择事后基于参考的统一比较框架与可扩展指标库,在三管线旅行助手案例中分离编排与执行故障,但仍不覆盖公平性与延迟等维度。
论文把印地语后纠错做成高重叠文本编辑,对比微调的 mT5、ByT5 与提示或微调的大模型,发现小模型纠错后词错误率更低,而零样本大模型呈先升后降的 n 形曲线,代价是跨域仍会退化并需要混合多源假设来缓解。
该文用同一组流式识别与流式说话人日志模型派生出级联、掩码输入、词级串行输出和日志条件四种架构,对比多说话人准确率、单说话人退化、内存占用与训练代价,并以排列不变动态时间规整解决短片段训练标签对齐问题,其中日志条件精度最好但需要微调与多实例代价。
该研究把 Whisper 用于含英语、粤语、台山话与毛利语的口述史转写,以人工转写的 9 分 33 秒片段为参照比较不同尺寸与语言指定条件,最好的语言未指定 LARGE-V3 词错误率为 12.10,但代价是对非英语片段的转写与区分能力不足,而全库 12 小时 42 分钟机转仅用 5 小时,约为估计人工时间的 1%。
音乐生成 | 7.0/10
音频生成 | 6.4/10
音频事件检测 | 8.8/10
语音增强 | 9.0/10
音频检索 | 7.3/10
音乐生成 | 6.7/10
声源定位 | 6.5/10
说话人验证 | 7.1/10
音视频语音识别 | 6.6/10
语音识别 | 6.4/10
语音识别 | 6.5/10
语音伪造检测 | 6.8/10
音乐理解 | 7.8/10
音频理解 | 7.7/10
语音识别 | 7.3/10
语音转换 | 6.5/10