CaReCoS: A Spectrogram based Visual Benchmark for Cardiac, Respiratory and Cough Sounds
📄 CaReCoS: A Spectrogram based Visual Benchmark for Cardiac, Respiratory and Cough Sounds #音频理解 #基准测试 #医疗音频 #多模态模型 #模型评估 6/10 | 创新 1.2/2 | 严谨 0.8/1.5 | 实验 1/1.5 | 清晰 0.8/1 | 影响 0.5/1.5 | 开源 0.2/1.5 | 复现 0.3/0.5 | 工程 1.2/1.5 ✅ 6/10 | 前50% | #音频理解 | #提示学习 | #基准测试 #医疗音频 | arxiv 👥 作者与机构 第一作者:Harshit Rajgarhia(未说明) 通讯作者:未说明 作者列表:Harshit Rajgarhia(未说明)、Shuubham Ojha(未说明)、Akhil Pothanapalli(未说明)、Rachuri Lokesh(未说明)、Asif Shaik(未说明)、Abhishek Mukherji(未说明)、Prasanna Desikan(未说明) 💡 毒舌点评 论文首次将医学心肺咳嗽声的频谱图作为视觉输入进行多模态推理评测,明确揭示当前顶尖视觉与全能模型在该任务上近乎“全军覆没”(最高仅51.2%),视角新颖且问题尖锐。但整个基准的真相由Gemini 3 Flash自动生成且未经任何临床专家验证,评判同样依赖大模型,这构成了“用大模型评测大模型”的循环依赖,可靠性令人高度不安;同时代码与QA数据集均未开源,社区几乎无法复现或在此基础上推进,本质上是一篇用闭源模型揭示闭源模型缺陷的“空中楼阁”式研究。 ...