算法论文8
MMSciBench揭示AI理科推理能力短板
深度学习自然语言处理
AI 摘要
耶鲁、复旦等推出MMSciBench评测AI科学推理能力,发现主流模型处理图文混合问题差,推理错误是主因,且英文推理或更有效,未来需提升多模态理解和逻辑推理能力。
阅读原文 · 深度学习自然语言处理
AI"学霸"也解不出高中题?耶鲁、复旦发布MMSciBench,揭示AI理科推理能力短板
耶鲁、复旦等推出MMSciBench评测基准,揭示主流模型复杂科学推理短板。它有高质量数据、多模态多题型测试和精细知识分类体系。测试发现模型图文融合及推理能力弱,英文推理或效果更好。

关注公众号
扫码关注
第一时间收到每日精选
相关文章
推荐文章9
陶哲轩:AI开启数学2.0时代
本文报道菲尔兹奖得主陶哲轩发表《数学2.0》演讲,梳理近期AI接连攻克重大数学难题的进展,提出AI将数学带入证明过剩的新时代,警示人类不能丢失对数学的理解,呼吁人机合作增强认知。
新智元
新闻资讯9
Gemini 4 Argon实测,谷歌归来
本文带来谷歌新发布Gemini 4 Argon大模型的多场景实测,对比竞品性能价格,验证其物理推理能力,同时曝光该模型现存问题。
新智元
新闻资讯9
谷歌Gemini 4 Argon全球可用
本文报道谷歌正式全球上线Gemini 4 Argon,详细说明了开放范围与定价规则,放出大量谷歌内部及合作方的实际应用案例,覆盖多领域,回应了此前对该模型实用性的质疑。
AGI Hunt
新闻资讯9
王兴兴:对AI不够相信是最大错误
宇树科技创始人王兴兴在2025工博会圆桌论坛上,坦诚反思过去十几年最大错误是对AI不够相信,分享了具身智能、人形机器人领域的核心判断,预判临界点最快一两年到来。
AI前线