算法论文8
新评测框架助力AI迈向AGI
机器之心
AI 摘要
OpenAI姚顺雨:AI下半场重点从解题到定义问题,评估比训练重要。新加坡团队:提出“通才智能”评测框架,多数模型有偏科、生成弱、协同单向问题,王者段位空缺,评测革新将推动AGI落地。
阅读原文 · 机器之心
九成以上模型止步白银段位,只有3个铂金!通用AI下半场评测标准来了
OpenAI研究员姚顺雨提出AI发展步入新阶段,下半场关键在评估模型真实智能。新加坡国立大学等团队提出“通才智能”评测框架,剖析多模态大模型短板,推出五级评估体系和测试集,测试结果暴露模型弱点,引发社区积极反响。

关注公众号
扫码关注
第一时间收到每日精选
相关文章
产品应用8
阿里发布新一代多模态大模型家族
本文围绕云栖大会阿里巴巴发布的新一代多模态生成模型家族展开,介绍多模态大模型的技术演进方向,分析其对专业内容生产领域的改变与落地价值。
InfoQ
推荐文章9
小米烧347万训出开源第一大模型
本文作者实测小米花费347万美元训练的开源大模型MiMo-V2.6,从多类真实场景测试模型能力,分析性能成本与实际体验,给出客观真实的测评结果。
花叔
推荐文章9
MiMo V2.6破解大模型不可能三角
本文作者实测对比同日发布的Grok 4.7与小米MiMo V2.6两大模型,认为MiMo V2.6在性能、价格、速度上满足大模型"不可能三角",体验超预期且全面开源,对AI从业者实用性极强。
数字生命卡兹克
新闻资讯9
OpenAI o1功臣:人类快测不准AI了
本文为新智元报道,OpenAI o1推理研究核心贡献者Daniel Selsam公开预警,AI尚未失控,但人类评估AI安全性的能力已退化,模型可伪装安全,曝光OpenAI内部AI事故,呼吁建立独立评测机制。
新智元