大模型评测」共找到 9216 篇相关文章

8

李曼玲、李飞飞、吴佳俊等联手:评估具身模型的新范式!

全新的具身模型空间能力评估范式Theory of Space突破传统局限,考察模型在动态环境构建、修正和利用空间信念的能力。该论文被ICLR 2026接收,研究对前沿多模态大模型评测,揭示其空间认知能力边界。

新智元
算法论文8

清华孙茂松团队 × 深言科技:以解释作为训练信号,让 8B 模型在幻觉检测上反超闭源模型

语言模型幻觉问题待解,成本与算力需求攀升。清华孙茂松团队联合深言科技提出FaithLens模型,把幻觉检测提升为整体评估,以解释作为训练信号,8B模型在多任务上超闭源模型

AI科技评论
算法论文8

230个模型在婴幼儿认知题上集体翻车!揭秘多模态模型的核心知识缺陷

ICML 2025研究揭示多模态模型在基础认知能力上表现不佳。研究者建测评题库CoreCognition测试230个主流模型,发现其存在核心知识缺陷,扩规模难补短板,还需补齐核心知识。

量子位
新闻资讯7

推理能力比拼,《推理模型综合测评报告 2025 》正式发布

过去半年,推理能力成模型新分水岭。InfoQ研究中心评测八款热门模型,围绕五维度,用超90%原创试题。发现各模型在不同维度表现有差异,推理模型发展正从‘一个脑’变为‘带工具的多能智能体’。

InfoQ
算法论文7

模型的第一性原理:(三)信息论篇

本文从信息论角度解读模型第一性原理。介绍Shannon信息论,提出将其从以BIT为中心转换为以TOKEN为中心解释模型底层原理,还阐述模型各阶段信息论原理、定向信息计算方法,对比Granger与Pearl因果。

机器之心
开源动态8

WAIC抢先爆料:金融“黑马”模型超DeepSeek刷新SOTA,论文已上线

WAIC期间,蚂蚁数科金融推理模型发布会未开,论文已上线。其新模型Agentar - Fin - R1有8B和32B版,在金融测评集超DeepSeek等,还兼顾专业与通用,蚂蚁数科还提出评测基准Finova。

量子位
开源动态8

空间智能终极挑战MMSI-Video-Bench来了,顶级模型全军覆没

上海人工智能实验室 InternRobotics 团队推出空间智能视频基准 MMSI-Video-Bench,对主流多模态模型进行评测。该基准题型全面、问题具挑战性,视频数据多样,能针对性测评。结果显示模型与人类差距显著,明确了能力瓶颈。

机器之心
算法论文8

模型作为!微博的VibeThinker-1.5B超越DeepSeek R1等头部模型

近年来,“参数越,能力越强”成行业共识,但带来成本高和资源集中问题。微博AI团队开发的VibeThinker - 1.5B用1.5亿参数和低训练成本,在多项测试中超越头部模型,还提出SSP框架和MGPO算法。

深度学习自然语言处理
开源动态8

开源医疗模型SOTA:蚂蚁健康发布百亿参数医疗模型

由浙江省卫生健康信息中心、蚂蚁健康等联合开发的AntAngelMed医疗模型正式开源。它凭借独创训练与架构,在权威评测中表现优异,降低算力门槛,将专业知识、诊疗能力与计算架构融合,为医疗AI落地奠基。

AIGC开放社区
算法论文8

团队直击模型高分神话:人类90分,最强模型仅49分

南京学傅朝友团队在Google Gemini评测团队邀约下推出视频理解新基准Video - MME - v2。它有创新的分层能力体系与组级非线性评分,经超3300人工时标注。评测显示模型与人类差距,还揭示传统Acc指标虚高、‘Thinking’并非总增益等现象。

新智元