大模型评估」共找到 9324 篇相关文章

算法论文8

只需一次指令微调,模型变身全能专家天团,8B模型性能反超全微调基线 | ACL25 Oral

预训练模型适应专业领域需高昂微调成本,稀疏混合专家架构虽能提升推理效率,但从头训练耗资源。浙与Thomson Reuters团队提出SIMoE,单阶段微调就能升级模型,还解决传统方法两局限,在性能和效率上双突破。

量子位
新闻资讯8

从 CIPS & CLM 迈进:中国模型的智能跃迁

中国中文信息学会2025学术年会暨第二届中国模型会(CIPS & CLM 2025)于10月28日在北京召开,众多专家学者参会。会聚焦模型多方面内容,发布“模型基金”,举办多场报告与论坛,展现中国AI领域进展。

AI科技评论
算法论文8

230个模型在婴幼儿认知题上集体翻车!揭秘多模态模型的核心知识缺陷

ICML 2025研究揭示多模态模型在基础认知能力上表现不佳。研究者建测评题库CoreCognition测试230个主流模型,发现其存在核心知识缺陷,扩规模难补短板,还需补齐核心知识。

量子位
算法论文8

伯克利联手“拷问”模型:最强Agent也才40分!新基准专治“不听话”的AI分析师

与伯克利团队推出IDA - Bench新基准,模拟真实数据分析场景,解决现有基准无法评估模型在动态交互中可靠性的问题。测试显示,顶尖模型成功率最高仅40%,不同模型还暴露多种问题。

量子位
推荐文章8

揭秘模型Steering:从底层机理到系统评估,全面破解模型行为控制之谜

近期《Science》研究表明可解析AI内部表征实现通用引导与监控。浙联合阿里两篇ACL 2026主会论文,揭示Steering工作原理与能力边界,还开源一站式框架EasyEdit2,全面展示了Steering价值。

机器之心
开源动态8

真实评估!北理发布全球首个「全场景教育」基准,支持4000+情境

北京理工学高扬老师团队推出EduBench,是全球首个「全场景教育」基准,涵盖9教育场景、12个评估维度、超4000个情境。团队将数据、模型等全面开源,评估发现模型在特殊教育场景有不足,还提出多源知识蒸馏等方法。

新智元
算法论文7

模型的第一性原理:(三)信息论篇

本文从信息论角度解读模型第一性原理。介绍Shannon信息论,提出将其从以BIT为中心转换为以TOKEN为中心解释模型底层原理,还阐述模型各阶段信息论原理、定向信息计算方法,对比Granger与Pearl因果。

机器之心
算法论文8

模型作为!微博的VibeThinker-1.5B超越DeepSeek R1等头部模型

近年来,“参数越,能力越强”成行业共识,但带来成本高和资源集中问题。微博AI团队开发的VibeThinker - 1.5B用1.5亿参数和低训练成本,在多项测试中超越头部模型,还提出SSP框架和MGPO算法。

深度学习自然语言处理
算法论文8

解放军总医院联合南、吉等机构,共同提出首个「脊柱诊疗模型」SpineGPT

解放军总医院联合多机构研发首个脊柱诊疗模型 SpineGPT。研究指出通用 LVLM 有‘认知鸿沟’,团队构建 SpineMed 生态系统,含 SpineMed - 450K 数据集与 SpineBench 评估基准,SpineGPT 表现超越开源模型

机器之心
新闻资讯7

全球开源模型,前十五名全是中国的

近日,随着新一代语言模型更新,开源模型成热门话题。Design Arena排行榜上,若设定为“开源”,前15名均为国产开源模型,排名第一的是DeepSeek - R1 - 0528 ,智谱、阿里等厂商多款模型上榜。

机器之心