大模型测试」共找到 9649 篇相关文章

新闻资讯7

807道灵魂拷问后,中国模型竟在「意义测试」中夺冠!

在美国新基准测试FAI - C中,中国开源模型Qwen3夺冠,DeepSeek的R1跻身前六,力压美国明星实验室顶级模型。该测试由前英特尔CEO帕特·基辛格所在公司Gloo推出,旨在让AI直面深层问题。

新智元
开源动态7

国内首套:港中文团队发布7模态人体动作数据集,揭开模型理解能力短板

港中文邢国良教授团队博士生蒋思阳完成 CUHK-X 多模态人体动作数据集,成果被 ACM MobiSys 2026 接收。用其测试主流模型,发现理解人类动作平均正确率仅四成。该数据集数据收集方法反常规,还开展了基准测试

DeepTech深科技
算法论文8

75页哈工多模态推理模型最新综述:感知、推理、思考与规划

哈工提出75页多模态推理模型综述,围绕四阶段发展路线图展开,即感知驱动的模块化推理、以语言为中心的短推理、以语言为中心的长推理、迈向原生多模态推理模型,还给出挑战性基准测试和实验案例见解。

PaperAgent
算法论文7

SOTA模型遇上加密数据评测:Qwen3未破10%,o1也栽了丨上海AI Lab等联合研究

当前推理模型在基准测试中性能卓越,但在密码学领域推理能力待探索。上海AI Lab等推出CipherBank评测,用海量真实隐私场景数据和多类型密码算法挑战SOTA模型,结果显示模型表现不佳,还分析了模型“犯难”原因。

量子位
算法论文8

ACL 2025 | 指令遵循不能仅靠常识?GuideBench 揭示模型如何“踩雷”领域指南规则

这篇ACL 2025主会论文聚焦提升智能体指南规则遵循能力。提出评估基准GuideBench,涵盖7类1272个任务。实验显示多数主流模型指令遵循能力不佳,尤其数学推理挑战,为模型迭代提供评估基准。

深度学习自然语言处理
开源动态8

企业级OpenClaw最强拍档来了!万亿参数的国产多模态模型,刚刚开源发布

YuanLab.ai团队开源源Yuan3.0 Ultra多模态基础模型,是万亿级开源多模态模型之一。它优化训练效率,在多任务表现突出,为企业Agent AI提供支撑,还提出新算法和训练策略,全面开源推动落地。

量子位
产品应用8

昨天夸国产模型争气,今天Vidu Q3就霸榜了

国产视频模型Vidu Q3在国际权威AI基准测试机构Artificial Analysis的最新榜单里,于Video Arena冲到全球第二、国产第一。它是全球首个支持16秒音视频直出模型,声画同出、高清直出,还有镜头控制、多语言文字渲染等优势。

MacTalk
开源动态8

击败 GPT-5!理想汽车开源 RubricHub:模型开放生成从此有了专业裁判

理想汽车基座模型团队联合高校发布RubricHub数据集,解决开放式任务评价难题。该数据集可将主观评价转化为量化标准,经其训练的Qwen3 - 14B小模型在医疗基准测试中超越GPT - 5。

AI科技评论
新闻资讯8

从MiniMax到DeepSeek:为何头部模型都在押注「交错思维」?

昨日推特博主公布国内几开源模型在 mini - SWE - agent 测试成绩,MiniMax 新一代模型 M2 表现最佳。其采用的「交错思维」技术成亮点,解决了状态漂移问题,正成高性能 Agent 模型标配。M2 既强又省,还给出使用最佳实践。

机器之心
产品应用8

Kubernetes环境中作业帮模型服务流量调度优化实践

随着语言模型应用渐广,Kubernetes 现有 Ingress 组件在模型服务流量管理上有局限。作业帮提出创新调度方案,整合成模型网关,具备五项核心功能,提升了资源效率、稳定性和易用性。

InfoQ