多选题评测」共找到 4526 篇相关文章

开源动态8

AI点外卖哪家强,美团LongCat团队做了个全面评测

美团LongCat团队发布贴近生活场景的大模型智能体评测基准VitaBench,以三大高频生活场景为载体,构建含66个工具的评测环境。评测显示现有智能体与应用需求差距大,该基准已全面开源。

量子位
开源动态8

近5w颗星!一个能同时指挥个AI写代码的开源工具来了

现在写代码,很人想开个AI助手。Orca是支持AI Agent的编程开发环境,各Agent在独立git worktree里运行,互不干扰。它功能丰富,还支持系统安装。

GitHubStore
推荐文章8

企业级 Agent 智能体架构与选型指南 -- 来自1000+行业应用实践积累

本文基于超1000+智能体应用实践经验,介绍企业级Agent智能体架构。强调单智能体优先,介绍AgentScope支持的智能体模式,对比工作流与对话模式,给出架构选型指南,还提及Spring AI Alibaba Graph为智能体提供的能力。

阿里云开发者
开源动态7

开启Benchmark的Harness时代:15家学术机构联合发布HarnessEval

8月13日,DeepSeek开源Agent Harness dsh引发行业对“Harness”的关注。近日,MirroS联合机构发布HarnessEval,将其概念引入评测系统。它使评测从Metric到Harness,形成可执行评测系统,已落地于交互式世界模型。

机器之心
算法论文8

Auto-Research「终极大考」:新基准撕下大模型科研伪装

来自所高校的研究者提出MLS - Bench,用于解决现有Auto - Research评测的归因问题。它含140个真实研究任务,校准受控修改范围,主实验显示当前模型在方法发现上有明显缺口,Auto - Research需更严格评测标准。

机器之心
新闻资讯7

CVPR2025 | 模态LLM评测Tutorial

模态大语言模型(MLLMs)研究热门,有效评估成关注焦点。CVPR2025将举办模态LLM评测Tutorial,梳理评估基准,探讨评估方法,聚焦‘幻觉现象’,团队经验丰富,覆盖板块内容。

深度学习自然语言处理
新闻资讯7

RoboChallenge发布年度报告:评测标尺够权威吗?

当下具身智能行业存在缺乏真实场景验证、评测标准模糊等问题。2025年原力灵机与Hugging Face推出RoboChallenge评测平台,2026年1月更新榜单。AI科技评论从技术和核心设计角度对其进行深度拆解。

AI科技评论
产品应用8

基于阿里云 AgentLoop 的 DeepSeek Harness 评测实践

本文分享基于阿里云 AgentLoop 平台的 DeepSeek Harness 评测实践。介绍了 DeepSeek Harness 工程架构,阐述 AgentLoop 平台接入方式及价值,还详述评估器设计思路、展示评测结果,最后总结方法论并展望后续工作。

阿里云开发者
产品应用8

AI 代码审查再进化:AutoDev 智能体协作架构深度解析

现代软件开发中,代码审查存在信息割裂、人工效率低等痛点。AutoDev 借助智能体协作与信息聚合,实现从分析到修复的闭环智能流程,还构建 Agent 协作体系,未来将集成更能力。

phodal
算法论文8

都在卷「让大模型循环几遍」,这个7B模型LoopCoder v2说:循环 1 次就够了

当下推理模型流行在测试时循环,以打磨答案。但新研究发现,7B模型LoopCoder v2只循环1次(共2次),就能大幅提升性能,继续增加循环次数,性能反而下降。研究还分析了收益与成本,给出选择循环次数的诊断方法。

机器之心