开源动态8
MiniMax:Coding Agent 评测需关注过程规范
Founder Park
AI 摘要
用户对 Agent 不满多因它不遵循指令和规范,现有评测重结果,与实际使用错位。MiniMax 开源 OctoCodingBench 评测,发现模型过程合规差,未来训练应引入过程监督。
阅读原文 · Founder Park
我们对 Coding Agent 的评测,可能搞错了方向
用户对 Agent 不满常因它「做得不好」,不遵循指令和规范。当前主流评测体系以结果为导向,与真实场景错位。MiniMax 开源 OctoCodingBench 评测集,结果显示模型过程规范遵循不足,未来训练需引入过程监督。

关注公众号
扫码关注
第一时间收到每日精选
相关文章
新闻资讯8
传英伟达拟收购Reflection AI
本文是InfoQ编译的科技播客访谈,Reflection AI由前Google DeepMind Gemini团队成员创立,近期发布了5010亿参数的开放大模型Beam,主打编程、推理和智能体任务,发布一周后传出英伟达拟收购该公司的消息,访谈中分享了对开放模型诸多问题的观点。
InfoQ
算法论文8
多校提出可交互视频世界模型Oneira
本文介绍牛津、莫纳什、布里斯托等多校团队提出的交互式视频世界模型Oneira,解决现有模型交互错配、状态易丢失的缺陷,实验效果优于现有主流基线模型。
机器之心
开源动态9
仅靠一个bash,Pi赢了Claude Code
本文基于Armin Ronacher的播客内容整理,拆解欧洲团队开发的极简Coding Agent Pi爆火的原因,分享Pi的设计哲学,以及对AI编码、开源、Agent发展的核心判断。
InfoQ
产品应用9
实测阶跃Step 5 Preview工程能力
本文作者池建强参与阶跃星辰新一代旗舰大模型Step 5 Preview小范围内测,设置带两层bug和隐藏需求的编码工程题,与Qwen 3.8 Max、Kimi K3对比测试,分享实际项目使用体验,给出客观评测。
MacTalk