算法论文7

Gemini视频OCR准确率仅73.7%

量子位2025-05-30

AI 摘要

MME-VideoOCR团队：对18个主流MLLM视频OCR能力测评，即便最好的Gemini-2.5 Pro准确率仅73.7%，多数开源模型不足60%，模型在时序与推理上短板明显。

关注公众号

扫码关注
第一时间收到每日精选

公众号专辑

SWE - Touch揭示Coding Agent共享协作能力缺口

当前基于大模型的Coding Agent是热门研究方向，现有评测多假设其独占代码仓库。中科院自动化所团队构建SWE - Touch框架，对9个前沿模型测试，发现用户干预下模型性能下降、排名洗牌。

新工作MLS - Bench覆盖12领域、140个研究任务，评测前沿模型科研能力。虽模型工程执行强，但科学发现能力弱，当前仍难提出有效算法创新。其评测已纳入Kimi K3和Qwen3.8 - Max官方发版表。

腾讯 WorkBuddy 团队将内部模型选型评测等开源成 Benchmark，公开多模型 Agent 工作台选型底牌。Bench 优点是任务分布真实且开源可审计，论文介绍了核心方法论、四大赛道拆解、榜单结果，还对比了现有工作。

Anthropic新模型Opus 5登场，多项评测中追平或反超Fable 5，价格仅为一半。网友实测表现出色，还具备硬核自检流程，性价比高。另外，Claude Code提示词删减八成，成绩未降。