技能评估」共找到 1020 篇相关文章

产品应用8

这篇超有用!手把手教你搭建 AI 产品 Evals

文章指出AI下半场模型评估比训练更重要,做好Evals是当下AI产品开发刚需。介绍了Evals重要性、三种方法、通用评估标准等,还教你从零构建Evals及设计注意事项,助你快速上手评估

Founder Park
推荐文章7

大模型评估排障指南 | 关于 LaTeX 公式解析

这是大模型评估排障指南系列第二篇,聚焦 LaTeX 公式解析。评估难点是解析和比较模型输出与标准答案,无标准方法。lm - evaluation 框架用 sympy 解析准确率约 0.94,还给出缓解问题办法。

Hugging Face
开源动态7

FACTS 基准测试套件问世,用于评估大型语言模型的事实准确性

FACTS 基准测试套件由 FACTS 团队与 Kaggle 联合开发,基于原 FACTS Grounding Benchmark 增加三个新基准,可从四个维度评估大模型事实性。初步结果显示进展与挑战并存,多模态成难题。

InfoQ
算法论文8

InfoDeepSeek:首个开放网络环境下的智能体信息搜寻质量评估基准

上海交通大学与华为诺亚方舟实验室联合推出InfoDeepSeek,它是首个评估真实动态网络环境下智能体信息搜寻质量的基准。该基准有挑战性问题、真实动态环境等亮点,还开展实验揭示智能体行为特性。

AI科技评论
产品应用8

pdf2skill:让计算机视觉初学者把PDF文档变成AI技能

pdf2skill技术是“文档转技能编译器”,能将PDF知识转化为AI可调用技能包。它解决了计算机视觉研究和工程中的痛点,介绍了原理、实战案例、代码实现,还对比性能、给出使用指南。

机器学习AI算法工程
新闻资讯7

全国首部AI智能体应用评估标准,现公开征集起草单位和个人!

2025年是AI智能体元年,市场规模将达113亿美元,但企业部署面临‘效能黑箱’,缺乏评估规范。智合标准中心发起《企业级AI智能体应用效能评估规范》团体标准起草,现征集起草单位和个人。

AI工程化
开源动态7

别错过,Clawdbot(Moltbot、OpenClaw)爆火之后,我找到啦 700+ 的技能包~~~

awesome-openclaw-skills是VoltAgent在GitHub维护的「OpenClaw Skills精选清单」,收录700+社区构建的OpenClaw技能,按场景分类,方便安装使用。还介绍了安装方法和技能分类。

小华同学ai
新闻资讯8

OpenAI 发布GDPval,可真实评估现实世界经济价值。Claude Opus 4.1 拿下第一

OpenAI推出GDPval,可评估AI在真实经济价值任务上的表现。它从9个行业选44种职业,设1320个真实任务。Claude Opus 4.1表现最佳,前沿模型速度快、成本低。OpenAI计划扩展GDPval,还开源部分内容。

AGI Hunt
新闻资讯7

全国首部AI智能体应用评估标准,现公开征集起草单位和个人!

2025年成AI智能体元年,市场规模将达113亿美元,但企业部署面临‘效能黑箱’。智合标准中心发起《企业级AI智能体应用效能评估规范》团体标准起草,填补评估空白,现公开征集起草单位和个人。

PaperAgent
新闻资讯7

全国首部AI智能体应用评估标准,现公开征集起草单位和个人!

2025年成AI智能体元年,市场规模将达113亿美元。但企业部署时面临‘效能黑箱’,缺乏评估规范。智合标准中心发起《企业级AI智能体应用效能评估规范》团体标准起草,现征集起草单位和个人。

AI工程化