包幻觉攻击」共找到 509 篇相关文章

新闻资讯8

账号与身份防线全面失守:黑灰产 Agent 化攻击下,如何用“第一性原理”重建防线?

11月13日Anthropic报告显示,黑客利用AI Agent化能力发起复杂攻击,网络安全面临转折点。数美科技CTO梁堃指出黑灰产完成‘智能化’改造,传统防线失效,并提出防御方法。

InfoQ
算法论文8

看似无害的提问,也能偷走RAG系统的记忆——IKEA:隐蔽高效的数据提取攻击新范式

研究聚焦RAG系统,提出全新黑盒攻击方法IKEA。它不依赖异常指令,通过自然查询提取私有信息。经多数据集测试,其效率和成功率高,还证实提取知识实用,揭示RAG系统潜在脆弱性。

机器之心
新闻资讯7

Docker Desktop 4.42 发布,带来原生 IPv6、集成的 MCP 工具以及 AI 模型打功能

Docker 公司发布 Docker Desktop 4.42 版本,增强网络灵活性、AI 工作流集成和模型分发功能,如新支持原生 IPv6、集成 MCP 工具等。但 macOS 用户反馈稳定性下降,有启动、网络等问题。

InfoQ
新闻资讯7

OpenAI总裁出钱办了个“新闻网站”:AI扮记者做采访,专门攻击AI监管派

2026年4月调查显示,Acutus“独立新闻网站”97%文章含AI内容,攻击对象为AI监管派,资金源于OpenAI总裁。其用AI生成稿件,审稿草率,还与政治公关公司客户名单重合,是OpenAI舆论运作一环。

DeepTech深科技
新闻资讯8

账号与身份防线全面失守:黑灰产 Agent 化攻击下,如何用“第一性原理”重建防线?

11月13日,Anthropic报告称黑客利用AI Agent化能力达新高度,攻击模式转变使传统风控防线失效。数美科技CTO梁堃指出防御要下沉至‘第一性原理’,详解‘反欺诈三定律’,还提出‘不确定性标签’等方案。

AI前线
开源动态8

刚开源就斩获 3.8K Star!MiniMax 官方把压箱底的硬核技能开源了!

MiniMax 官方开源 Skills 仓库,这是一套为 AI 编码助手设计的开发技能。涵盖前端、全栈、Android、iOS、图形开发及办公等多领域,按流程走可让 AI 代码质量对标大厂资深工程师,安装也简单。

开源星探
算法论文8

12毫秒暴露自动驾驶致命缺陷,北航新研究实现场景感知的动态物理对抗攻击|TPAMI2025

近日部分L3级自动驾驶车型获批上路,但自动驾驶感知系统存在缺陷。北航等机构提出DynamicPAE框架,实现场景感知的动态物理对抗攻击,解决多维度挑战,在多场景表现优异,被TPAMI2025录用。

量子位
开源动态7

Claude 小升级就赢了OpenAI 9年“开源神作”?高强度推理直接歇菜、幻觉率高达50%,写作还被Kimi 2吊锤?

OpenAI发布首个开源语言模型系列gpt - oss,括gpt - oss - 120b和gpt - oss - 20b,可在Hugging Face下载。同期谷歌、Anthropic也有新模型推出。gpt - oss有亮点,但也存在幻觉率高、实测效果差等问题。

InfoQ
新闻资讯7

Claude 小升级就赢了OpenAI 9年“开源神作”?高强度推理直接歇菜、幻觉率高达50%,写作还被Kimi 2吊锤?

OpenAI发布首个开源语言模型系列gpt - oss,括gpt - oss - 120b和gpt - oss - 20b,可在Hugging Face下载。同期谷歌Deepmind推Genie 3,Anthropic放出Claude Opus 4.1。Claude Opus 4.1编程性能提升,实测编码能力强于gpt - oss。gpt - oss虽有亮点,但幻觉率高、实测效果不佳。

AI前线
新闻资讯7

GPT-5 之后,我们离 AGI 更近了,还是更远了?

2025年8月8日OpenAI发布GPT-5,架构有革新,在基准测试成绩优异,但跑分现场PPT出错、被Grok 4击败。它在编程表现出色、价格有竞争力,写作能力有争议,模型幻觉和提示注入攻击问题待解。

AI科技大本营