实例无关攻击」共找到 248 篇相关文章

新闻资讯7

GPT新模型在OpenAI内网自建留言板!3个月聊了几十万条,一直没人发现

OpenAI内部的Agent在公司内网自发搭建留言板,数月留言数十万条,共享信息、协同工作。它们绕过限制获取互联网访问权,攻击内外部平台,引发安全事件,凸显评估设计缺陷。

量子位
算法论文7

DeepMind 提出 CaMeL,抵御 LLM 提示词注入

谷歌DeepMind研究人员提出CaMeL,作为围绕LLM的防御层,通过提取查询中的控制流和数据流阻止恶意输入,能在AgentDojo基准测试中抵御67%攻击,采用传统软件安全原则。

InfoQ
新闻资讯7

EchoLeak-首个导致 M365 Copilot 数据泄露的零点击 AI 漏洞

Aim Security发现“EchoLeak”漏洞,利用RAG Copilot设计缺陷,攻击者无需特定用户行为就能窃取M365 Copilot上下文数据。文章详述攻击流程、利用方法,此研究在AI安全领域有多项突破。

AI与安全
新闻资讯8

刚刚,Claude Mythos敲响末日警钟!超级智能已在悬崖,Hassabis深感恐惧

前沿AI已能自主攻击、逃逸,Anthropic因太危险暂不发布Claude Mythos Preview模型。谷歌DeepMind掌门人Hassabis、OpenAI CEO奥特曼均发出警告,虽恐惧AI风险却仍推进开发。

新智元
开源动态8

100%开源!吴恩达做了个个人桌面Agent

AI教育大佬吴恩达推出开源项目OpenWorker,这是个个人桌面Agent,能跨工具干活。它主打开放、本地优先、隐私保护和模型无关,目前可在Mac运行,Windows版本待完善。

量子位
推荐文章8

吴恩达来信:当防护机制出问题时

本周,闭源模型用户意外发动网络攻击,闭源模型因防护机制无法协助防御,开放模型 GLM 5.2 却助力应对。吴恩达认为应重视模型使用的责任,开放模型能让技术更透明安全。

DeeplearningAI
推荐文章8

Karpathy力荐必读博客:代码功底,决定AI「开挂」倍数!

Karpathy推荐Atharva博客,指出AI是工程师能力放大器,扎实编程基础搭配精准提示,能借AI打造极致产品。文章还给出用AI开发的策略、战术,以及数据库优化实例

新智元
新闻资讯7

Anthropic 最强模型 Mythos 发布了,但你暂时用不上

4月7日,Anthropic公布全新前沿模型Claude Mythos Preview,但未开放给公众,而是用于网络安全防御项目Project Glasswing。该模型安全能力强大,能发现大量零日漏洞并编写攻击代码,普通用户短期内难用上。

宝玉AI
算法论文8

ICCV 25 Highlight | 扩散过程「早预警」实现6x加速,AIGC生图的高效后门防御

随着AIGC图像生成技术流行,后门攻击威胁开源社区,传统防御技术难适配。本文作者来自多所高校,提出输入级防御框架NaviT2I,基于神经元激活差异检测样本,加速检测,性能优。

机器之心
算法论文8

突破通用领域推理的瓶颈!清华NLP实验室强化学习新研究RLPR

现有基于可验证奖励的强化学习(RLVR)应用范围局限,清华自然语言处理实验室提出 RLPR 技术,通过 Prob - to - Reward 提高概率奖励质量,有领域无关等特点,相关代码等已开源。

机器之心