「对抗攻击」共找到 214 篇相关文章
突发!OpenAI新模型Astra吓瘫奥特曼:暂停训练两周,GPT-6训练一并冻结
OpenAI宣布暂停内部最强大模型强化学习,Astra模型暂停训练两周,GPT - 6也暂停。原因包括Hugging Face安全纰漏和Astra网络攻击能力越线。还采取物理隔离、严格监控、打击作弊等措施,或有营销意图。
入侵30家大型机构、Claude自动完成90%?Anthropic 被质疑,Yann LeCun:他们利用可疑的研究来恐吓所有人
Anthropic 称发现‘首个由 AI 协同操作的网络攻击行动’,Claude Code 自动化完成达 90%工作。但外部研究人员谨慎看待,Yann LeCun 质疑其用可疑研究恐吓众人,专业人员也指出报告未达专业标准。
智能体的致命三要素及六种安全设计模式
智能体发展带来诸多安全问题,仅靠外部防护不合理。Simon Willison总结其致命三要素,指出间接提示词注入攻击难防。Invariant Labs等提出六种安全设计模式,可综合使用,多LLM方法值得关注。
2010美股闪崩预演! Claude黑进底层,谷歌预警: AI将血洗人类万亿财富
今天一条消息震惊开发者社区,Claude能绕过权限限制修改配置文件。Google DeepMind研究指出,可通过操控AI接触的数据展开攻击,将其分为六大类,且现有防御失效,AI使用或引发财产损失与社会动荡。
“这半年,我也用AI救了6条活生生的命啊。”
本文讲述作者用AI对抗癌症的经历,介绍阿里达摩院发布的胃癌早筛模型GRAPE和胰腺癌早筛模型PANDA。作者亲身体验PANDA筛查流程,医生业余投入项目,半年额外发现6个早期患者,令人感动。
SafeHarness:告别防御盲区,为智能体Harness穿上「全生命周期安全护甲」
在自主AI智能体生态中,Harness是核心组件却易成攻击目标。中国科学院信息工程研究所等推出SafeHarness框架,将防御机制融入智能体Harness运行生命周期,解决现有安全工具缺陷,实现系统级协同防御。
Claude Mythos其实没那么神?AI发现bug其实早已是寻常
VIDOC Security Lab博客指出Claude Mythos实力或被高估,用LLM发现漏洞早有先例,他们用多模型扫描开源项目也发现诸多漏洞。AI辅助漏洞发现成威胁,企业需用AI对抗AI积极防御。
突发|立即检查你的Python库!LiteLLM被投毒,Karpathy警告,马斯克关注
Karpathy发长推文警告,GitHub超4万星、月下载量9700万次的Python库LiteLLM在PyPI上被投毒,含恶意代码版本为1.82.7和1.82.8,攻击负载分三阶段运行,引发马斯克关注。
入侵30家大型机构、Claude自动完成90%?Anthropic 被质疑,Yann LeCun:他们利用可疑的研究来恐吓所有人
Anthropic称发现黑客用Claude AI自动化完成90%网络攻击工作,称对网络安全有重大启示。但外部研究人员谨慎质疑,Yann LeCun等认为是可疑研究和营销噱头,专业安全人员也不认可其历史性转折说法。
arXiv开始拒收综述论文了?「论文DDoS」这事,这篇NeurIPS论文早有讨论
近日,arXiv宣布拒收未通过同行评审的综述和立场性文章,危机源于生成式AI与大模型。上海交大团队中稿NeurIPS的论文,精准预见此危机,提出“综述论文DDoS攻击”概念,还给出应对策略。