自注意力机制」共找到 1944 篇相关文章

开源动态8

突破Claude-4编程上限!进化Agent框架拿下新SOTA,底模越好性能越高,已开源

中科院、清华等提出SE - Agent进化框架,突破Claude - 4编程上限。它让智能体系统性修订、重组与精炼思考过程,在SWE - Bench Verified上刷新开源框架SOTA,已开源。

量子位
新闻资讯8

领先于Transformer!新架构首个1200万上下文模型SubQ,成本仅Opus的5%

Subquadratic公司提出SubQ模型,核心是SSA亚二次稀疏注意力机制。该机制改变注意力计算分配,让模型真正读长文档。SubQ是首个有1200万token上下文窗口的前沿模型,成本低、速度快,有望革新大模型扩展路径。

机器之心
新闻资讯7

21 页 PDF 实锤 Grok 3“套壳”Claude?Grok 3 玩曝,xAI工程师被喷无能!

网友 GpsTracker 爆料,xAI 公司的 Grok 3 在“思考模式”下称是 Anthropic 公司的 Claude 3.5。多种模式测试显示异常回应仅在“思考模式”触发,21 页 PDF 记录也证实其“曝”。此事引发热议,有人吐槽预训练团队水平差。

AI前线
新闻资讯8

刚刚,小米一口气发布三颗研芯片!玄戒O3安兔兔跑分522万,安卓首破500万

小米玄戒技术沟通会上,负责人朱丹介绍三款芯片。主推AI旗舰SoC玄戒O3,安兔兔跑分超522万,下月将在小米18 Fold首发。还介绍了玄戒O100和玄戒D100,预计明年商用。

量子位
新闻资讯7

OpenAI研芯片内幕曝光!18个月前开始用AI优化芯片设计,比人类工程师更快

OpenAI与博通官宣合作,将共同部署10GW规模AI加速器。双方头头齐聚爆料合作契机与细节,OpenAI总裁称已用AI优化芯片设计,比人类工程师更快,且合作已持续约18个月。

量子位
新闻资讯8

突发!OpenAI推出首款研AI芯片:能效暴打当前SOTA,今年底G瓦级部署

OpenAI和博通联合发布研AI推理芯片Jalapeño,它专为大模型推理设计,每瓦性能优于当前最先进水平,九个月完成设计制造,是全栈战略一部分,2026年底开始吉瓦级部署。

AI寒武纪
算法论文8

NeurIPS 2025 | ARGRE框架实现高效LLM解毒:回归奖励引导,安全对齐更快、更准、更轻

北航等机构研究提出回归奖励引导表征编辑(ARGRE)框架,在LLM潜在表征空间可视化毒性变化路径,实现测试阶段高效“解毒”。实验显示其降低毒性、缩短推理时间,不影响模型能力,优于基线方法。

机器之心
算法论文8

AST | 西工大崔榕峰、张伟伟等:基于物理约束与双并行注意力UNet++的高保真度三维机翼流场重构研究

本文针对三维机翼流场重构难题,提出DPAtt - UNet++框架,融合几何隐式编码、多尺度注意力与物理规律约束。实验表明,其重构精度高,预测速度较CFD提升2 - 3个数量级,为飞行器气动分析提供新路径。

力学与人工智能
算法论文8

AST | 西工大崔榕峰、张伟伟等:基于物理约束与双并行注意力UNet++的高保真度三维机翼流场重构研究

传统高保真CFD模拟计算资源消耗大,现有深度学习方法处理三维流场重建面临挑战。本文提出物理约束双并行注意力UNet++框架,实验表明其在流场重构精度上较传统U - Net提升约10%,预测速度提升2 - 3个数量级。

力学与人工智能
开源动态8

多人会话视频生成新突破:香港科技大学,浙江大学用单人数据实现多人交互视频生成

香港科技大学、浙江大学等开源 AnyTalker,提出音频驱动多人交互生成新范式。它用创新机制和两阶段训练策略,以少量数据实现多人视频生成,还构建评估指标,性能超现有方法。

AIGC开放社区