自注意力层」共找到 1530 篇相关文章

推荐文章7

有些时候真觉得,AI总结和“三分钟看电影”没啥区别。

作者不喜欢用AI总结内容,认为它和“三分钟看电影”类似,会清除内容的细节和体验感。作者强调真正的学习和创造诞生于“无聊”时刻,呼吁人们在追求“快”的时代,享受“慢”过程,别让AI替己生活。

数字生命卡兹克
产品应用8

蛰伏一年,周衔团队带来首个具身基础模型,烹饪做实验弹琴,效果炸场

Genesis AI公布首个机器人基础模型GENE - 26.5,能完成烹饪、解魔方等复杂任务。该模型是全栈系统,以仿真加速迭代,用研手套采集数据,还重写控制栈。公司后续计划发布全身机器人。

机器之心
开源动态8

2K Star!颠覆PPT!这个560KB的HTML文件,把整个办公套件装进了一个文件里!

Bento是开源项目,把文档、编辑器等全打包进约560KB HTML文件,功能堪比PowerPoint。它数据纯JSON、支持AI协作与端到端加密协作,还研多个引擎,有多种上手和与AI协作方式。

开源星探
8

实测最强的Cowork Agent模型M2.7,这是龙虾最好的模型搭子

实测MiniMax新发布的M2.7模型,解决了Agent的笨拙感,是国内最强的Cowork Agent模型。它技能命中率高,能进化,对办公场景做了优化,还能解决生产效率问题,加强了人设保持能力。

开源AI项目落地
开源动态8

阿里达摩院开源具身大脑基模:3B激活参数性能超越72B,转身就忘事的机器人有救了

阿里达摩院开源RynnBrain具身大脑基础模型,全系列7个。它是业界首个有 时空记忆的模型,在20项具身Benchmark上超顶尖模型。具小而美优势,训练用研架构提效,数据丰富,输入输出灵活。

量子位
算法论文8

大模型是否对问题难度有预判?最新研究揭示 LLM 内部的“难度感知机制”

近期论文《Probing the Difficulty Perception Mechanism of Large Language Models》系统性解答大模型能否感知问题难度等问题。研究基于数据集在主流 LLM 上训练轻量线性探针,定位负责难度感知的注意力头,还发现不同模型表现有差异。

深度学习自然语言处理
算法论文7

高效大规模创新3D重建模型iLRM

多数基于Transformer架构的模型处理多视图输入有可扩展性问题,成均馆大学、延世大学研究人员提出创新3D重建模型iLRM。它通过迭代细化机制生成3D高斯表示,有独特架构设计和高效注意力机制。

AIGC开放社区
开源动态8

万亿参数狂欢!一文刷爆2025年七大顶流大模型架构

文章深入剖析2025年顶级开源模型的创新技术,介绍了DeepSeek V3/R1、Kimi 2、Qwen3等七大顶流大模型架构,揭示滑动窗口注意力、MoE和NoPE如何重塑效率与性能。

新智元
7

国际PC巨头入局,Violoop押注个人主权AI|甲子光年

Violoop获亿元级融资,产品计划9月16日众筹。它想让AI设备随使用更懂用户,提出“个人主权AI”,即个人掌握经验与改进能力。研发聚焦让AI理解人,设置主权边界,有三进化路径,还探索多终端应用。

甲子光年
开源动态8

最大开源第一视角数据集 EgoLive 来了,名校站台、近百家机构争相申请

今年4月京东开源业界最大人类第一视角数据集EgoLive,已获近百家机构申请。它用研设备采集,经多模态处理,覆盖多场景任务。其数据用于JoyAI - RA训练,在真实场景验证效果好,还推动具身智能数据标准化。

InfoQ