「隐线性函数」共找到 227 篇相关文章
新闻资讯7
3个月融资亿元,流形空间证明世界模型也需要预训练 | 甲子光年
2025年5月武伟创办流形空间,成立3个月获亿元融资。他认为VLA是过渡方案,世界模型是AGI新基建。当下技术分显式物理建模和隐空间交互两派,流形空间做具身世界模型,从预训练做起,还将领域模型产品化。
甲子光年
开源动态8
AGI新技术路线:下一代稀疏注意力机制Monte Carlo Attention开源
超对称技术公司开源了 Monte Carlo 注意力机制,用于新版基座模型 BigBang - Proton。它在二进制块编码技术上,用块间代表交流机制实现线性复杂度,解决了传统方法的缺点,可实现理论上无限的上下文长度,对现有预训练技术和硬件设计影响深远。
InfoQ
开源动态8
单卡可跑18万原子!分子模拟的“规模焦虑”该终结了
至知创新研究院UBio团队发布的UBio-MolFM v1.5,是可进行分子动力学模拟的机器学习原子间势函数。它在精度和规模上有提升,实测中表现优于经典力场,架构、数据和训练都有创新,误差降45%,速度提8倍,现已开源。
量子位
算法论文8
欲取代transformer的SSA(次平方稀疏注意力)解读
文章解读了欲取代Transformer的SSA(次平方稀疏注意力)算法。它支持12M tokens上下文,比fastAttention快52倍,训练和推理更快。SSA改变了注意力扩展特性,有计算和内存线性扩展等特性,经三阶段训练可可靠利用长上下文。
Agent的潜意识
开源动态8
QwenPU:把一台计算机编译进了模型权重里
开发者 div 将一颗 RISC-V CPU 及向量单元直接编译进 Qwen3.5 权重,无需外部运行环境和额外训练,长整数算术准确率从 48.6% 提升至 100%。
AI工程化
新闻资讯6
西湖世界模型研究中心成立:拿下世界冠军后,他们否定了自己的冠军路线
西湖大学宣布成立西湖世界模型研究中心。其团队主打跳过视频画面渲染的“概念世界模型”,孵化的创业公司西湖数智已累计获得超亿元融资,重点落地机器人与自动驾驶。
特工宇宙
算法论文8
LeCun证明了:规模从未起作用,下一token路线效率低
LeCun 团队发文在数学上论证了跨模态表征收敛的柏拉图假说;其提出的好视图 JEPA 方案使1.09亿参数模型表征对齐度超过72B大模型,样本效率最高提升42倍。
机器之心