搜索：新注意力机制

「新注意力机制」共找到 4298 篇相关文章

成本降70%！清华、阿里通义带来智能体长程任务新解法

AI智能体处理长程任务常遇上下文超载问题。清华与阿里通义研究人员提出MemPO算法，赋予大模型主动管理记忆能力，准确率提升，计算资源消耗降近七成，不过评价机制有局限。

Macaron新版本技术视频技术浓度超预期，结尾藏产品更新彩蛋。此次更新社交功能、Daily Spark、记忆打通等背后，藏着Personal AI关键变化，其团队Mind Lab有技术突破，开源方案获高认可。

Mamba一作将演讲整合成科普长文，探讨SSMs和Transformer模型权衡之术。认为Attention非万能，Transformer是阶段性最优。几天后将发布新架构，能与Transformers兼容，还回顾了两模型特点及结合优势。

文章指出当前大模型生成游戏存在玩法创新不足、评分虚高等问题。CreativeGame技术关注此问题，通过先写设计文档、激发创意、设计记忆架构等方式，让AI围绕机制持续迭代，探索可解释、可追踪、可迭代的创作范式。

a16z合伙人Martin Casado预告今年最重要的模型发布，线索指向Ilya Sutskever的新模型。SSI成立两年低调发展，获巨额融资，7月与英伟达合作。持续学习是焦点，但相关能力信息有限。

2025年7月11日新紫光集团完成战略重整三周年，交出硬核答卷，连续三年营收超千亿，专利增加。其聚焦智能科技主业，通过战略布局、技术攻坚、生态协同实现发展，未来将持续求新求变，深化合作。

过去一年，‘世界模型’成视频生成领域热词，厂商强调产品要模拟真实世界运行规律，但业界评测一直未能精准检验其‘物体恒存’的认知能力。为此，研究者提出新基准MemoBench，测试了主流模型，揭示其短板。

吴恩达新作Prefix Sliding指出，模型推理时丢弃中间已贬值token，只保留前缀+滑动窗口，无需训练可提速3倍，配合RL训练能将推理轨迹扩展到10万token以上。该方法为Agent场景提供新思路。

传统强化学习（RL）训练LLM Agent面临成本高、任务多样性不足等挑战。Meta团队提出DreamGym框架，以经验合成为核心，通过三大组件协同工作，在多种任务和模型上提升性能，为通用Agent训练开辟新路径。

中国科学院自动化研究所、腾讯AI Lab团队从可解释性分析出发，发现LLM内部含多个可采样内部策略，揭示不同模型推理熵模式，提出BuPO算法，在复杂推理任务上性能显著优于传统算法。