「层贡献度」共找到 738 篇相关文章
The Batch: 881 | 一千万 token 的输入上下文
Google的Ali Behrouz等人设计“记忆模块”集成到类transformer架构ATLAS,能处理一千万token输入。它替代注意力层,训练后在长上下文任务中表现佳,但小模型,大规模表现未知。
The Batch: 886 | OpenAI 与 Meta 多元化其 AI 产品线
OpenAI和Meta此前专注聊天机器人,如今分别推出新举措。OpenAI推Sora 2、ChatGPT Pulse和Instant Checkout;Meta推出Vibes。新项目利用AI提升用户参与度与收入,探索社交视频领域和大模型与商务融合。
规范对齐时代:GPT-5 断层领先,让安全与行为边界更明晰
上海交通大学等团队提出规范对齐概念,构建评测基准 SpecBench 评测 33 个主流模型,发现多数模型有不足。还探索测试时深思方法,如 Align3 能提升规范遵循度,GPT - 5 在规范对齐上断层领先。
Vibe Coding撞墙了?换个思路治好AI编程的「局部失忆」
Vibe Coding虽降低开发门槛,但Coding Agent处理复杂任务易失控。当前Agent缺乏工程状态层隔离控制,Valkor等联合开源loom,它将交付拆解成状态链,过滤噪音,为大模型落地提供状态基建。
国产开源模型越多,模型路由的机会越大
中国大模型市场模型增多,能力相近、价格降低且部分开源。开发者选择多但企业选模型难,价值向调度层转移。开源改变产业结构,Routing业务有价值且至少含四层,中国Provider Routing易落地。
X平台如何决定你看到什么?马斯克刚刚开源了X推荐引擎
马斯克开源X平台推荐算法,消除人工干预特征,靠Grok模型理解用户行为。系统由编排、存储和机器学习层协同,经复杂机制精准推送信息,还构建后置过滤体系保证内容质量。
机器人IRON被质疑是“真人秀”?小鹏一镜到底:七年打磨的行走答案
当IRON机器人被质疑“真人扮演”,小鹏一镜到底展示其内部结构。团队耗时七年打磨,实现轻盈稳定,其动作拟真度高模糊人机边界,是成功演示与公关案例。
Agent 时代启示录: 当 Agent 作为新物种加入经济系统
文章指出 Agent 时代正颠覆传统互联网分析框架,如 To B/To C 边界模糊、付费逻辑转变等。软件形态也在重写,Agent 成新物种加入经济系统,还探讨了 Agent Harness 商业机会,如 Runtime、Context、Orchestration 层。
东方理工团队提出HiDrop:重构MLLM计算路径,压缩90%视觉Token实现2.2倍加速
东方理工大学沈晓宇团队提出HiDrop,基于MLLM不同层功能差异,设计出延迟注入、凹金字塔式剪枝和提前退出的视觉Token压缩策略。实验显示,它能压缩约90%视觉Token,保持98.3%性能,实现训练和预填充加速。
AI 真的太贵了
国内AI套餐价格高、额度低,用户体验不佳。多数国产模型开源,不存在资源问题,但厂商毛利率高达90%。高价阻碍应用层发展,AI应降低价格,让更多人用起来,提升社会生产力。