「百万上下文」共找到 765 篇相关文章
最强3B「小钢炮」，代码数据全公开！推理随意开关，128k超长上下文
Hugging Face推出30亿参数模型SmolLM3，支持128k长上下文，训练等全链路开放。它在架构、数据混合策略等多方面优化，性能超Llama3.2 - 3B等，还公开双模式指令模型构建方案。
X上63万人围观的Traning-Free GRPO：把GRPO搬进上下文空间学习
年初 DeepSeek - R1带火大模型强化学习，GRPO成常见RL算法，但训练成本高。腾讯优图论文提出Training - Free GRPO，将GRPO训练范式迁移到上下文学习，成本低、泛化好，已开源。
1M 上下文时代太费 Token，告诉你我的 Coding Agent 省钱方法
当下GPT-5.5等模型原生支持1M上下文，虽能支撑长任务，但易被噪音干扰且费Token。作者以Claude Code为例，介绍做好会话管理的多种省钱方法，如根据任务选择会话策略、利用rewind功能等。
华为新开源！扩散语言模型突破32K上下文，还解锁了「慢思考」
今年文本生成领域从自回归向扩散语言模型转变，但长序列训练不稳定是痛点。华为发布 openPangu-R-7B-Diffusion，将上下文长度扩至 32K，在多基准创 7B 参数量级 SOTA，还解析了其技术革新。
Sora2五天下载量破百万！超越ChatGPT增长速度，App Store免费榜霸榜第一
Sora2五天下载量破百万，增长速度超ChatGPT，在App Store免费榜霸榜第一。其虽有使用门槛，但热度高，盗版泛滥。不过它也面临版权问题，审核收紧。AI创意应用取代传统社交媒体速度加快。
ICML 2025 | 注意力机制中的极大值：破解大语言模型上下文理解的关键
ICML 2025新研究揭示，在使用旋转位置编码 (RoPE) 的现代Transformer模型中，注意力机制的查询 (Q) 和键 (K) 表示存在集中极大值，而值 (V) 表示无此模式。研究通过实验揭示其与上下文知识理解的关键联系。
全球百万网友迷上赛博「养鱼」，我也被这群AI小丑鱼拿捏了
Draw A Fish是一款AI小游戏，让全球百万网友上头。玩法简单，在画布画鱼，达到一定相似度就能放虚拟鱼缸。它门槛低、有成就感和互动性，背后是基于PyTorch的卷积神经网络，用ResNet18架构和QuickDraw数据集训练。
龙虾之父Claude账号被封！近百万人围观：故意的还是不小心的
Anthropic状况频出，先是泄露源代码、词元计费有BUG等，现又封了龙虾之父Peter的Claude账号，后称是误伤解封。此事引发近百万人关注，有人质疑A社在炒作。
2个人不到1年做到月入百万，这个AI网文创业故事太疯狂了！
本文讲述猛哥的AI网文创业故事，他和合伙人不到一年实现月入百万。介绍其从0到1的过程，包括选赛道、精简创业、社群运营、构建提示词生态等，还分析了增长和盈利模式及难以复制的原因。
老黄亲自打钱！马斯克一夜狂融1400亿，百万GPU豪赌AGI终局
马斯克的xAI获200亿美元E轮融资，英伟达等参投。xAI估值逼近OpenAI，手握超百万GPU，Grok 5在训。马斯克称2026年AGI降临，AI将冲击就业，xAI有望成谷歌对手，不过Grok也陷入‘脱衣’风波。