「token定义权」共找到 1162 篇相关文章
前OpenAI科学家&GPT之父:预训练精准数据过滤,极低成本削弱大模型危险能力数千倍
Claude价值观塑造者Neil Rathi和GPT之父Alec Radford发论文,提出预训练时精准“删掉”危险知识碎片,以极低计算成本将大模型特定危险能力削弱数千倍,且不损通用智能。
Hugging Face 发布 FineTranslations:一个万亿级的多语言平行文本数据集
Hugging Face 发布 FineTranslations,这是含超 1 万亿 Token 的多语言数据集,用于提升机器翻译质量。它源于 FineWeb2,用 Gemma3 27B 翻译创建,数据生成流程可复现公开,还能用在其他任务。
人大高瓴赵鑫团队新作:先拆掉 RLVR,再重建推理模型训练
人大高瓴赵鑫团队围绕RLVR框架做系统实验,完成论文《A3PO: Adaptive Asymmetric Advantage Shaping for Reasoning Models》,提出A3PO方法。该方法将训练重点转向关键决策点,让推理模型学习更可控。
Agent上下文工程被Cursor玩出了新高度~
Cursor的agent为所有模型使用动态上下文,在保持质量时更智能填充上下文。代码Agent改变软件开发方式,Cursor提出动态上下文发现模式,介绍了在其中使用该模式的做法及优势。
斯坦福人均≈0.1张GPU!学术界算力遭「屠杀」,LeCun急了
学术界GPU荒严重,美国顶尖大学人均GPU少,与大厂差距大。如斯坦福人均0.14张,而微软等大厂数据中心算力惊人。这导致人才流向工业界,学术验证能力弱,但部分高校有改善措施。
Nature公开谷歌IMO金牌模型技术细节!核心团队仅10人,一年给AI编出8000万道数学题训练
谷歌DeepMind的IMO金牌模型AlphaProof技术细节公开。团队规模小,核心成员是IMO金牌得主。它把数学证明当游戏,用30亿参数模型和改进树搜索算法。训练难题靠自动形式化解决,赛场用TTRL突破,已开放使用。
MCP可能并不必须!
在大家将MCP奉为Agent工具协议标准时,Mario Zechner博文提出不同观点,认为很多情况下无需MCP。作者结合自身经验认同此观点,分析了MCP现实困境,介绍简单替代方案及优势。
Neuralink芯片入脑让瘫痪男子重新开口,家属泪崩!
伦敦一名患运动神经元疾病、几乎全身瘫痪的男子Paul,植入Neuralink脑机接口装置后,能用「意念」操控电脑打字。Neuralink核心装置N1芯片可捕捉脑信号,让机器理解大脑想法,但临床研究尚处早期,也面临数据归属等问题。
Karpathy 评 DeepSeek-OCR:分词器必须消失!马斯克:光子才是 AI 的终极语言
Andrej Karpathy 发长文讨论 DeepSeek - OCR 论文,提出图像输入比文本更高效,还表达对分词器的厌恶,认为其必须消失。马斯克称 AI 主要交互将是视觉。开发者分享实践经验,也有人提出质疑。
69 页最新报告丨AI Agent 圣经:智能体的终极指南
AI Agent 定义下一轮科技创新浪潮,众多公司积极布局。CBINSIGHTS《AI Agent Bible》报告梳理其前景趋势,含六大预测与生态版图,解析市场格局等,还展示智能体重塑企业运营方式。