「自蒸馏」共找到 1158 篇相关文章
烧掉724亿，纳德拉挥刀重组Copilot
砸724亿美金后，微软用大重组承认Copilot「走弯路」。此前Copilot用户体验割裂，用户向竞品流失。纳德拉开出药方，统一管理，老将退场。苏莱曼转战自研大模型，微软欲让Copilot成一体化系统。
中国第一批没有论文的工科博士毕业了
国内推出实践型博士学位，不看论文，只认硬核实践产出。自去年9月以来，至少11人获此学位，分布多领域。这一制度由《学位法》推动，且清华创新领军工程博士如周鸿祎也适用。
LLM规划能力飙升79%！Google：内在自我批评技术拿下多项SOTA
Google DeepMind研究《通过内在自我批评提升大语言模型的规划能力》，不借助外部验证器，让LLM反复“自评+重写”，使Blocksworld准确率从49.8%升至89.3%，还介绍了方法及跨模型验证情况。
手术刀式去噪突破LLM能力上限，从头预训练模型下游任务平均提高7.2% | 中科院＆阿里
中科院计算所与阿里Qwen等团队联合提出RefineX框架，通过程序化编辑任务实现预训练数据精炼。它将专家指导结果蒸馏为删除程序，训练优化模型。用其净化数据训练模型，下游任务平均提高7.2%。
VLA 推理新范式！一致性模型 CEED-VLA 实现四倍加速！
近年来，VLA模型成机器人领域重要研究方向，但推理速度受限。本文提出一致性蒸馏训练、混合标签监督机制及提前退出解码策略，在多基线模型上实现超4倍推理加速，实验验证其高效通用。
老黄喝豆汁「破防」背后，国产GPU正在填上CUDA护城河
老黄喝豆汁刷屏，但更值得关注的是国产GPU生态。摩尔线程发布会展示MUSA生态，实现全方面覆盖，从兼容到自进化，在云端、端侧应用出色，还打通全链路，且未用最强架构。
比 BeautifulSoup 快 784 倍！这个自适应爬虫框架，我愿称它为下一代 Web Scraping 标杆
文章介绍了自适应Web Scraping框架Scrapling，它能解决爬虫从能跑到跑得稳的问题，具备极速爬取、自适应解析等核心功能，适用于电商数据采集等场景，还给出使用方法和项目地址。
Meta正炼化老板：24小时不间断工作，扎克伯格真成机器人了
《金融时报》爆料，扎克伯格正将自己炼成“代理CEO”扎克bot，由其影像和语音数据训练，本人也参与其中。超级智能实验室攻克相关技术难题，Meta还开发“CEO Agent”，但项目上线或面临问题。
ICML 2025｜如何凭「自动补全」实现100K生成3×加速？
在大模型推理复杂的当下，生成超长文本成本高。BIGAI NLCo团队提出推理加速框架TokenSwift，被ICML 2025接收。它重构传统自回归推理，解决长生成瓶颈，在多模型实验中表现亮眼。
八爪鱼微电子凭AI160-PRO再获行业权威认证
全国五金工业信息中心数据显示，八爪鱼微电子在指纹模组应用领域领先。其AI160 - PRO灵犀指纹模组有自研算法，识别佳；OP2088芯片算力强。公司坚持‘感算一体’，获认证见证国产技术发展。