步数蒸馏」共找到 571 篇相关文章

算法论文8

蒸馏的双重突破:从几何保真到对抗鲁棒

深度学习中,据集蒸馏可用精简合成样本替代庞大训练集且不牺牲模型性能,但面临精度和可靠性两大难题。两篇发表于 ICCV 2025 和 AAAI 2025 的论文分别给出解决方案,且代码已开源。

深度学习自然语言处理
新闻资讯7

以企业AI为支点,中国软件撬动了全球ToB智市场

全球围绕GenAI开展融资和市场开发,中国软件企业迎来出海新机遇。用友作为特殊代表,既是参与者也是‘吹哨者’。其全球化业务升级,与多企业双赢,且凭借智能力能与国外巨头竞争。

InfoQ
推荐文章7

刚刚,Thinking Machines Lab博客提出在策略蒸馏,Qwen被cue 38次

Thinking Machines Lab发布《在策略蒸馏》博客,提出在策略蒸馏可结合强化学习纠错与SFT奖励密度,成本低且能让小模型有强大性能。该成果受Qwen团队启发,大量用Qwen3模型。还对比了不同训练方法。

机器之心
科研成果8

这个情人节,AI深吻Math!国产RL系统多维突破300年亲吻难题

2月14日情人节,上智院等联合研发的PackingStar强化学习系统,在多维度刷新亲吻与广义亲吻纪录,实现学结构领域多维度、系统性突破。它将复杂几何问题转化为可训练游戏,成果获权威认可。

机器之心
算法论文8

大道至简,何恺明团队新作pMF开启像素级「无潜、单」生成范式

何恺明团队新论文提出用于单、无潜空间图像生成的pMF框架,直指主流扩散与流匹配模型通病。该框架将v、u和x三个场关联,训练网络把噪声输入直接映射为图像像素,实验表现强劲。

机器之心
算法论文8

何恺明带大二本科生颠覆扩散图像生成:扔掉多采样和潜空间,一像素直出

何恺明团队提出新方法Pixel Mean Flow(pMF),突破传统扩散模型/流模型限制,砍掉多采样和潜空间,一在像素空间生成图像,在ImageNet不同分辨率上取得佳成绩,还介绍了核心设计、实验结果对比等。

量子位
新闻资讯7

陶哲轩都惊了!o3首战「AI奥」碾压夺冠,开源军团仅差5分狂追OpenAI

AI界奥杯重启,OpenAI o3首参赛,算力拉满时以47分夺冠。测评显示在奥学推理上,商用和开源AI差距缩小,开源即将追上商用模型。报告完整测试结果已放出。

新智元
产品应用8

科技认领神秘登顶模型:AI视频公司拿出工业级Demo,跨本体跑通复杂长程任务

科技认领神秘登顶模型MotuBrain,该模型4月中旬悄登两国际benchmark。它将预测与行动统一,具一脑多型等能力,技术上走边看边动路线,有响应快等优势。生科技双轨布局,Vidu与MotuBrain同根。

量子位
新闻资讯7

政企研联手发力!N 个实战案例!企业智化转型的石景山企业专属方案重磅登场 | Q推荐

全球人工智能开发与应用大会暨石景山智化转型峰会(AICon 北京站)将于 2025 年 12 月 19 - 20 日在北京石景山举行。大会围绕企业智化转型与 AI 实战落地,设项目启动会、全国性论坛和行业峰会,助企业明确转型路径。

AI前线
开源动态7

16个月后Meta杀回开源,小扎力挺蒸馏

Meta发布新开放AI模型Muse Glimmer底层参,未来几周将开放Muse Spark 1.2模型权重。扎克伯格力挺开源,称要为十亿人提供免费强大AI,还为模型蒸馏辩护。Meta此举有现实压力,也想创造算力需求。

机器之心