策略内自蒸馏」共找到 1363 篇相关文章

新闻资讯8

太空算力竞赛白热化:谷歌刚刚发布计划,中国太空计算卫星星座已在轨运行半年

当地球AI算力竞赛卷,太空算力赛道开启。中国国星宇航“星算”计划首批卫星半年前已组网运行,规模和算力世界第一。谷歌等巨头也有布局,但谷歌计划2027年初才发原型卫星,中国企业已占先发优势。

AI寒武纪
算法论文8

传统训练效率很低?我们靠 “给模型降噪” 重新审视长上下文建模难题

文章指出长上下文模型处理长文本时易受噪声干扰,提出新评估指标IG分数和“上下文去噪训练(CDT)”方法。实验表明CDT优于现有策略,经其训练的开源模型在长上下文任务中性能媲美GPT - 4o。

深度学习自然语言处理
新闻资讯8

一年4次迭代,狂堆GPU成真!微软AI冷液灌芯,散热暴涨3倍

AI芯片发热问题严重,限制了其发展。微软推出微流体冷却技术,在芯片开液体血管,散热效率最高提升3倍,温升降65%。一年4次迭代解决诸多难题,影响从省钱到使用体验,更是抢跑未来的布局。

新智元
产品应用8

OneSearch,揭开快手电商搜索「一步到位」的秘技

本文介绍快手提出的电商搜索端到端生成式框架 OneSearch。它有三大创新,包括 KHQE 模块、用户行为序列注入策略、偏好感知奖励系统。实验显示它在多方面提升显著,已部署于快手电商搜索场景。

机器之心
新闻资讯7

Mira Murati 创业公司首发长文,尝试解决 LLM 推理的不确定性难题

OpenAI前CTO Mira Murati创立的Thinking Machines Lab首发文章《克服LLM推理中的不确定性》,指出大语言模型推理难获可复现结果,深入探究其不确定性根源,提出使核函数具备批次不变性的方法并给出实现与实验。

Founder Park
新闻资讯8

CEO 上阵写代码,公司从被传濒临倒闭到千亿估值,最大功臣是Claude?

Airtable是先进无代码应用平台,曾被传濒临倒闭,如今估值达千亿。CEO Howie Liu分享围绕AI重组公司、亲自编程让公司实现正现金流的心路,还探讨推动团队用AI、岗位受影响情况及公司转型策略等。

AI前线
产品应用7

支付宝 AI 出行助手高效研发指南:4 人团队的架构迁移与提效实战

本文介绍支付宝AI出行助手研发历程,其集成多种出行功能,基于xUI + KMP框架搭建。分享研发实践、挑战与策略,如迁移基础能力、卡片生态,适配标准框架,还提及KMP应用及数据度量体系,取得业务和研发效能成果。

阿里云开发者
新闻资讯7

刚刚,高盛发布26页深度 AI 报告:谁将为GPU的饥渴买单?

高盛发布26页《Powering the AI Era》报告指出,AI服务器农场吸电速度远超电网扩容,引发电力危机。报告分析电力供应来源、应对策略等,还提到数据中心供需缺口扩大,电力成AI最大瓶颈,中国公司或因电力等优势成劲敌。

AGI Hunt
开源动态8

智谱AI、清华开源新视觉大模型:刷新41项纪录,同级别最强

智谱AI与清华联合开源GLM - 4.5V视觉大模型,它基于GLM - 4.5 - Air开发,架构独特。在42项主流测试中创41项新纪录,多领域表现超Qwen2.5 - VL等模型,还采用新训练策略

AIGC开放社区
新闻资讯7

我们都错怪GPT-5了,路由统一算力,免费用户也能创造收益

GPT - 5发布后,其路由架构备受关注。开源社区的Arch - Router类似其路由系统,能结合任务领域和动作制定策略。GPT - 5路由框架可平衡成本与性能,还能转化免费流量,未来想掌控用户与模型交互路径。

量子位