GPU资源消耗」共找到 900 篇相关文章

新闻资讯8

OpenAI发布MRC超算协议,重塑10万GPU集群通信,AMD等合作推进

OpenAI联合AMD等发布MRC超算协议,它基于RoCE标准,打破传统网络局限,解决超大规模计算集群难题,降低成本与能耗。MRC有多平面网络等特性,已在多超级计算机部署,规范也已公开。

AIGC开放社区
新闻资讯7

这一年,DeepSeek消耗14万亿Token,编程仅占1/10,超一半用于角色扮演?

a16z和OpenRouter基于100万亿token研究揭示LLM使用情况:开源模型占三成市场,编程任务成刚需,角色扮演是金矿。还提到‘玻璃鞋效应’影响用户留存,市场分层为‘高端闭源+性价比开源’双轨制。

PaperAgent
产品应用8

只用国产GPU训练的大模型性能飙升100%!国内唯一,更懂你

科大讯飞发布全国产算力训练的讯飞星火X1.5,推理效率暴涨100%,综合性能跻身全球顶级。还首发非自回归语音大模型架构,效果提升、成本降低。此外,展示多领域应用成果,发布相关产品,开源智能体平台。

新智元
新闻资讯7

The Batch: 871 | Mistral测量了大语言模型的能耗、水耗与物料消耗

法国AI公司Mistral发布对Mistral Large 2的环境分析报告,涵盖全生命周期影响。研究表明单次使用影响小,但累计负担大。虽研究有不足,但其方法或推动环保型AI发展。

DeeplearningAI
新闻资讯8

一年4次迭代,狂堆GPU成真!微软AI冷液灌芯,散热暴涨3倍

AI芯片发热问题严重,限制了其发展。微软推出微流体冷却技术,在芯片内开液体血管,散热效率最高提升3倍,温升降65%。一年4次迭代解决诸多难题,影响从省钱到使用体验,更是抢跑未来的布局。

新智元
新闻资讯7

刚刚,高盛发布26页深度 AI 报告:谁将为GPU的饥渴买单?

高盛发布26页《Powering the AI Era》报告指出,AI服务器农场吸电速度远超电网扩容,引发电力危机。报告分析电力供应来源、应对策略等,还提到数据中心供需缺口扩大,电力成AI最大瓶颈,中国公司或因电力等优势成劲敌。

AGI Hunt
产品应用8

堆了一仓库GPU,却生产不出专业智能?九章云极用AI工厂给出解答

企业接入通用大模型到业务系统,却发现它难以执行任务。九章云极在发布会上推出‘AI工厂’战略,通过训练工厂和Token工厂填平执行鸿沟,前者用强化学习造专业模型,后者让专业智能规模化流通。

机器之心
开源动态8

2.9K Star!这个工具让 Agent 查代码快了 200 倍!节省 98% Token 消耗

当下,Agent 在代码工作流应用广泛,但在大型代码库搜索时存在精准性、Token 效率和速度问题。Semble 是 MinishLab 团队开发的面向 Agent 的代码搜索工具,能解决上述问题,还具备多方面亮点,安装和使用也简单。

开源星探
算法论文7

上交大和辉羲把LLM刻进ROM!推理性能冲2万token/s,GPU时代终结?

硅谷Taalas将大模型‘物理焊死’进芯片引关注,而上海交大、辉羲智能与微软亚洲研究院团队用ROM+SRAM异构架构,将端侧LLM推理速度推至20,000 tokens/s。介绍了ROMA和TOM架构优势及应用场景。

新智元
新闻资讯8

黄仁勋CES回应全场!内存卡了GPU脖子,游戏玩家可能只能用旧显卡了

在CES 2026上,黄仁勋围绕物理AI发言,涉及机器人、自动驾驶等。他预计今年有类人机器人,推出自动驾驶模型Alpamayo 1。因内存成本和供应问题,或复产旧显卡,还谈了AI对游戏影响及内存规划等。

量子位