「Transformer专用芯片」共找到 942 篇相关文章
在智算中心,部分国产芯片闲置率高达80%?
随着人工智能发展,智算中心成为科技竞争“新基建”。国内建设热潮出现波动,存在投资热度与阶段性“算力过剩”并存现象,还面临国产芯片闲置率高问题,提出需“精细化”管理提升算力利用率 。
AMD发布旗舰AI芯片,称性能比肩英伟达
当地时间6月12日,AMD CEO苏姿丰在大会展示多款AI新品,将新AI芯片与英伟达同类产品对比,称性能比肩且性价比高。还展示了新软件栈、介绍下一代AI机架产品,预计推理成未来AI发展主驱动力。
让智能“落地”的芯片,今年都去了MWC
2026年世界移动通信大会(MWC)以‘The IQ Era(智能时代)’为主题,全球2400多家企业参展,其中350家来自中国。中国企业展现了从芯片到终端的体系化竞争力,在网络、终端、基础设施、模组等方面均有进展。
华为盘古大模型:被芯片牵制的“千古”模型
华为盘古大模型团队员工自曝内幕,称其受芯片限制,早期算力有限、训练困难。还指出内部存在造假、套壳等问题,如135B V2套壳Qwen 1.5 110B,pangu pro moe 72B套壳qwen 2.5的14b等,导致人才流失。
欲取代transformer的SSA(次平方稀疏注意力)解读
文章解读了欲取代Transformer的SSA(次平方稀疏注意力)算法。它支持12M tokens上下文,比fastAttention快52倍,训练和推理更快。SSA改变了注意力扩展特性,有计算和内存线性扩展等特性,经三阶段训练可可靠利用长上下文。
「Memory as a Context」是否将重新定义 Transformer 的 「记忆模式」?
本期机器之心PRO会员通讯解读3个AI业内要事,包括「Memory as a Context」能否重新定义Transformer记忆模式、世界模型发展情况,以及OpenRouter联合a16z发布的《State of AI》报告。详细探讨了谷歌Titans架构及其理论框架MIRAS,还提及业界对LLM记忆力的改进方案。
Transformer论文作者之一Noam Shazeer宣布离开Google,加入OpenAI
6月18日,Google DeepMind工程副总裁、Gemini模型联合负责人Noam Shazeer宣布离开Google加入OpenAI。他是Transformer架构提出者之一,技术实力强。Google曾花27亿美元请他回归,仍没留住。
布林坦承谷歌低估Transformer,“还被OpenAI挖走了Ilya”
谷歌创始人谢尔盖・布林回母校演讲,复盘谷歌发展,承认曾低估Transformer,让机会给OpenAI。还回顾谷歌诞生、AI掉队又靠Gemini 3翻盘的历程,给出对大学生、创业者建议,反思退休决定。
突破“卡脖子”!清华学覇在这个芯片领域做到世界第一
曾中国做不出自己的CIS芯片,如今格科微已称霸中低端市场且冲向高端。创始人赵立新2003年成立公司,历经波折,现转型Fab - Lite模式,高端转型初见成效,还将开拓汽车CMOS图像传感器业务。
Transformer祖传设计遭暴击,COLM顶会三篇论文发难
COLM 2026上,三篇论文对Transformer关键技术发难。《Cracks in the Foundation》指出长上下文架构选择影响大;《Lost in Backpropagation》揭示输出投影层信息损耗严重;《When Fewer Layers Break More Chains》表明层剪枝影响长链推理。