后Transformer架构」共找到 3699 篇相关文章

推荐文章7

CuteDSL-1: Introduction

文章介绍CuteDSL,它因Cutlass编译慢、调试难等痛点而生,可在Python构建DSL,编译快、调试易且性能无损。文中阐述其架构、使用方法、与PyTorch集成优势等,还提及基于CuTe的开发及性能对比。

GiantPandaLLM
开源动态8

Qwen3家族训练秘籍公开:思考/非思考融进一个模型,大模型蒸馏带动小模型

Qwen3技术报告揭晓8款模型关键技术,采用双模式架构,训练和微调分段进行,还“大带小”蒸馏数据。其融合思考与非思考模式,训练分多阶段,Qwen Chat还全量上线深度研究功能。

量子位
新闻资讯7

国内“内卷”没用,企业怎么靠AI出海获利?

InfoQ《极客有约》X AICon 直播探讨中国技术出海破局增长。嘉宾认为企业要判断国内经验能否迁移海外,还分享出海成功案例,给出战略选择建议,如先欧美国内等,还提及验证产品的关键指标。

InfoQ
新闻资讯7

风投的钱,开始由AI科学家重新分配

近年新型AI公司NeoLab兴起,获风投开始资助外部科研。如Thinking Machines Lab、Periodic Labs推出资助项目。NeoLab先定研究问题再选团队,决策快,虽有积极一面,但也可能使少数人影响研究走向。

DeepTech深科技
开源动态8

从多模态大模型中「拆」出音频向量模型

Google 发布原生多模态向量模型 Gemini Embedding 2,推动 Omni Embedding 发展。Jina AI 团队分享从多模态大模型中「拆」出音频向量模型的经验,介绍架构、训练数据,对比四种做法,还提及评测、应用场景及结论。

Jina AI
开源动态8

罗福莉携小米MiMo-V2-Flash首次亮相:一次在推理与Agent上的下注|甲子光年

大模型进入新阶段,效率成能力一部分。小米MiMo团队12月16日晚发布并开源MiMo - V2 - Flash,负责人罗福莉首亮相。该模型在推理、编程和智能体场景表现出色,在架构、训练方法等有创新。

甲子光年
推荐文章8

一文带你彻底搞懂!企业级MCP Server接入OAuth授权服务器全流程解析(含完整代码)

文章从基础概念入手,借Python + MCP SDK + 第三方授权示例,解析企业级MCP Server接入OAuth授权服务器全流程,包含OAuth 2.0概念、MCP支持架构、Google OAuth2.0认证实战及与其他安全方案配合。

AI大模型应用实践
新闻资讯7

美国专家来中国转了一圈:AI比赛已经结束了

美国专家Rui Ma参观中国AI相关活动称,中国AI企业实力强,能源问题已解决,大规模投资可持续能源,有安全低成本电力供应体系,而美国电网老化、审批慢、储备少,AI竞赛或已结束。

量子位
开源动态7

梳理SGLang中DP Attention及其Padding问题

作者梳理SGLang中DP Attention及其Padding问题。介绍DP Attention背景、流程,指出padding分max和sum模式,旧版sum padding浪费计算、影响cuda graph使用,v0.4.10有优化,max padding仍待完善。

GiantPandaLLM
新闻资讯7

苹果分享 iOS 26 即将推出的 AI 基础模型的细节

苹果在技术报告中公布 iOS 26 新 AI 基础模型细节。该模型有 3B 参数和更大版本,前者在设备运行,者用于私有云平台。介绍了架构、评估结果,还强调实现可信赖 AI 的方法。

InfoQ