推荐文章7

用pytorch snapshot进行显存分析

GiantPandaLLM2025-07-23

AI 摘要

文章教你用pytorch memory snapshot分析显存消耗，以混合精度训练为例，介绍显存管理细节及解读方法，还给出不同模型和zero1训练的显存分析，助你掌握代码优化显存。

关注公众号

扫码关注
第一时间收到每日精选

公众号专辑

Nick Jennings：智能体AI走向智能社会

8月18日，IJCAI 2026大会上，研究卓越奖得主Nick Jennings回顾智能体发展历程，指出当下智能体AI火热，它并非新概念，而是经数十年积累。还分享经验，展望从智能体到智能社会的未来。

本文整理自金煜阳博士在QCon大会分享。介绍大模型推理挑战，如规模增大、架构复杂。阐述算子优化、内存管理、量化、异构调度和并行优化方法，还介绍开源推理引擎赤兔在国产芯片的实践成果。

OpenHex董舒认为AI最大价值是替人出面干活，提出数字员工概念。他指出判断力密度高的岗位易被AI取代，中国服务业有发展机会。还辨析数字员工类型，介绍其平台OPS Agent，最后分享了数字员工相关Q&A。

本文作者白杨SEO从2011年入行SEO，2024年起研究AI搜索优化。他指出当下AI平台引用来源变化大，企业官网成重要来源。作者从网站代码、站内内容、站外推广三方面，教大家做好官网GEO优化，让AI推荐官网。