「缓存技巧」共找到 245 篇相关文章
全球首次,Transformer「混血」速度狂飙65倍!英伟达已下注
康奈尔、CMU等机构研究者提出「混合体」Eso - LM,融合自回归和离散扩散模型范式。它引入KV缓存机制,推理速度相比标准MDM提升65倍,在速度与质量平衡上超越BD3 - LM,引发AI领域关注,英伟达或押注此方向。
蒸馏出「乔布斯」之后,他说Apple AI完全是shit
文章用女娲.skill蒸馏出乔布斯等人物,借乔布斯之口评Apple AI,指出Siri弱在vision。还介绍女娲造出的8个skill,对比其与ChatGPT角色扮演的区别,说明可蒸馏不同对象及用途,最后展示蒸馏喜剧技巧写的吐槽段子。
谷歌迎来“DeepSeek时刻”!TurboQuant引爆AI圈、全球开发者疯狂复现:6倍无损压缩,内存股集体暴跌
谷歌研究院发布 TurboQuant 压缩算法,能在提升速度、保持准确性的同时,降低大语言模型内存占用,可将键值缓存压缩至少 6 倍,速度最高提升 8 倍。该技术无需额外训练,精度零损失。目前虽未大规模部署,但已引发内存股下跌。
3万字长文带你WorkBuddy 从入门到精通
这是 WorkBuddy 的「从入门到精通」指南。介绍了它在 Windows 和 Mac 上的安装、登录、更新方法,功能涵盖新建任务、助理页面、项目页面等。还讲了技能、连接器、专家中心的使用,以及自动化、资料库、灵感等功能,还有实践案例、使用技巧和常见问题解答。
GPU-MODE Leaderboards之nvfp4_gemv代码阅读
文章围绕GPU-MODE的nvfp4_gemv竞赛rank1代码展开,先介绍问题及官方baseline,后详细解读rank1代码,含数据加载、线程模型等,还剖析核心计算函数,最后总结代码在缓存控制、数据格式等方面的调优亮点。
LeetCode刷够100小时,学会找人内推,OpenAI员工下场教你拿Offer
OpenAI新研究员Bas van Opheusden分享长达8页的面试指南,涵盖心态调适、准备策略、编程技巧等方面。他强调身心健康、享受过程,给出准备时间建议,还介绍各面试环节技巧及通过后注意事项。
Tailwind CSS 的核心设计师彻底抛弃 Figma,把Claude Code 变为主力设计工具
Tailwind CSS 核心设计师 Steve Schoger 用 Claude Code 做设计一个月,体验惊艳。他复盘了用其构建营销网站过程,还总结出设计细节处理方法,此外他正参与开发 UI.sh 工具。
Manus:3大核心策略,破解AI Agent上下文膨胀难题
当AI Agent调用工具结果大量涌入上下文窗口,LLM性能会下滑。Manus联合创始人拆解其上下文工程逻辑,给出‘减少、卸载、隔离’三大策略及模型选择等方法,还提炼出6条实践启示。
吴恩达分享AI开发项目快速实践大法
吴恩达指出很多AI开发者总觉得没时间开始构建应用,他给出的解决办法是把项目范围缩小,直至能在一小时内完成。他还分享周末项目实例,说明削减范围实践的好处。
提示词分享:帮助在 Hacker News 或者 Reddit 这样的讨论贴中提取精华内容
分享了在 Hacker News 或 Reddit 讨论贴提取精华内容的提示词,介绍最佳模型为 Gemini 2.5 Pro,还给出角色定位、工作流程、写作风格技巧及禁止出现的表达方式。