10倍工程师」共找到 1495 篇相关文章

算法论文8

谷歌的DeepSeek时刻:LLM推理加速被干到了8

谷歌TurboQuant论文介绍量化算法,能为大语言模型和向量搜索引擎大规模压缩。可将大语言模型KV缓存内存减至少6、加速达8且精度零损失,还介绍其工作原理及实验结果。

PaperAgent
开源动态7

Headroom:Netflix 工程师开源的上下文压缩工具,省 token 还是烧 token?

Netflix工程师Tejas Chopra开源Headroom,定位为AI Agent的上下文压缩层,压缩工具输出等内容,有可逆压缩等特性。官方数据显示节省token效果好,但微软工程师实测结果中性偏负面。

AI工程化
新闻资讯7

AI开始替人类调用AI!token用量已是人类5.2

据OpenRouter统计,截至8月10日,Agent类token用量半年涨14,人类仅2.8。差距源于用法差异,虽智能体部分token计价低,但用量大仍烧钱。省钱关键在配套,且智能体任务验收缺人手。

新智元
开源动态8

Thinking Machines 发布又一神作「在线策略蒸馏」 ,LLM后训练效率飙升50-100

Mira的THINKING MACHINES开源「在线策略蒸馏」LLM后训练方法,结合两种主流后训练范式优点,提升训练效率50 - 100,成本降低9到30,可用于数学推理、模型个性化等场景。

AI寒武纪
算法论文8

谷歌新论文把内存股价干崩了!KV cache压缩6,“谷歌的DeepSeek时刻”

谷歌研究院推出TurboQuant压缩算法,可将AI推理中最吃内存的KV cache压缩至少6且精度零损失,还能8加速计算。虽引发存储芯片巨头股价下跌,但目前只是实验室成果,仅解决推理阶段内存问题。

量子位
新闻资讯7

价格狂飙6!Claude凌晨上线极速模式,网友集体破防:比OpenAI还黑

Anthropic深夜上线Claude Opus 4.6极速模式,速度提升2.5但价格飙6,引发开发者不满。不过Opus 4.6实力强劲,多项评估领先。Fast Mode是市场试探,反映AI行业关注从‘能做什么’到‘多快做到’转变。

新智元
产品应用8

面壁MiniCPM4端侧模型发布:长文本推理 5 提速,0.5B 模型拿下新SOTA

2025智源大会,面壁发布MiniCPM4.0端侧模型,含8B稀疏闪电版与0.5B款。其采用InfLLM架构,实现长文本推理5提速、最高220加速,还在性能、部署等方面优化,适配多芯片与框架。

AI科技大本营
新闻资讯7

92% 工程师都在用 AI 后,Uber 开始给 AI “限额”了

Uber的‘零增长技术栈’解耦容量与业务需求,优化Go运行时性能。还将生成式AI集成开发,92%工程师在用,但成本压力大。为此,Uber限额每位开发者,审查代码效果,完善评估指标。

InfoQ
新闻资讯8

DeepSeek V4 借实习生获奖论文“起飞”?梁文峰剑指上下文:处理速度提 10 、要“完美”准确率

ACL公布2025年获奖论文,中国作者比例超51%。DeepSeek梁文锋通讯、实习生袁境阳一作的论文获Best Paper奖。其提出NSA机制,实验显示性能优、准确率高、速度提升显著,成果或用于DeepSeek V4。

InfoQ
新闻资讯7

谷歌迎来“DeepSeek时刻”!TurboQuant引爆AI圈、全球开发者疯狂复现:6无损压缩,内存股集体暴跌

谷歌研究院发布 TurboQuant 压缩算法,能在提升速度、保持准确性的同时,降低大语言模型内存占用,可将键值缓存压缩至少 6 ,速度最高提升 8 。该技术无需额外训练,精度零损失。目前虽未大规模部署,但已引发内存股下跌。

AI前线