长时稳定性」共找到 1301 篇相关文章

算法论文8

LLM算力告急?把文本变图片,推理成本直接减半!

大型语言模型处理文本计算成本高,本论文探索‘文本即图像’输入压缩策略,将文本渲染为图像输入多模态模型,可减少近一半令牌,且任务性能不受显著影响,在多任务中验证了其有效性。

深度学习自然语言处理
算法论文8

字节Seed提出M3-Agent:像我们一样"记住"与"思考"的视频理解新范式

字节Seed提出M3 - Agent,这是首个融合实视听输入、类人记忆构建与自主推理的多模态智能体。它模仿人类记忆机制,解决视频理解痛点,已被CVPR 2025收录并开源代码,为通用人工智能奠定基础。

深度学习自然语言处理
开源动态8

不用额外缓存!英伟达开源大模型记忆压缩方案,128K上下文提速2.7倍

英伟达联合多机构推出TTT - E2E方法,在文本处理上提速显著且性能不打折。它基于标准Transformer,将文本建模转为「持续学习」任务,核心是上下文压缩,避免额外缓存,代码和论文已开源。

量子位
算法论文7

1/3预算跑平 GPT-5?上海AI Lab「路由魔法」成本直降63%性能反涨 7%!

当前大模型需解决性能与效率平衡问题,GPT - 5用测试路由技术初步平衡。Avengers - Pro测试路由框架集成不同LLMs,通过嵌入、聚类、评分操作,调整权衡参数α,能依查询特征选模型,性能和效率优于单一模型。

CourseAI
算法论文8

大模型推理上限再突破:「自适应难易度蒸馏」超越R1蒸馏,CoT语料质量飞升

本文从中兴通讯无线研究院「大模型深潜」团队切入,介绍了首创的「LLM自适应题目难度蒸馏」方法,该方法围绕「模型 - 数据动态匹配」提出了一条完整的CoT构建流程,显著提升了CoT语料的质量。

机器之心
算法论文8

腾讯发布SpecExit算法,无损压缩端到端加速2.5倍!解决大模型思考效率难题

腾讯发布 SpecExit 算法,将思考早停与投机采样融合,利用轻量级草稿模型预测“退出信号”,在不引入额外探测开销的前提下,实现动态、可靠的思考早停,在 vLLM 上推理端到端加速 2.5 倍,准确性和推理效率得到双重保障。

机器之心
开源动态7

可从表复杂文档中提取结构化数据的Python库agentic-doc,支持100+页PDF文档

LandingAI的Agentic文档提取API可从复杂文档提取结构化数据,Python库agentic-doc封装该API,支持100+页PDF文档,有自动重试、并行处理等功能,还能可视化调试。

GitHubStore
产品应用8

32倍加速,58秒搞定720p视频!字节发布离散自回归框架,统一视觉生成和视频生成

字节发布InfinityStar框架,将5秒720p视频生成间从30多分钟缩至58秒,还支持多样任务。它基于对视频本质思考设计空金字塔模型,将空分离,通过多项技术优化,性能表现出色,不过也存在一些技术局限。

AIGC开放社区
算法论文8

8B模型可以超过GPT-4o!并行KV Cache压缩支持的128K度外推方法ParallelComp

大模型文本推理存在瓶颈,作者提出 ParallelComp 方案。它有并行 Attention 分块、KV 缓存智能淘汰与注意力偏差校准三大创新,能让 8B 模型性能达 GPT - 4o 的 91.17%,特定任务超 GPT - 4o。

机器之心
算法论文8

Anthropic:上下文工程在AI Agents的正确打开方式!

在‘提示工程’后,‘上下文工程’成焦点。它是提示工程延伸,因信息过多模型会‘失焦’,上下文是稀缺资源。文章介绍高效上下文‘解剖学’、运行检索策略、周期任务应对方法等。

PaperAgent