云资源管理」共找到 1323 篇相关文章

推荐文章7

逆势降本:上数据平台年复削减30%的治理实践

本文是朴朴科技对上大数据平台成本治理的阶段性总结。其开展成本治理已三年,分“降本增效”三部曲:成本发现与分析、成本优化与控制、体系化治理构建,分享经验,助力同行开展相关工作。

InfoQ
开源动态8

MemOS:一种用于 AI 应用的记忆操作系统

大型语言模型缺乏记忆管理系统,限制其发展。MemTensor与高校联合开源MemOS,它将记忆视为可管理资源,有三层架构,系统化三种记忆类型。评估显示其在推理、检索、加速等方面表现优异。

PaperAgent
产品应用7

网易音乐前 CTO 曹偲:代码越来越不重要,好的架构才是软件工程核心

网易音乐前CTO曹偲推出AI Coding产品Toco AI,旨在将确定性和工程性带入AI Coding。他认为架构决定软件开发上下限,代码会逐渐黑盒化,业务架构更重要且难被AI取代,产品可助力软件开发。

Founder Park
产品应用8

PD 分离推理的加速大招,百度智能网络基础设施和通信组件的优化实践

为适应PD分离式推理部署架构,百度智能从物理网络、网络流量、通信组件和算子层面优化,提升上层推理服务性能,展现了网络、组件与业务特征融合的重要性。

InfoQ
产品应用8

厉害了,智谱造了全球首个手机通用Agent!人人免费,APP甚至直接操控电脑

智谱发布全球首个手机通用Agent AutoGLM,免费且人人可用。它可在端执行任务,不占本地资源,还能操控电脑。能集成到多种载体,上线移动端API申请通道及开发者生态共建计划。

量子位
产品应用8

阿里Tair KVCache仿真分析:高精度的计算和缓存模拟设计与实现

阿里Tair KVCache团队推出Tair - KVCache - HiSim,这是面向分布式多级KVCache管理的高保真LLM推理仿真分析工具。它能在通用CPU上高精度预测性能,支撑计算选型、存储规划和调度协同等决策,还介绍了其架构、组件、验证及性能评估等内容。

阿里云开发者
算法论文8

Agentic RL 后训练资源怎么分?港中文、恒生大学提出 Libra,吞吐最高提升 3 倍

大语言模型走向“完成任务”,Agentic RL 后训练让系统工作负载不稳定。港中文和恒生大学团队提出 Libra 资源管理系统,统一优化训练与 rollout,在多任务中提升吞吐,论文与代码已公开。

机器之心
新闻资讯8

IDC 最新AI Infra报告解读|AI 爆发的背后:AI 应用全球化势不可挡

近期 IDC 发布报告,显示亚太企业 GenAI 应用增长快,AI 产业从开发到应用落地。这催生 AI 原生,GMI Cloud 等新兴厂商崛起。同时,企业面临算力管理成本高问题,推理需求重塑市场格局,为中企出海带来机遇。

InfoQ
产品应用8

Hybrid Model Support:阿里 Tair 联合 SGLang对 Mamba-Transformer 等混合架构模型的支持方案

文章介绍阿里 Tair KVCache 团队与SGLang社区在推理框架上支持混合架构模型的工程化实践。分析混合架构崛起原因、面临挑战,阐述内存管理、关键技术优化方案,验证性能,并指出未来演进方向。

阿里云开发者
产品应用7

容器可观测新视角: SysOM延时监控助力定位业务抖动原因

原生场景下,资源超卖和混合部署使宿主机与容器化应用资源竞争加剧,引发内核级延迟问题。本文结合实战案例,介绍用ack - sysom - monitor Exporter分析定位内核延迟,还介绍了SysOM监控及解决系统延时的方法。

阿里云开发者