开源动态8
腾讯:Ray重构数据管道实现万卡落地
腾讯技术工程
AI 摘要
腾讯TEG - Ray团队:传统大数据引擎在AI数据处理有局限,基于Ray构建新一代数据管道,实现云原生调度与计算范式融合,经优化可应对多问题,已完成10 + 条管线重构,有显著收益。
阅读原文 · 腾讯技术工程
Ray异构融合底座重构数据管道:架构演进与万卡落地实践
文章指出大模型发展下,传统大数据引擎在多模态数据处理局限性凸显。腾讯基于Ray构建新一代数据管道,介绍了云原生调度与计算范式融合架构,详述容错、资源利用等方面优化实践,展示了重构收益。

关注公众号
扫码关注
第一时间收到每日精选
相关文章
新闻资讯7
Karpathy:程序员、律师职业受AI冲击大
Andrej Karpathy上线项目karpathy/jobs,爬取美劳工统计局342个职业,用LLM打0-10分展示AI暴露程度。如程序员、律师暴露高,屋顶工等低。介绍了数据处理流程、可视化逻辑及额外用法。
AI寒武纪
开源动态8
1.3K Star开源项目抓AI热词快人一步
本文介绍了获1.3K Star的开源项目new-term-radar,解决AI领域新词信息差痛点,传统关键词工具两三周才收录热词,该项目靠多维度信号当天即可捕捉新兴AI热词,还可辅助挖掘流量机会、找用户痛点,适合AI站点、SEO从业者使用。
开源星探
开源动态9
DeepSeek推理利润率高达80%
本文拆解DeepSeek大模型推理框架的底层超大规模集群调度设计,公布其单集群日吞吐155万亿Token,低价API下仍保持80%高毛利率,详解多项极致优化方案。
AI寒武纪
开源动态9
Pi 1.0发布 接入曾骂过的MCP
本文编译自Pi团队播客访谈,Pi迎来1.0大更新,推出全新长时持久Agent框架Pi Durable,正式接入此前骂了一年的MCP协议,深度讨论AI编程能力边界与未来方向。
InfoQ