「专家并行性」共找到 1190 篇相关文章

开源动态7

DeepSeek悄悄开源LPLB:用线性规划解决MoE负载不均

昨天,DeepSeek 在 GitHub 上线新代码库 LPLB 解决 MoE 负载不均。它利用线性规划算法优化专家并行工作负载分配,能处理动态波动,但也存在忽略非线性成本等局限,对 MoE 架构训练加速有参考价值。

机器之心
开源动态8

TinyAI :全栈式轻量级 AI 框架

TinyAI是用Java实现的全栈轻量级AI框架,具有教育友好、模块化等特点。它分层设计,涵盖数学运算、神经网络等模块,支持多种模型架构与并行训练,还有智能体系统,可用于多领域,未来规划丰富。

阿里云开发者
新闻资讯8

2026 奇点智能技术大会上海站来袭,解码AI Agent、世界模型与氛围编程等新范式

2026奇点智能技术大会·上海站4月17 - 18日召开。AI正成变革性力量,此次大会升级聚焦AI规模化落地,设十二大专题,有多位出品人与演讲嘉宾带来实践经验与技术洞察,还开放合作与分享者申请。

AI科技大本营
新闻资讯8

奥数金牌只是序章!OpenAI谷歌彻底打脸预言家,AI巨浪势不可挡

2022年专家预言AI到2025年赢得IMO金牌概率低,结果OpenAI和谷歌DeepMind的LLM提前摘金。此前多项AI基准测试预测也失准,AI发展远超预期。GPT - 5降低使用门槛,群体智能时代到来,各机构需重新思考生存之道。

新智元
新闻资讯7

架构彻底重构!DeepSeek新模型代码曝光,要来的V4让国内外都坐不住了?

DeepSeek官方GitHub代码库曝光代号“MODEL1”新模型线索,或为V4内部代号。代码显示其有重大架构变更,能并行处理稀疏与稠密计算,适配英伟达新架构。此前R1发布推动中国AI开源生态发展,新模型备受期待。

InfoQ
算法论文8

小模型用不好Skill?新范式让模型学会Skill的底层逻辑,3B模型推理token省5倍,性能反超

浙江大学联合美团龙猫团队、清华大学推出SKILL0,提出技能内化思路。它在训练中引入关键机制,让小模型把技能内化到参数里。实验显示,其效果出色,token效率高,为小模型成领域专家提供新方向。

量子位
新闻资讯8

从“能用”到“敢用”:企业级 AI 落地的终极答案 | AICon 2025 收官

12月19 - 20日AICon 2025大会落幕,众多企业专家参与,探讨企业级AI落地。InfoQ王一鹏谈AI落地趋势与流畅度构建;大会发布「2025中国技术力量年度榜单」,多位嘉宾演讲分享AI见解,还有17个分论坛和合作展区。

InfoQ
新闻资讯7

马斯克的底裤要被扒光了!超级爆料一个多小时, xAI 工程师被火速解雇

xAI工程师Sulaiman Ghori在播客大赞公司与马斯克,3天后却被解雇,或因曝光诸多敏感信息。他讲述公司无官僚流程、多线并行高效,马斯克决策快且能快速解决问题,公司还测试虚拟员工等。

InfoQ
新闻资讯8

MiniMax M2 发布即爆,拿下开源模型第一名

10月27日,MiniMax发布新一代文本大模型M2及由其驱动的MiniMax Agent。M2是专家混合模型,参数达230B但激活仅10B。它在开源模型评测中夺冠,能低成本、高速度支撑工作流,开发者评价高。

MacTalk
新闻资讯7

纽约时报:AI会冲击谁的就业?年轻人还是资深员工?

在微软等科技公司裁员浪潮中,专家就AI会冲击谁的就业展开辩论。有人认为职场新人易被取代,也有人觉得资深员工更脆弱。不同研究指向不同结果,且一些公司已减少招聘初级或资深员工。

宝玉AI