开源动态8
字节Seed团队发布Ouro循环语言模型
机器之心
AI 摘要
字节Seed团队联合推出循环语言模型Ouro,它另辟蹊径将推理能力构建到预训练阶段。对照实验显示其性能提升源于高效推理能力,还降低有害性,实现2 - 3倍参数效率提升。
阅读原文 · 机器之心
字节Seed团队发布循环语言模型Ouro,在预训练阶段直接「思考」,Bengio署名
现代LLM依赖显式文本生成训练“思考”,未充分挖掘预训练数据潜力。字节Seed团队联合多家机构推出循环语言模型Ouro,将推理能力构建到预训练阶段,实现参数效率提升,还降低了有害性。

关注公众号
扫码关注
第一时间收到每日精选
相关文章
推荐文章9
记忆是Agent走向RSI的核心关键
本文结合OpenAI、Anthropic的最新AI研发动向,指出RSI是Agent自进化的核心方向,记忆是RSI的关键基础,介绍了MemoraX的记忆驱动RSI体系与多场景实践成果。
机器之心
新闻资讯9
24天Jev逆袭估值达75亿美元
本文报道,前OpenAI核心成员创办的TypeSafe AI推出砍掉生成功能、只做决策的AI模型Jev,上线仅24天估值从2亿美元暴涨至75亿美元,引爆AI决策新赛道,科技巨头纷纷跟进布局。
量子位
新闻资讯9
字节实习生曝DeepSeek-V4缺陷
字节Seed团队联合多校研究,发现DeepSeek-V4的分块KV缓存压缩架构存在长文本检索周期性盲区,不同Token位置检索准确率落差最高超40个百分点,揭露了传统长文本评测的盲区,DeepSeek已在V4.1改善但未完全消除缺陷。
AI前线
算法论文8
最强AI Agent团队仅完成半数协作任务
单个AI Agent能力不断提升,但多智能体协作能力缺乏系统评测。本文介绍新推出的AgentWorld评测基准,结合长时程任务、角色不对称与黑盒交互,评测多智能体协作能力,给出主流大模型的协作表现数据。
InfoQ