「pre - training」共找到 56 篇相关文章
一文解读 LLM Posting-Train技术
文章解读了大语言模型后训练（Post-training）技术，介绍其核心价值，从微调、强化学习、测试时拓展三方面展开，分析现有技术瓶颈，指出前沿研究方向，还给出实践指南和工具链推荐。
AI音乐赛道单笔最大融资：ACE完成4000万美元Pre-B轮 | 5Y News
AI音乐生成赛道竞争聚焦于‘谁更可控’，ACE团队由郭靖创立，既推出专业音乐制作工具ACE Studio，又面向大众打造Miya平台。公司获4000万美金Pre - B轮融资，欲构建覆盖全流程的音乐平台。
红杉、云启领投，华超神控完成2亿元Pre-A轮融资，押注「非侵入式AI脑机接口」
本文报道初创公司华超神控完成红杉中国、云启资本领投的2亿元Pre-A轮融资，累计融资近3亿元，介绍其非侵入式AI脑机接口技术路线、研发进展与商业化规划，收录多位投资方观点。
Reasoning模型可以Self-Train！
当前大模型依赖人类标注数据，成本高且扩展难。论文探讨模型自我纠错、自主进化可能，提出自我奖励训练（SRT），用投票共识代替人类标注。在数学数据集上有效果，但高难度数据集出现问题，作者给出解决办法并开源代码。
用中等难度prompt做高效post training
近年来，RL后训练在LLM发展中至关重要，但传统方法效率低。本文提出PCL轻量级算法，通过动态选中等难度提示提升LLM后训练效率，经多基准实验验证其优越性，也指出方法局限与未来方向。
首创Mid-training范式破解RL奥秘，Llama终于追平Qwen！
上海创智学院和上海交通大学研究团队深入探讨不同基础语言模型在强化学习训练中的差异，提出中期训练策略，将 Llama 改造成适配 RL 的推理基础模型，缩小与 Qwen 性能差距，还发布了 MegaMath-Web-Pro-Max 数据集。
以星为舵：LLM的Post-Train与Rest-Time奖励学习综述
这篇论文提出奖励信号像AI的“导航星”，引导模型优化行为。介绍奖励学习概念、来源、形式和策略，阐述其贯穿LLM生命周期的三个阶段，探讨奖励模型设计选择，还提及实际应用、挑战与未来方向。
吴恩达推出LLM 后训练免费课程，覆盖三大调优方法：SFT、DPO、RL
吴恩达发布「Post-training of LLMs」课程，由Banghua Zhu主讲，瞄准实用技术，重点介绍SFT、DPO、RL三种后训练方法，有大量动手实验，课程发布后引发热烈讨论。
听说，大家都在梭后训练？最佳指南来了
大模型时代，Scaling Law 边际效益递减，业界转向后训练。《Post-training 101》博客可助初学者入门，涵盖从预训练到指令微调、SFT 原理、多种强化学习技术及模型评测方法等内容。
如何训练VLA？丰田研究院发布史上最大实验规模「保姆级」教程
丰田研究院和清华大学发布教程，用大量数据训练89个策略模型并验证。聚焦Co - training，研究五大模态、三种策略，对比不同架构，揭示有效和无效模态，还探讨CoT推理及多方面实验。