算法论文8
研究重审SFT泛化能力及条件因素
AI科技评论
AI 摘要
上海人工智能实验室等团队研究指出,SFT泛化受优化、数据、模型能力影响,长思维链SFT早期性能‘先降后升’,重复曝光更有效,还会带来安全性能退化,未来应联合优化各因素。
阅读原文 · AI科技评论
重新审视SFT的泛化能力:优化动态、数据与模型能力的条件性分析
上海人工智能实验室等联合研究质疑了‘SFT倾向于记忆,RL实现泛化’观点,指出SFT泛化是条件性现象,受优化动态、训练数据、基模型能力影响,还揭示长思维链SFT会带来安全性能退化。

关注公众号
扫码关注
第一时间收到每日精选
相关文章
产品应用8
Meta推编码框架,低价换开发者数据
Meta推出Muse Code编码框架及Muse Spark 1.2模型,有不同输入输出、功能和性能表现。提供不同档位价格,贡献者档位低价但数据用于训练。测试显示其单任务成本低,Meta此举或为获取编码训练数据。
DeeplearningAI
算法论文8
浙大论文揭露VLM微调真相,给CLIP‘踩刹车’
浙大陈静远教授课题组等提出自适应非对称适配器,放弃对图像分支硬性微调,引入预测置信度自动给视觉塔‘踩刹车’。经实验总结出微调三大核心洞察,在多个数据集测试中表现优异。
AI科技评论
推荐文章8
美图影像研究院:让大众爱上用AI创作
过去两年,AI 生成图片、视频变得容易,但让 AI 理解并按创作者意图创作很难。美图影像研究院过去几年围绕高频创作场景痛点展开研究,11 篇论文被国际顶会接收,成果通过产品落地转化为 AI 影像能力。
机器之心
新闻资讯8
DeepSeek低价风暴席卷硅谷,应用契机将至
DeepSeek V4 Flash掀起价格风暴,全球开发者为之疯狂。海外平台如Nous Portal、Cline等纷纷补贴,其能力大幅提升,价格却极低,让开发者更愿尝试开源模型,AI应用层或迎转机,且DeepSeek Code可能将至。
量子位