「未对齐行为」共找到 1130 篇相关文章
来自 Manus 的一手分享:如何构建 AI Agent 的上下文工程?
Manus 公司联合创始人季逸超分享为 Manus 搭建上下文工程的经验。文章探讨构建 AI 智能体时的关键抉择,给出围绕 KV - Cache 设计、通过掩码约束行为等构建原则,助开发者少走弯路。
卡帕西删除Anthropic简介,入职68天疑似已离职
网友发现大神Andrej Karpathy修改X个人简介,删除Anthropic相关工作信息,离职传闻发酵。卡帕西加入Anthropic 68天风波不断,恰逢黄仁勋发起“开放权重联盟”,Anthropic未签署,让离职猜测更甚。
王阳明心学,被Anthropic用来教Claude做人了
UT Austin哲学教授Harvey Lederman研究王阳明心学十年,现加入Anthropic做Claude对齐训练。他用分析哲学拆解“知行合一”,发现AI模型存在“信念冲突”,Anthropic用类似阳明心学方法解决问题。如今硅谷AI公司争抢哲学家。
「熟悉的陌生人」才是「好老师」?复旦提出简单指标,找出推理蒸馏中真正有教学价值的数据
复旦大学和上海人工智能实验室研究者提出 Rank - Surprisal Ratio (RSR) 度量方法,综合考虑样本信息量与对齐程度,在蒸馏实验中与学生模型后训练性能相关性高,可用于筛选推理轨迹和选择教师模型。
第 4 章 Agent 开发实战
本章面向理解大模型、会 Python 但未系统搭建过 Agent 的工程师,采用「概念 → 最小示例 → 可运行项目」结构,介绍 Agent 开发实战,涵盖 LCEL 拼装、工具暴露等内容,还说明了开发环境搭建方法。
啊?猫猫也会老年痴呆
《欧洲神经科学杂志》新研究表明,老年猫大脑会积累淀粉样蛋白β斑块,可能导致痴呆样行为。研究成果或助开发猫痴呆症疗法,也为人类阿尔兹海默症提供新见解。
图灵奖得主 Yoshua Bengio 智源大会最新演讲:关于AI,我改变了信念,也改变了研究方向
2025年6月6日,图灵奖得主Yoshua Bengio在第七届智源大会发表演讲。他目睹前沿AI行为演化后深感警觉,决定调整科研方向以降低AGI潜在风险,还分享AI“求生”案例,提出构建“科学家AI”新理念。
如何塑造软件公司的工程文化
David Grizzanti 在演讲中提出塑造软件公司工程文化的方法,认为应像人类学研究般先了解文化,明确行为奖惩区间,再通过建立新规范、以身作则逐步转变文化,还分享运用人类学思维理解文化的方式。
他发明了价值万亿的AGI,如今穷困潦倒
1997年,马克·古布鲁德首提AGI概念,警告技术突破对国际冲突的影响。如今AGI成巨头博弈焦点,价值万亿,但他未获名利仍清贫。他呼吁遏制AI军备竞赛,提醒别让技术失控。
全球首例!科学家将腿部肌肉线粒体注入盲人眼球,瞳孔光反射短暂恢复
对于视神经严重受损致盲,临床缺有效修复手段。美国研究人员从失明女性腿部肌肉提取线粒体注入其双眼,初步验证了自体线粒体眼内移植的安全性,患者眼部有生理变化,但未恢复视力,实验疑问多。