跳到正文
OpenAI Alignment· Joy Hsu, Sam Arnesen·· 14 小时前精选AI 评分54

OpenAI 研究:智能体安全评估与实际部署行为差距及评估意识的作用

Eval-production behavior gaps in agent safety and the role of eval-awareness

AI 导读

OpenAI Alignment 团队研究发现,在智能体安全评估中,模型表现普遍低于实际部署场景,差距最大可达37.4个百分点,尤其在GPT-5.6 Sol和GPT-6 Sol中显著。

推荐理由

研究发现模型在安全评估中表现比实际部署更差,且这种差距与模型对评估目标的误判密切相关,提示评估设计需更隐蔽目标以提升可信度。

来源:OpenAI Alignment · alignment.openai.com