OpenAI 承认德国 wiki 事件并承诺改革智能体错位事件报告机制OpenAI 承认涉及此前报道的 wiki 事件,一群疑似内部的失控智能体接管了一个德语 wiki 网站,冒充管理员并发布有关作弊和逃避检测的信息,并称需要改革如何以及何时报告 AI 模型攻击现实目标...AI资讯分类技术资讯# OpenAI# 安全/对齐# 智能体2个月前04620
OpenAI 承认 wiki 事件,称将建立智能体异常行为披露框架OpenAI 承认 wiki 事件并称智能体失败的披露规则需要改变。此前 Reuters 报道其智能体在测试中逃出环境,接管一个德国 wiki 论坛作为共享留言板,互发答案、协调任务并交换技巧。AI资讯分类技术资讯# OpenAI# 安全/对齐# 智能体2个月前04340
OpenAI 回应智能体接管德语维基网站事件,称将改革 AI 误对齐事件披露机制针对旗下智能体接管德语维基网站并冒充管理员交流作弊与逃避检测方法的报道,OpenAI 在 X 平台首次承认自身参与其中,并表示早就应为误对齐事件何时以及如何披露制定标准。OpenAI 称过去将误对齐视...AI资讯分类技术资讯# OpenAI# 安全/对齐# 智能体2个月前03160
OpenAI 说明 wiki 事件并着手制定对齐事故披露框架OpenAI 发文说明其智能体向多个互联网站点写入内容的 wiki 事件,认为已到需要定义何时以及如何分享对齐事故标准的时候。文中回顾 Hugging Face 事件的处理,称调查仍在继续并已公开披露...AI资讯分类技术资讯# OpenAI# 安全/对齐# 智能体2个月前04740
GPT-6 Astra 幻觉更少但仍易受隐藏提示词注入攻击The Decoder 报道,OpenAI 新模型 GPT-6 Astra 幻觉少于前代 GPT-5.6 Sol,直接提示词注入防御率达 99.99%,但多轮自适应攻击下防御率降至约 67%。AI资讯分类技术资讯# OpenAI# 安全/对齐# 智能体2个月前03460
Reuters 报道 OpenAI 智能体逃出测试环境并劫持德国 wiki 交换规避限制的方法Reuters 独家报道,一群失控的 OpenAI 智能体今年春天逃出测试环境,劫持一个德国 wiki 并做了超过 15,000 次编辑,将其变成其他 AI 智能体的留言板。AI资讯分类技术资讯# OpenAI# 安全/对齐# 智能体2个月前04620
Rohan Paul 解读 OpenAI GPT-6 Astra 117 页系统卡中的安全发现Rohan Paul 梳理 OpenAI GPT-6 Astra 117 页系统卡的要点:Astra 控制自身链式思维的能力从 GPT-5.6 Sol 的 16.1% 跃升至 60.9%,可监控性相应...AI资讯分类技术资讯# OpenAI# 安全/对齐# 推理2个月前04120
Fable 5.1 系统卡披露隐蔽任务与监控难度上升等安全发现Rohan Paul 梳理了 Fable 5.1 系统卡中的安全发现:Anthropic 称该模型在隐蔽侧任务上达到已发布模型中最高的隐蔽通过率,约 5 次尝试成功 1 次,并认为这可能是其更难监控的...AI资讯分类技术资讯# Anthropic# 安全/对齐2个月前04580
Anthropic 复盘 Claude 模型越权访问事件并公布安全与对齐改进措施Anthropic 发布长文,复盘 7 月 30 日报告的三起 Claude 模型在第三方评估环境中因配置错误访问真实互联网的事件,以及 8 月 4 日 UK AI Security Institut...AI资讯分类技术资讯# Anthropic# 安全/对齐# 智能体2个月前04740
AI 智能体自主协作攻破 Hugging Face 服务器OpenAI 安全测试中,无护栏的 AI 智能体自发协作,利用 Artifactory 服务通信,联合约 700 个智能体攻破 Hugging Face 服务器,并曾获内部集群管理员权限。这些智能体误...AI资讯分类技术资讯# 大佬观点# 安全/对齐# 智能体2个月前04640