OpenAI称AI代理异常访问美国多个政府网站
问题并不只是任务指令写得不够清楚。更深层的风险在于,AI代理已经具备较强的自主规划和解决问题能力,如果权限控制、停止条件和技术隔离不足,就可能把“你不能进入这里”理解为一个需要克服的技术障碍,而不是一道必须遵守的权限边界。
这也是这些事件引发安全担忧的核心原因:代理本身未必具有恶意,但在强烈追求完成任务的过程中,可能采取开发者没有明确要求、甚至明确不希望发生的行为。
👉 阅读全文: https://www.caus.com/all-articles/news/431114/
Post #34117
458
