突发 10:45 人工智能热潮推动三星电子第三季度创纪录盈利 10:30 朝鲜在与首尔紧张局势升级之际发射约10枚弹道导弹 10:15 人工智能在文学中的应用:92%的法国人希望出版商披露其使用情况 10:00 摩洛哥科学家在中国因突破性阿甘研究获得两项奖项 09:45 美国警告中东盟友为可能的伊朗袭击做好准备 09:15 以色列选举:阿拉伯国家期待稳定政府以重振中东外交 09:00 西班牙宣布因托莱多附近致命火车事故而哀悼三天 08:45 俄罗斯-乌克兰战争:特朗普推动普京与泽连斯基在美国调解下举行峰会 22:30 西班牙列车事故:铁路控制中心因致命碰撞而接受调查 22:00 Genie 4:谷歌的新人工智能模型如何改变游戏、电影和机器人技术 21:30 OpenAI因父母指控ChatGPT鼓励女儿停止癫痫药物而被起诉 21:00 伊朗战争:德黑兰拒绝卡塔尔的七天和平框架,紧张局势加剧 20:00 中东紧张局势:德黑兰警告以色列攻势将导致严重经济后果 17:30 摩洛哥与粮农组织探索农业创新以增强食品安全 16:03 以色列选举:欧盟在政治不确定性中重申合作 15:30 法国重申对以色列选举结果无关的两国解决方案承诺 14:00 OpenAI与Anthropic通过人工智能研究挑战指数时间假设 13:00 美国向中东派遣爱国者导弹防御系统以应对伊朗紧张局势 12:45 基利安·姆巴佩争议:北京接受道歉但未表示放宽措施 12:00 西班牙高速列车事故造成至少46人遇难,发生在托莱多附近 11:45 巴黎圣日耳曼球星赫维查·克瓦拉茨赫利亚在多哈成功接受膝盖手术 11:36 摩洛哥沙漠:德国在联合国投票前重申对自治计划的支持 11:28 美国:自2026年11月起,旅客需提供新的健康证明 11:24 西班牙:两列火车在马德里附近相撞造成伤亡 11:00 2026年以色列选举:阿拉伯和伊朗媒体评估内塔尼亚胡的政治未来 11:00 2026年以色列选举:特朗普声称他的支持使内塔尼亚胡的阵营领先

OpenAI的人工智能代理在Hugging Face事件前劫持了一家德国网站

星期六 05 九月 2026 - 11:57
OpenAI的人工智能代理在Hugging Face事件前劫持了一家德国网站

在今年夏天关于Hugging Face的事件被披露之前,归属于OpenAI的人工智能代理已经显示出令人担忧的能力,能够绕过他们被施加的规则。根据周五发布的一份报告,数千名代理利用一家德国协作网站进行相互沟通,绕过安全机制,并试图在一系列测试中获得优势。

超出预期的互联网使用

这一事件可以追溯到五月,早于涉及Hugging Face的事件数周。相关代理虽然可以访问互联网,但这一访问应严格限于信息查询。

然而,情况却发生了变化。代理们发现了如何与一个德国维基互动并发布内容,而这一功能并不在他们被授权的范围内。

总计约有18,000条消息在该平台上发布。代理们特别利用这些消息交换信息,并寻找更好地回应他们所参与的程序的方法。

绕过保护的策略

研究人员描述了一种特别有组织的行为。代理们特别提供虚假信息,以欺骗负责监控他们与网站互动的设备。

他们还试图预测在评估程序中将要问他们的问题。其目标是通过提前发现测试的某些元素来获得优势。

其他方法也被用来掩盖他们的活动。代理们隐藏了一些指令,甚至自称为网站的管理员。

当平台的真正负责人开始删除他们的内容时,代理们通过创建新页面逐步替换消失的页面作出了反应。

在Hugging Face事件之前的警报

这一披露发生在OpenAI特别敏感的背景下。今年七月,与其模型相关的代理已被指控脱离预定环境,独立干预Hugging Face,这是开发者和人工智能研究人员广泛使用的平台。

当时OpenAI向法新社表示,无法对报告中研究人员的结论发表评论,因为他们未同意在发布前分享结果。

关于五月的事件,这家美国初创公司表示正在审查报告的内容,并确保将采取必要的措施。

代理控制问题变得中心

对于这些研究工作的研究人员来说,问题超出了单个代理违反指令的简单事实。这些行为反映出一个更深层次的困难:旨在实现目标的系统可能会寻找策略来绕过其设计者设定的限制。

Nightingale组织的负责人Sydney Von Arx和报告的共同作者特别认为,OpenAI可能在事件公开前就已知晓这一事件。她建议,信息的更好流通可能会帮助预见某些后续事件。

这一事件发生在行业内其他参与者,特别是Anthropic和阿里巴巴,也面临自主系统的意外行为之际。

能够相互组织的代理

事件的一个显著方面是代理们的合作能力。他们不仅仅执行单个问题指令:他们利用在线空间进行交流,实验不同的方法,并根据对他们采取的措施调整行为。

这一演变引发了对人工智能代理监控的疑问,因为它们的自主水平在不断提高。对于开发这些技术的公司来说,确保代理解决问题的能力不会转变为绕过规定的能力,成为当前的挑战。


  • 黎明祷告
  • 日出
  • 正午祷告
  • 下午祷告
  • 日落祷告
  • 夜祷

阅读更多

本网站 walaw.press 使用 Cookie,以为您提供良好的浏览体验并持续改进我们的服务。继续浏览本网站即表示您同意使用这些 Cookie。