打造 AI 网安“红队”:OpenAI 介绍内部漏洞检测模型 GPT-Red

浏览31次 点赞0次 收藏0次
感谢网友 Nuc_F 的线索投递!

7 月 16 日消息,OpenAI 当地时间 15 日介绍了其内部使用的网络安全“红队”模型 GPT-Red。该模型可自动化地进行各种网络攻击模拟,帮助 OpenAI 提升对外模型产品的鲁棒性。

OpenAI 表示,其过去半年自 GPT-5.3 后的每个生产模型均将“红队”模型用于训练。伪造思维链型攻击的成功率已从 GPT-5.1 上的 95% 降低至最新模型上的不足 10%;最新的 GPT-5.6 Sol 在 GPT-Red 的直接提示符注入攻击中失败率仅有 0.05%。

GPT-Red 使用自博弈强化学习进行训练:其本身和一组不同的防御型 LLM 在广泛的红队场景上同时进行训练。GPT-Red 因成功诱发有效失败而获得奖励,而防御型模型则因抵抗攻击并完成其原始任务而获得奖励。随着防御型模型变得越来越强大,GPT-Red 被迫发现更强大、更多样化的攻击。

“红队”模型与产品模型相隔离。OpenAI 相信其已开启了良性的人工智能网络安全循环,可利用现有模型来增强未来模型的鲁棒性、一致性、可信度。

声明:本文转载自IT 之家,转载目的在于传递更多信息,并不代表本社区赞同其观点和对其真实性负责,本文只提供参考并不构成任何建议,若有版权等问题,点击这里查看更多信息!本站拥有对此声明的最终解释权。如涉及作品内容、版权和其它问题,请联系我们删除,我方收到通知后第一时间删除内容。

点赞(0) 收藏(0)
0条评论
珍惜第一个评论,它往往能得到较好的回响。
评论
游客
游客
登录后再评论
  • 鸟过留鸣,人过留评。
  • 和谐社区,和谐点评。
最新资讯