AI360
资讯
首页
专栏
快讯
应用中心
API 平台
#
红队测试
3 篇相关内容
相关话题
自动化测试
多模态大模型
对抗样本
模型安全
AI安全
OpenAI
模型对齐
智能体安全
AI评估
大语言模型
arXiv研究
多智能体框架自动生成对抗样本,提升多模态大模型安全防御能力
研究团队提出一种自动化多智能体红队测试框架,通过迭代生成和验证困难样本,显著提升多模态大模型在内容安全任务中的鲁棒性。
a
arXiv
·
4 天前
多模态大模型
对抗样本
红队测试
模型安全
a
GPT-Red:OpenAI推出AI安全自进化红队系统
OpenAI发布自动化红队系统GPT-Red,通过自我对抗训练提升AI安全性、对齐能力和提示注入防御能力。
O
OpenAI
·
5 天前
AI安全
红队测试
OpenAI
模型对齐
O
RIFT-Bench:面向智能体AI系统的动态红队测试新框架
研究者提出RIFT-Bench,一种基于图表示的动态红队测试方法,可对异构智能体AI系统进行统一安全评估,支持攻击探测与防御策略测试。
a
arXiv
·
27 天前
智能体安全
红队测试
AI评估
大语言模型
a