AI360
资讯
首页
专栏
快讯
应用中心
API 平台
#
形式化验证
7 篇相关内容
相关话题
AI安全
定理证明
大语言模型
强化学习
神经网络
可信AI
开源工具
人机交互
对抗鲁棒性
神经网络安全
理论框架
自主系统
强化学习策略验证研究全景:从形式化方法到概率保证
随着强化学习在安全关键领域的广泛应用,神经网络策略缺乏行为保证成为主要障碍。本综述首次建立统一框架,系统梳理验证方法并揭示理论关联。
a
arXiv
·
5 小时前
强化学习
AI安全
形式化验证
神经网络
a
OpenProver发布:基于LLM的交互式定理证明系统,集成Lean 4验证
研究人员推出开源系统OpenProver,采用LLM驱动与Lean 4形式化验证结合的自动定理证明架构,支持人机交互式证明搜索。
a
arXiv
·
8 天前
定理证明
大语言模型
开源工具
形式化验证
a
多层感知机对抗鲁棒性:基于格遍历的区间认证新框架
研究提出将AI安全中的对抗鲁棒性问题转化为格遍历问题,为多层感知机提供完备的区间认证理论框架。
a
arXiv
·
8 天前
对抗鲁棒性
形式化验证
神经网络安全
AI安全
a
运行时自主管理新框架:为单/多智能体系统引入齿轮化安全控制机制
研究人员提出一种名为“齿轮化执行”的运行时自主管理系统,通过五档执行模式与事件驱动回退机制,为缺乏持续人工监督的自主智能体提供安全保证。该系统在UR5机器人装配单元实验中实现99.6%异常检测率,并提供形式化物理空间安全证书。
a
arXiv
·
19 天前
自主系统
运行时安全
多智能体系统
机器人控制
a
超越编译:自然语言到Lean形式化语句的忠实性评估新方法
研究团队提出新评估协议,揭示自然语言到Lean形式化过程中存在显著语义偏差,工具增强代理虽达89.5%编译率,但仅60.5%忠实度。
a
arXiv
·
20 天前
定理证明
形式化验证
Lean
语义评估
a
HyPOLE:基于超属性指导的多智能体强化学习新框架
研究人员提出HyPOLE框架,利用超属性规范指导部分可观测环境下的多智能体强化学习,在多个基准测试中表现优于基线方法。
a
arXiv
·
20 天前
多智能体强化学习
形式化验证
部分可观测
HyperLTL
a
大模型与求解器协作中的“叙述鸿沟”:安全风险与缓解策略
研究发现,大模型与形式化求解器协作时,求解结果向用户输出的“叙述”环节存在安全漏洞,可能导致已验证结论被恶意篡改。
a
arXiv
·
31 天前
大语言模型
形式化验证
安全漏洞
提示注入
a