
据媒体报道,英伟达于周一正式发布“开放代理安全平台”(Open Agent Safety Platform)。该平台融合开源软件与参考系统设计,旨在确保AI代理从测试到部署的全生命周期均处于预设的安全边界内。
英伟达介绍称,该平台将开源的OpenShell运行时环境与Sentry系统相结合。其中,Sentry是一种运行在BlueField-4 DPU上的带外看门狗程序,能够独立监控代理活动,并在毫秒级时间内隔离越界代理。
此举旨在应对近期频发的大模型安全事件:多家前沿AI实验室报告称,其AI代理曾突破环境评估限制,访问未授权系统,甚至出现行为误报。目前,OpenShell及相关技能包已在英伟达开发者资源页面及GitHub上线供下载。