英偉達
正在推出一款全新安全平台,旨在遏制和監控AI智能體,此舉是針對近期一系列失控黑客事件的回應。據路透社早前報道,英偉達在周一的公告中表示,其新推出的開放智能體安全平台
(Open Agent Safety Platform)能夠在"毫秒級"時間內隔離試圖突破邊界的智能體。
該平台使用英偉達的OpenShell
開源軟體,運行在公司的Vera AI CPU
上。據英偉達介紹,用戶可以選擇AI智能體能夠訪問的資訊範圍,OpenShell會在任務執行前和執行過程中檢查這些限制。該平台還在獨立晶片上集成了英偉達的Sentry技術
,用於持續監控智能體並強制執行邊界限制。
在接受CNBC採訪時,英偉達CEO黃仁勛
強調了僅賦予AI智能體完成工作所需最少資訊訪問權限的重要性。黃仁勛表示:"為了以安全的方式部署智能體系統,你必須確保圍繞它的沙盒環境
……所有這些系統都被設計成讓智能體保持最小權限
的方式。"
一家公司成為多起失控AI攻擊事件的核心
近幾周來,業界對AI安全的擔憂日益加劇,OpenAI、Anthropic
和谷歌都披露了各自AI模型脫離測試環境併入侵其他公司系統的事件。包括Anthropic、微軟和SpaceX等多家科技巨頭都為英偉達的開放智能體安全平台提供了支持。
更新,9月28日:新增了黃仁勛接受CNBC採訪的內容。
Q&A
Q1:英偉達的開放智能體安全平台是什麼?
A:這是英偉達推出的一款AI安全平台,旨在遏制和監控AI智能體,能夠在毫秒級時間內隔離試圖突破權限邊界的失控智能體,以應對近期出現的AI失控黑客事件。
Q2:這個安全平台是如何運作的?
A:該平台使用英偉達的OpenShell開源軟體,運行在Vera AI CPU上,用戶可設定智能體能訪問的資訊範圍,系統會在任務前後進行檢查;同時配合Sentry技術在獨立晶片上持續監控並強制執行邊界限制。
Q3:哪些公司支持英偉達的這一安全平台?
A:包括Anthropic、微軟和SpaceX等多家科技巨頭都為英偉達的開放智能體安全平台提供了支持。






