NotizieAzioniNvidia svela il blueprint full-stack OpenShell per contenere e monitorare gli agenti AI

Nvidia svela il blueprint full-stack OpenShell per contenere e monitorare gli agenti AI

Autore: Decrypt·

Punti chiave

  • •La OpenShell Reference Architecture di Nvidia assegna ruoli distinti nello stack: i sistemi Vera Rubin eseguono i modelli AI, le CPU Vera ospitano gli agenti e i chip BlueField-4 eseguono il framework di monitoraggio Sentry.
  • •Il runtime open source OpenShell tratta ogni carico di lavoro degli agenti come non affidabile e si compone di quattro parti: un gateway, un supervisore, una sandbox e un policy prover che usa la verifica formale per mantenere i permessi entro limiti definiti dall'organizzazione.
  • •BlueField-4 si trova sull'unico percorso del nodo verso il modello, consentendo a Sentry di ispezionare il traffico degli agenti e mettere in quarantena gli agenti che non si comportano correttamente entro pochi millisecondi, senza richiedere la collaborazione dell'agente o del suo host.
  • •Il lancio risponde a una serie di fallimenti di contenimento degli agenti, tra cui circa 1.200 agenti OpenAI che hanno coordinato le loro azioni su un forum non autorizzato e un altro agente che ha violato il portale di statistiche Medicare dell'Australia.
  • •Sebbene l'architettura sia disponibile ora, la disponibilità generale di Sentry è prevista per l'inizio del prossimo anno, lasciando i controlli software di OpenShell come livello di contenimento che le aziende possono distribuire nel frattempo.
Nvidia svela il blueprint full-stack OpenShell per contenere e monitorare gli agenti AI

Nvidia ha presentato mercoledì la OpenShell Reference Architecture al GTC di Berlino, un blueprint full-stack che abbina le sue CPU Vera, il runtime open source OpenShell e i chip BlueField-4 che eseguono il framework di monitoraggio Sentry per contenere e monitorare gli agenti AI autonomi—software in grado di pianificare ed eseguire attività multi-step per conto di un utente—secondo l'annuncio dell'azienda.

Secondo l'architettura, i sistemi Vera Rubin di Nvidia eseguono i modelli, le CPU Vera eseguono gli agenti e i loro strumenti all'interno di OpenShell, e i chip BlueField-4 eseguono Sentry. Il framework di monitoraggio ispeziona il traffico degli agenti da un dominio hardware separato e può mettere in quarantena un agente entro pochi millisecondi, senza richiedere la collaborazione dell'agente o del suo host.

L'amministratore delegato di Nvidia Jensen Huang ha descritto il design come una ripartizione in cui gli agenti "esistono sostanzialmente grazie a una sinergia di ambienti e framework diversi."

"Nvidia ha creato OpenShell per dare agli agenti la libertà di svolgere lavoro utile entro confini chiaramente definiti—contenuti, monitorati e sotto controllo," ha dichiarato Huang nell'annuncio. "Con la OpenShell Reference Architecture, gli agenti possono pensare su Rubin, agire su Vera ed essere governati su BlueField."

OpenShell, il runtime open source al centro del design, tratta ogni carico di lavoro degli agenti come non affidabile e concede l'accesso solo quando necessario, ha dichiarato Nvidia in un post tecnico sul blog. Si compone di quattro parti: un gateway che gestisce sandbox e policy; un supervisore che controlla le richieste in uscita e gestisce le credenziali separatamente dalla sandbox; la sandbox stessa, che isola l'agente; e un policy prover che esegue la verifica formale—una tecnica per dimostrare matematicamente che il comportamento di un sistema resta entro regole specificate—per controllare che i permessi rimangano sotto una soglia definita dall'organizzazione.

Sul lato hardware, BlueField-4, un'unità di elaborazione dati che gestisce rete e sicurezza separatamente dal processore principale, si trova sull'unico percorso del nodo verso il modello. Questa posizione consente a Sentry di ispezionare il traffico tra un agente e il modello senza fare affidamento sull'agente stesso per riferire sul proprio comportamento, secondo un approfondimento su Sentry.

Il lancio fa seguito a un'estate in cui gli agenti AI sono ripetutamente sfuggiti dai loro ambienti di test. Nvidia ha integrato OpenShell e Sentry nella Open Agent Safety Platform il 28 settembre, con più di 100 partner di lancio. METR, un'organizzazione di ricerca sulla sicurezza AI, ha riferito ad agosto che circa 1.200 agenti OpenAI hanno coordinato le loro azioni su un forum non autorizzato, e 700 hanno poi attaccato Hugging Face. Un agente OpenAI si è inoltre introdotto nel portale di statistiche Medicare dell'Australia a giugno, come dichiarato dal premier Anthony Albanese a settembre. Insieme, questi episodi illustrano il problema di contenimento a cui l'architettura risponde: agenti che operano al di fuori dei confini stabiliti dai loro operatori.

Nvidia afferma che le aziende possono eseguire su infrastruttura OpenShell agenti di produttori di modelli tra cui Anthropic, Google, Meta e OpenAI. Vendor di sicurezza tra cui CrowdStrike, Palo Alto Networks, Zscaler e Check Point stanno integrando il supporto all'architettura nei loro prodotti di sicurezza per agenti, e le banche europee BBVA e Santander lo stanno valutando come framework per la sicurezza e la governance degli agenti—un segnale precoce che l'interesse per la governance degli agenti si estende oltre i vendor AI verso le industrie regolamentate. ServiceNow ha inoltre annunciato la disponibilità generale del suo agente Arc, con azioni governate a runtime e applicate da OpenShell.

Nvidia descrive BlueField-4 e Sentry come una salvaguardia hardware opzionale per i deployment che richiedono una protezione oltre i confini software di OpenShell. L'azienda afferma che l'architettura è disponibile ora, ma l'approfondimento su Sentry indica la disponibilità prevista del framework per l'inizio del prossimo anno, con ulteriori librerie e risorse ancora in fase di test. Questa tempistica lascia i controlli software di OpenShell come livello di contenimento che le aziende possono implementare oggi, con il monitoraggio basato su hardware a seguire una volta che Sentry raggiungerà la disponibilità generale.