Tillbaka till Nyheter
SäkerhetAI Understanding genomgång

Nvidia avslöjar Open Agent Safety Platform när VD trycker tillbaka på AI-domerism

Nvidia tillkännagav en full-stack Open Agent Safety Platform för att stävja oseriösa AI-agenter, medan VD Jensen Huang offentligt avfärdade existentiella AI-riskberättelser.

4 min readRead the original reporting
Source-provided image accompanying Nvidia unveils Open Agent Safety Platform as CEO pushes back on AI doomerism
Tillskriven rapporteringKälla inspelad
Förläggare
fortune.com
Källlänk
fortune.comhttps://fortune.com/2026/10/04/nvidia-jensen-huang-ai-doomerism-foil-risk/
Källtyp
Rapportering från ett nyhetsställe – inte ett förstapartsdokument.

Vad vi inte kunde bekräfta oberoende: Detta påstående hänförs till det namngivna försäljningsstället. Vi har inte verifierat det mot ett förstapartsdokument. (fortune.com)

SammanhangFörstå detta på 60 sekunder

Börja här

Nyckeltermer

AI-styrning
Policyer, standarder och tillsynsmekanismer som styr hur AI utvecklas och används i samhället.
AI säkerhet
Ett område fokuserat på att minska skadligt beteende, misslyckanden och missbruksrisker i AI-system.
Beräkna
Bearbetningsresurserna som krävs för att träna och köra modeller, ofta mätt i FLOPS- eller GPU-timmar.
Testa dig självAI Etik Quiz

Vad hände

Nvidia rullade ut sin Open Agent Safety Platform, ett fullstacksystem utformat för att hindra AI-agenter från att överskrida sina auktoriserade gränser. Plattformen kombinerar två teknologier – OpenShell, som isolerar agenter från filer, verktyg, nätverk och autentiseringsuppgifter, och Sentry, en DP-U-baserad monitor som kan placera felaktigt beteende i karantän på millisekunder. Lanseringen tillkännagavs vid en mediagenomgång, där Nvidia:s VP för företagsdatorer, Justin Boitano, sa att systemet kunde ha förhindrat senaste högprofilerade incidenter med skurkagenter. Parallellt rapporterade Fortune att VD Jensen Huang har varit högljudd i att avvisa "AI doomerism", kallat påståenden om ett existentiellt hot "0% chans" och uppmanat tillsynsmyndigheter att fokusera på konkreta skador snarare än spekulativa scenarier.

På en mediebriefing introducerade Nvidia Open Agent Safety Platform, och beskrev den som en "full-stack"-lösning som sträcker sig över testning, driftsättning och körtidsövervakning av AI-agenter. OpenShell-komponenten skapar sandlådemiljöer som begränsar agenters åtkomst till kritiska resurser som filsystem, nätverksgränssnitt, referenser och externa verktyg. Sentry körs på Nvidia:s databehandlingsenheter (DPU) och övervakar kontinuerligt agentaktivitet, och sätter automatiskt alla processer i karantän som försöker överträda dess definierade mjukvarugräns.

Justin Boitano, Nvidias vicepresident och general manager för företagsdatorer, hävdade att plattformen kunde ha stoppat det senaste hacket på Hugging Face som involverade OpenAI-modeller, även om denna bedömning inte har verifierats oberoende. Företaget positionerade plattformen som ett svar på en ökning av rapporterade incidenter med falska agenter från stora AI-företag, inklusive OpenAI, Google och Anthropic.

I samma bevakning lyfte Fortune fram Jensen Huangs senaste intervjuer där han avfärdade förutsägelser om att AI skulle kunna orsaka mänsklighetens utrotning. Huang hävdade att beslutsfattare borde reglera "faktisk och pragmatisk skada" snarare än spekulativa science-fiction-scenarier, och likna AI-utvecklingen med utvecklingen av bilar som blir säkrare med tiden.

Källinformation: fortune.com ↗

Varför det spelar roll

Plattformen markerar Nvidia:s första dedikerade, offentligt tillkännagivna svit för AI-agentsäkerhet, som tar itu med en växande våg av incidenter där autonoma agenter har kommit åt eller läckt data. Genom att erbjuda isolering (OpenShell) och realtidsövervakning (Sentry), syftar Nvidia till att ge företag ett verktyg för att upprätthålla strikta säkerhetsgränser för gränsmodeller, vilket potentiellt minskar ansvar och regulatorisk granskning. Utrullningen signalerar också Nvidia:s strategiska positionering: att koppla säkerhetslösningar med dess kärnverksamhet för GPU kan driva ytterligare efterfrågan på chip när kunderna tar till sig plattformen. Huangs offentliga avfärdande av existentiella riskberättelser kan påverka politiska debatter, styra tillsynsmyndigheter mot pragmatiska riskramar snarare än spekulativa förbud, vilket kan påverka takten i utvecklingen av AI och investeringar.

Lanseringen åtgärdar direkt en kritisk lucka i AI-styrning: tekniska kontroller som kan upprätthålla säkerhetspolicyer för autonoma agenter. När modellerna blir mer kapabla ökar risken för oavsiktliga åtgärder – dataexfiltrering, identitetsstöld eller systemavbrott – vilket gör sådana kontroller allt viktigare för efterlevnad och riskhantering.

Genom att integrera säkerhetsfunktioner i sitt hårdvaruekosystem skapar Nvidia en potentiell ny intäktsström som utnyttjar sin dominerande ställning inom AI-beräkning. Företag som redan köper Nvidia GPU:er kan vara mer benägna att använda en paketerad säkerhetslösning, vilket påskyndar chipförsäljningen kopplad till säkerhetsarbetsbelastningar.

Huangs offentliga ställning mot AI-domerism kan forma policyberättelsen. Om tillsynsmyndigheter lyssnar på hans uppmaning om "pragmatisk" riskbedömning, kan framtida AI-föreskrifter fokusera på konkreta säkerhetsstandarder (t.ex. sandboxning, övervakning) snarare än breda förbud, vilket bevarar farten för AI-innovation samtidigt som verkliga hot hanteras.

Interactive Mechanism

Interaktiv mekanism: hur det faktiskt fungerar

Utforska den underliggande tekniken bakom denna utveckling interaktivt.

Agent Lifecycle Stage:
1
User Intent & Planning: "Audit customer refund request #4092 and settle payment."
2
Tool Calling: Emits structured JSON call crm_get_transaction(id='4092').
3
Guardrail & Verification:🛡️ Paused: High-value action requires human operator sign-off.
4
Final Settlement: Refund recorded, email receipt dispatched, and audit log stored.
Core takeaway: An AI agent is not just a language model—it is a closed loop of planning, tool invocation, and environment feedback. Production systems require self-healing retries and strict human approval guardrails.
Interaktiv konceptkontroll+10 Points
AI Ethics Quiz

Why can ethical evaluation not be reduced to one model score?

Vad du ska titta på härnäst

Viktiga indikatorer att övervaka inkluderar: (1) användningsfrekvenser för Open Agent Safety Platform bland molnleverantörer och företags AI-labb; (2) eventuella annonserade pris- eller licensvillkor, som Nvidia inte har avslöjat; (3) regulatoriska svar på Huangs uttalanden, särskilt eventuella G20 eller USA:s policyförskjutningar mot kriterier för "pragmatisk skada"; och (4) efterföljande incidentrapporter för att se om plattformen bevisligen förhindrar intrång i falska agenter.

Användningsstatistik: Nvidia kan släppa användningsstatistik eller fallstudier som visar hur tidigt kunder använder OpenShell och Sentry. Ett högt utnyttjande skulle validera marknadens efterfrågan på inbyggda säkerhetskontroller.

Prissättning och licensiering: Företaget har inte avslöjat kostnadsstrukturer. Prissättningsmodeller – oavsett om det är per-GPU, per agent eller prenumeration – kommer att påverka tillgängligheten för nystartade företag jämfört med stora företag.

Regulatorisk påverkan: Håll utkik efter uttalanden från G20, amerikanska myndigheter eller andra regeringar som hänvisar till Huangs kommentarer, vilket kan påverka kommande säkerhetsriktlinjer för AI.

Effektivitetsbevis: Oberoende säkerhetsforskare kan testa plattformen mot kända scenarier för oseriösa agenter för att bekräfta Nvidia:s påstående att den kunde ha förhindrat senaste intrång.

Relaterade guider och frågesporter

AI-etikAI-agenterAI:s framtidTesta vad du vet – prova ett gratis AI-quizSlå upp en AI-term i vår ordlistaFölj AI-regleringen
Hittade du detta användbart?