Pada si Iroyin
ÀàbòAI Understanding finifini

AWS benchmark ri AI vulnerability aṣawari flag ailewu koodu

Iranlọwọ Net Security ṣe ijabọ pe AWS ṣe idanwo awọn awoṣe AI 12 lori itọkasi ti a ṣe apẹrẹ lati ṣe iyatọ awọn ailagbara ti o nilokulo lati koodu ailewu ti o dabi eewu nikan. Ko si ẹnikan ti o pade ẹnu-ọna iṣelọpọ ti a sọ AWS fun awọn oṣuwọn eke ati eke odi.

4 min readRead the linked source
Source-provided image accompanying AWS benchmark finds AI vulnerability detectors flag safe code
itọkasi orisunOrisun ti o gbasilẹ
Olutẹwe
helpnetsecurity.com
Orisun ọna asopọ
helpnetsecurity.comhttps://www.helpnetsecurity.com/2026/09/14/aws-deception-benchmark-security-vulnerabilities/
Orisun iru
Orisun ti o sopọ mọ - ipo orisun akọkọ ko ti fi idi mulẹ.
AtokọLoye eyi ni iṣẹju 60

Bẹrẹ nibi

Awọn ofin bọtini

Aṣepari
Idanwo idiwon tabi data ti a lo lati ṣe iwọn ati ṣe afiwe iṣẹ awoṣe.
Itọkasi
Ipin awọn idaniloju asọtẹlẹ ti o jẹ deede.
Ṣe idanwo fun ara rẹAwọn awoṣe AI ti ṣalaye adanwo

Kini o ṣẹlẹ

Iranlọwọ Apapọ Aabo ṣe ijabọ pe AWS ti ṣe idasilẹ ni gbangba lati tunbo Etan rẹ, eyiti o ṣe idanwo boya awọn awoṣe AI le ṣe iyatọ awọn ailagbara sọfitiwia gidi lati koodu ailewu ti o ni awọn ilana ailagbara ṣina. Awọn ala-ilẹ pẹlu awọn ayẹwo 14,822 ti o ni awọn ede siseto 16 ati diẹ sii ju awọn ẹka 70 CWE; 9,695 jẹ aami-idiwọn ati 5,127 ti wa ni idapo bi awọn ayẹwo ti ko ni aami.

Iranlọwọ Net Security ṣe ijabọ pe AWS ṣe ​​iṣiro awọn awoṣe idi-gbogboogbo 12 lati ọdọ awọn olupese marun ni lilo ala ti a ṣe apẹrẹ ni ayika awọn idaniloju eke. Awọn apẹẹrẹ ailewu ala-ilẹ ni awọn ilana ailagbara gidi lẹgbẹẹ awọn aabo ti o ṣe idiwọ ilokulo. Diẹ ninu awọn italaya yatọ si awọn ipo imuṣiṣẹ, gẹgẹbi awọn eto nẹtiwọọki Kubernetes, nitorinaa awoṣe gbọdọ gbero mejeeji koodu ati agbegbe rẹ.

Gẹgẹbi ijabọ naa, AWS ṣe ​​ipilẹṣẹ ati awọn apẹẹrẹ isọdọtun si awọn awoṣe aala, laisi awọn apẹẹrẹ ti o rọrun pupọ lati ṣe lẹtọ. AWS sọ pe ilana yii jẹ awọn mewa ti awọn ọkẹ àìmọye awọn ami. Ile-iṣẹ naa ṣe idasilẹ awọn ayẹwo ni gbangba ṣugbọn o da awọn aami wọn duro; awọn olumulo fi awọn asọtẹlẹ silẹ si AWS fun igbelewọn idaniloju. Orisun naa ko sọ boya iraye si igbelewọn gbe owo kan tabi awọn ibeere yiyan yiyan.

Iranlọwọ Aabo Nẹtiwọọki ṣe ijabọ pe awọn oluyẹwo ominira ṣayẹwo awọn akole laisi ri awọn ipinnu ara wọn tabi ero atilẹba. Awọn ayẹwo ariyanjiyan gba atunyẹwo siwaju sii, ati awọn ọran ti ko yanju ni a gbe lọ si eto ti ko ni abawọn. AWS sọ pe o kere ju 3% ti awọn ayẹwo ti o gba wọle wa ni idije lẹhin atunyẹwo, pẹlu ibi-afẹde ti o kere ju 1% atunyẹwo eniyan ti o ye, ati pe ko si awọn aṣiṣe isamisi ni atunyẹwo ti 100 awọn ayẹwo ti o gba laileto ti a yan. Awọn iṣeduro wọnyi ko ti ni idaniloju ni ominira nibi.

Awọn alaye orisun: helpnetsecurity.com ↗

Kini idi ti o ṣe pataki

Awọn abajade daba pe iṣẹ ṣiṣe ti o lagbara lori wiwa koodu ifura ko ni dandan tumọ si ipin ailagbara igbẹkẹle. Awọn oṣuwọn eke ti o ga julọ le ṣe ẹru awọn ẹgbẹ aabo ati irẹwẹsi igbẹkẹle ninu awọn titaniji, lakoko ti awọn ibeere ẹri ti o muna le fa awọn awoṣe lati padanu awọn ailagbara gidi. Awọn awari naa ṣe pataki si awọn ẹgbẹ ti n gbero atunyẹwo koodu iranlọwọ AI tabi awọn iṣẹ aabo, ṣugbọn wọn ko ṣe iwọn awọn ọja aabo iṣowo pipe.

Aṣepari naa n ṣalaye ailera ti o wulo ni aabo iranlọwọ AI: awoṣe kan le ṣe idanimọ ilana ti o lewu laisi agbọye awọn iṣakoso ti o ṣe idiwọ ilokulo. Iranlọwọ Aabo Nẹtiwọọki ṣe ijabọ pe itara taara ṣe agbejade awọn oṣuwọn rere-eke ti 41% si 99%, lakoko ti deede wa lati 52% si 71%.

Bibeere awọn awoṣe lati ṣafihan pe ailagbara kan le ni ilokulo ti dinku awọn idaniloju eke nipasẹ 17 si awọn aaye ogorun 74, ni ibamu si ijabọ naa, ṣugbọn alekun awọn oṣuwọn odi-eke si laarin 7% ati 44%. Ọpa iṣelọpọ ti o kere ju ti AWS ti sọ ni isalẹ 10% fun awọn iwọn mejeeji, ati pe ko si ọkan ninu awọn atunto idanwo ti o pade awọn iloro mejeeji.

Awọn abajade wọnyi ko yẹ ki o ka bi ipo ti awọn ọja aabo pipe. AWS ṣe ​​idanwo awọn itọsi titan-ọkan lori awọn awoṣe idi gbogbogbo, kii ṣe awọn ọna ṣiṣe-idi ti o lo awọn irinṣẹ, afọwọsi atunwi, tabi ṣiṣan iṣẹ aṣoju. Nitorinaa orisun naa ṣe atilẹyin iṣọra nipa awọn idajọ ailagbara ipele awoṣe, kii ṣe ipari pe awọn ọja aabo AI lapapọ kuna.

Interactive Mechanism

Ibaraẹnisọrọ Mechanism: Bii O Ṣe Nṣiṣẹ Lootọ

Ṣawari imọ-ẹrọ abẹlẹ lẹhin idagbasoke yii ni ibaraenisọrọ.

Thinking Budget (Test-Time Tokens):1,024 tokens
Complex Accuracy79%Math & Code Logic
Latency3.2sTime to first full output
Inference Cost$0.0092Per query estimated
Reasoning StyleStep VerificationInternal chain depth
Active Thinking Trace:
1Deconstruct user problem into formal constraints
2Propose candidate hypotheses & step-by-step calculation
3Self-correction: Backtrack and refute subtle edge cases
4Exhaustive consistency check & final output synthesis
Core takeaway: Test-time compute fundamentally changes AI economics. Instead of only scaling during pre-training, giving reasoning models more tokens at inference time allows them to systematically solve PhD-level STEM problems.
Ibanisọrọ Erongba Ṣayẹwo+10 Points
AI Models Explained Quiz

Which component of an AI application is the machine-learning model itself?

Kini lati wo tókàn

Ṣọra fun awọn igbelewọn ominira ni lilo awọn ayẹwo ti a tu silẹ, awọn abajade lati lilo irinṣẹ tabi awọn eto aabo igbese-ọpọ, ati ẹri nipa iṣẹ ṣiṣe ni awọn agbegbe iṣelọpọ gidi. Orisun naa ko ṣe iwe idiyele, iraye si ipele iṣẹ, tabi boya ilana igbelewọn AWS wa laisi awọn ihamọ. O tun ko fi idi rẹ mulẹ pe awọn awoṣe idanwo ṣe bakanna lori koodu iṣowo ti a ko sọ.

Awọn oniwadi olominira le lo awọn ayẹwo ti gbogbo eniyan ati ilana igbelewọn laisi atunda awọn idiyele iran data ti AWS ti o royin, ṣugbọn awọn aami idalẹnu ati igbelewọn ti AWS jẹ ipinnu lati fi opin si iṣapeye-pataki ala-ilẹ. Atunṣe nipasẹ awọn ẹgbẹ ita yoo ṣe iranlọwọ idanwo awọn abajade ijabọ ati didara isamisi.

Awọn igbelewọn ọjọ iwaju yẹ ki o ṣe afiwe awọn awoṣe ti o kọja ẹyọkan pẹlu awọn ọna ṣiṣe ti o ṣayẹwo awọn ibi ipamọ, ṣiṣẹ koodu lailewu, idi lori iṣeto imuṣiṣẹ, ati nilo ẹri ṣaaju ki o to fifun itaniji. Awọn idanwo yẹn yoo dara julọ tọka si iye ohun elo aabo to wulo ti ilọsiwaju lori awọn abajade awoṣe-nikan.

Orisun naa fi awọn aimọ pataki silẹ: ko ṣe idanimọ awọn atunto awoṣe idanwo 12, jabo awọn abajade awoṣe-kọọkan ninu ọrọ ti a pese, idiyele iwe aṣẹ tabi awọn ipo iwọle fun igbelewọn idaniloju, tabi ṣafihan bi iṣẹ ṣe n gbe si awọn koodu koodu ohun-ini ati awọn iṣẹ aabo laaye.

Awọn itọsọna ti o jọmọ & awọn ibeere

Awọn awoṣe AI ti ṣalayeÌlànà Ìwà AIPrompt EngineeringṢe idanwo ohun ti o mọ — gbiyanju idanwo AI ọfẹ kanWa ọrọ AI kan ninu iwe-itumọ waTẹle olutọpa ilana AI
Ṣe eyi wulo?