Pada si Iroyin
ÀàbòAI Understanding finifini

Google DeepMind awaokoofurufu awọn igbelewọn afọju meji fun awọn awoṣe AI ohun-ini

Google DeepMind sọ pe o n ṣe idanwo awoṣe Gemini Flash Lite kan ni agbegbe aabo cryptographically ti a ṣe apẹrẹ lati tọju awọn itọsi igbelewọn mejeeji ati awọn iwuwo awoṣe ni ikọkọ.

5 min readRead the primary source
Primary-source image accompanying Google DeepMind pilots double-blind evaluations for proprietary AI models
Iwe aṣẹ orisun akọkọOrisun ti o gbasilẹ
Olutẹwe
deepmind.google
Orisun ọna asopọ
deepmind.googlehttps://deepmind.google/blog/piloting-the-worlds-first-double-blind-ai-evaluations/
Orisun iru
Iwe akọkọ - ikede osise, iwe, iforukọsilẹ, tabi oju-iwe ẹgbẹ akọkọ ti a ka taara.
AtokọLoye eyi ni iṣẹju 60

Bẹrẹ nibi

Awọn ofin bọtini

AI Aabo
Aaye kan lojutu lori idinku ihuwasi ipalara, awọn ikuna, ati awọn ewu ilokulo ninu awọn eto AI.
Aṣepari
Idanwo idiwon tabi data ti a lo lati ṣe iwọn ati ṣe afiwe iṣẹ awoṣe.
Ṣe idanwo fun ara rẹAwọn awoṣe AI ti ṣalaye adanwo

Kini o ṣẹlẹ

Google DeepMind kede awaoko kan fun ohun ti o ṣe apejuwe bi iṣayẹwo afọju meji akọkọ ti ohun-ini kan, awoṣe aala-kilasi AI. Idanwo naa nlo awoṣe Gemini Flash Lite kan ati awọn ipilẹ aṣiri ti a pese nipasẹ awọn oluyẹwo ita.

Google DeepMind sọ ni Oṣu Kẹjọ Ọjọ 27 pe o n ṣe agbeyẹwo igbelewọn afọju meji ninu eyiti idanwo ita ti wa ni inu agbegbe cryptographic kan. Ile-iṣẹ naa ṣapejuwe iṣẹ akanṣe bi akọkọ iru igbelewọn ti ohun-ini kan, awoṣe aala-kilasi AI. Awoṣe ti n ṣe idanwo jẹ awoṣe Gemini Flash Lite kan, ati pe awọn ipilẹ jẹ aṣiri.

Atukọ naa ṣajọpọ Google DeepMind, Singapore Institute, OpenMined, AVERI ati MLCommons. Orisun naa sọ pe awọn olukopa yoo ṣe idanwo awoṣe naa lodi si awọn ipilẹ aṣiri ni agbegbe ipamọ-aṣiri kan. Ko ṣe idanimọ awọn ibeere ala-ilẹ, ṣafihan ẹya pato ti awoṣe tabi pese awọn abajade lati ọdọ awaoko.

Eto naa nlo Space Asiri, apakan ti Google Cloud's Confidential Computing portfolio. Google sọ pe agbegbe le rii daju ni cryptographically pe data igbelewọn ita ati awoṣe ohun-ini wa ni ikọkọ si awọn oniwun wọn. Labẹ iṣeto ti a ṣapejuwe, awọn oluyẹwo ko le rii awọn iwuwo awoṣe Gemini, lakoko ti Google ko le rii awọn itọsi idanwo awọn oluyẹwo.

Iṣoro ti a sọ jẹ ibajẹ ala: awoṣe le ṣe dara julọ ti o ba ti pade awọn ibeere igbelewọn tabi ta ṣaaju idanwo. Google sọ pe awọn ilana iwọle odo ti o wa ati awọn aabo adehun ti ṣe iranlọwọ lati tọju awọn itagbangba ita ni ikọkọ, ṣugbọn jiyan pe imọ-ẹrọ ati awọn aabo cryptographic ṣafikun ipele idaniloju miiran.

Ikede naa tọka awọn oluka si ijabọ imọ-ẹrọ fun ilana ati awọn awari. Ọrọ orisun ko pẹlu awọn abajade ijabọ naa, iṣayẹwo ominira, apejuwe ti ilana ijẹrisi cryptographic ni awọn alaye ti o to lati ṣe ayẹwo rẹ, tabi ẹri pe awaoko ti yipada iṣẹ awoṣe tẹlẹ tabi awọn ipinnu imuṣiṣẹ.

Awọn alaye orisun: deepmind.google ↗

Kini idi ti o ṣe pataki

Ọna naa jẹ ipinnu lati dinku ibajẹ ala-ilẹ lakoko gbigba awọn ẹgbẹ ominira lati ṣe idanwo awọn eto AI ti o lagbara laisi gbigba awọn iwuwo awoṣe tabi ṣiṣafihan awọn itọsi idanwo wọn si olupese awoṣe.

Awọn ikun ala ala AI nigbagbogbo lo lati ṣe afiwe awọn eto ati sọfun awọn ipinnu nipa agbara ati ailewu. Ti awoṣe tabi olupilẹṣẹ rẹ ba ni iwọle si ohun elo idanwo ni ilosiwaju, Dimegilio giga le ṣe afihan ifaramọ pẹlu igbelewọn dipo agbara idanwo naa ti pinnu lati wọn. Awọn fireemu Google ṣe ​​idanwo afọju meji bi ọna lati koju iṣoro igbẹkẹle yẹn.

Eto ti a dabaa fojusi ija ilodi si ni awọn igbelewọn ita. Itan-akọọlẹ, ni ibamu si Google, awọn oluyẹwo boya pin awọn itọsi pẹlu olupese awoṣe tabi beere lọwọ olupese lati pin awọn iwuwo awoṣe. Aṣayan akọkọ le ṣafihan awọn ibeere asiri; ekeji le ṣafihan awọn ohun-ini ọgbọn ti o niyelori. A ṣe apẹrẹ awaoko lati yago fun nilo boya paṣipaarọ.

Iṣiro ipamọ-ipamọ le wulo ni pataki fun awọn idanwo ti o kan cybersecurity tabi awọn ile-iṣẹ ijọba, nibiti awọn itọsi, awọn oju iṣẹlẹ ati data le jẹ ifarabalẹ. Orisun naa sọ pe ọna naa le ṣe atilẹyin idanwo ominira lakoko titọju ọba-alaṣẹ data ati aabo. Iyẹn jẹ anfani ti o pọju ti a sọ, kii ṣe abajade afihan ti awakọ awakọ yii.

Itumọ ti o gbooro da lori boya ẹri cryptographic le fi idi ohun ti o ṣẹlẹ ninu agbegbe igbelewọn ati boya awọn ẹgbẹ ita le ṣayẹwo tabi fọwọsi ẹri yẹn ni ọna ti o nilari. Titọju awọn itọsi ati iwuwo pamọ le dinku diẹ ninu awọn ewu, ṣugbọn kii ṣe funrararẹ fihan pe a ṣe apẹrẹ ala kan daradara, pe awoṣe ti ni idanwo ni kikun tabi pe awọn abajade jẹ akopọ si lilo gidi-aye.

Ikede naa jẹ idagbasoke ni awọn amayederun igbelewọn dipo agbara awoṣe tuntun. Iye gbogbo eniyan lẹsẹkẹsẹ wa ni iṣeeṣe ti ṣiṣe awọn ẹtọ AI ti o ga-giga rọrun lati ṣayẹwo. Awọn opin rẹ jẹ idaran: orisun ko funni ni awọn abajade iṣẹ, ko si lafiwe pẹlu awọn igbelewọn aṣa ati pe ko si ẹri sibẹsibẹ pe ọna naa jẹ ifilọlẹ ni fifẹ.

Interactive Mechanism

Ibaraẹnisọrọ Mechanism: Bii O Ṣe Nṣiṣẹ Lootọ

Ṣawari imọ-ẹrọ abẹlẹ lẹhin idagbasoke yii ni ibaraenisọrọ.

Model Parameter Size:8B Parameters
VRAM Required5.5 GBGPU memory footprint
Target HardwareMacBook / Single GPUDeployment tier
Privacy100% Air-GappedLocal device capability
Core takeaway: Small, quantized models (3B–8B) now run directly inside smartphones and laptops with complete data privacy, while mammoth 400B+ models remain the domain of datacenter clusters.
Ibanisọrọ Erongba Ṣayẹwo+10 Points
AI Models Explained Quiz

Which component of an AI application is the machine-learning model itself?

Kini lati wo tókàn

Awọn ibeere akọkọ ti a ko yanju ni boya awakọ n ṣiṣẹ ni igbẹkẹle ni iwọn nla, bawo ni idaniloju jẹ ominira, kini ijabọ imọ-ẹrọ yoo fihan, ati boya awọn olupilẹṣẹ awoṣe miiran gba awọn aabo afiwera.

Ijabọ imọ-ẹrọ yẹ ki o ṣe alaye ilana ilana igbelewọn, pẹlu alaye wo ni alabaṣe kọọkan le ṣe akiyesi, bawo ni a ṣe tunto agbegbe cryptographic ati iru ẹri wo ni a ṣe fun awọn oluyẹwo. Laisi awọn alaye wọnyẹn, o nira lati ṣe idajọ iye igbẹkẹle awaoko ṣe afikun ju awọn adehun aṣiri ti o wa tẹlẹ ati awọn iṣakoso gedu.

Ibeere bọtini kan ni boya awakọ ṣe idanwo awoṣe dín nikan ati apapọ ala-ilẹ tabi boya ọna naa le ṣe atilẹyin oriṣiriṣi awọn faaji awoṣe, awọn olupese igbelewọn ati awọn ipilẹ data ifura. Isọdọmọ adaṣe yoo dale lori idiyele, iṣẹ ṣiṣe, ibamu pẹlu awọn irinṣẹ idanwo to wa ati agbara lati tun awọn igbelewọn kọja awọn agbegbe ominira.

Awọn oluwoye yẹ ki o tun wa alaye nipa ala-ilẹ funrararẹ. Awọn ilana afọju meji le ṣe iranlọwọ lati daabobo awọn ibeere idanwo, ṣugbọn wọn ko le yanju awọn iṣoro bii apẹrẹ iṣẹ-ṣiṣe alailagbara, agbegbe ti ko pe, igbelewọn aibikita tabi ibaamu laarin iṣẹ ala ati ihuwasi ni imuṣiṣẹ. Orisun naa ko sọ bi awọn ọran naa yoo ṣe mu.

Awọn ipa ti awọn ẹgbẹ ti o kopa ati awọn eto abojuto yoo ṣe pataki. Ikede naa darukọ ọpọlọpọ awọn alabaṣiṣẹpọ, ṣugbọn ko ṣe alaye ẹniti o ṣakoso igbelewọn, tani o le koju awọn abajade, boya eyikeyi ẹgbẹ yoo ṣe atẹjade iṣayẹwo tabi bii awọn ariyanjiyan lori iṣẹ ṣiṣe eto yoo ṣe yanju.

Nikẹhin, esi ile-iṣẹ yoo tọka boya eyi ṣi wa idanwo kan pato-Google tabi di adaṣe pinpin. Orisun naa sọ pe awakọ naa jẹ ipinnu lati ṣe iranlọwọ fun ile-iṣẹ gbooro lati dagbasoke ailewu ati awọn eto AI ti o ni igbẹkẹle diẹ sii, ṣugbọn ko kede awọn adehun lati ọdọ awọn olupolowo awoṣe miiran, awọn olutọsọna tabi awọn ara idanwo ominira. Orisun naa fi silẹ ibeere isọdọmọ gbooro sii, nitorinaa eyikeyi ipa ile-iṣẹ ti o gbooro wa lati pinnu.

Awọn itọsọna ti o jọmọ & awọn ibeere

Awọn awoṣe AI ti ṣalayeÌlànà Ìwà AIAI IkẹkọỌjọ́ Iwájú AIṢe idanwo ohun ti o mọ — gbiyanju idanwo AI ọfẹ kanWa ọrọ AI kan ninu iwe-itumọ waTẹle olutọpa ilana AI
Ṣe eyi wulo?