Xiga xigaHagaha xiga
Tababarka Saadaasha Calaamadaha Badan
Luuqadda AI
HAGAHA Farsamada
Qulqulka mala awaalka ah iyo Saadaasha Token-badan
Daawashada mala-awaalka ah iyo saadaasha calaamado badan ayaa soo dedejiya jiilka moodalka luqadda iyadoo la qiyaasayo dhowr calaamad oo mustaqbalka ah hal mar oo lagu xaqiijiyo hal baas, halkii laga soo saari lahaa hal calaamad markiiba.
Dhageyso hagahanAI-waa laga sheekeeyay · ~2 min
Boggaan2 daqiiqo akhri
Dulmar
Waxay gooyeen daahida iyaga oo aan beddelin qoraalka qaabku qori lahaa.
quusid qoto dheer
Go'aaminta caadiga ah ee autoregressive waa mid gaabis ah sababtoo ah calaamad kasta waxay u baahan tahay baas hore oo buuxa iyo calaamadaha si adag ayaa loo soo saaraa midba midka kale, taasoo ka dhigeysa GPU-da aan la isticmaalin. Go'aaminta male-awaalka ah ayaa tan ku hagaajinaysa qabyaliye raqiis ah kaas oo soo jeedinaya qayb ka mid ah calaamadaha musharraxiinta, kaas oo qaabka bartilmaameedka weyni uu markaas hubinayo si barbar socda; Horgale kasta oo u dhigma waxa bartilmaameedku soo saari lahaa waa la aqbalayaa si bilaash ah, is-maandhaafka ugu horreeyana waa la saxaa. Qulqulka mala-awaalka ah iyo qaabka Medusa-style saadaasha calaamado badan ayaa laalaab qabyalaha qaabka laftiisa: madax saadaasha khafiifka ah ee dheeriga ah (ama durdur calaamado mala awaal ah) hal moode ha ahaado mid qabyo ah oo xaqiiji, isaga oo iska ilaalinaya qaab qabyo ah oo gooni ah. Sababtoo ah xaqiijintu waa sax, qaybinta wax soo saarku waxay la mid tahay dejinta codeeynta caadiga ah, waxaad si fudud u heleysaa 2 ilaa 3 jeer ka yar tillaabooyin isku xigta.
Dhaqangelinta Adduunka-dhabta ah
Goynta daahitaanka jawaabta kaaliyaha wada sheekaysiga 2 ilaa 3x iyada oo la adeegsanayo qaabka Medusa madax saadaalin dheeri ah
Ku-daridda kood-samaynta is-malaha ee serferka fikradda si aan loo baahnayn qaab qabyo gaar ah oo u baahan in la martigeliyo
Dedejinta dhamaystirka koodka halka dheer, calaamada la saadaalin karo ay socoto ayaa la aqbalayaa qaybo waaweyn
Dhimista kharashka GPU codsi kasta iyadoo laga soo saarayo calaamado badan baas kasta oo xusuusta ku xidhan
Mustaqbalka qulqulka mala awaalka ah iyo saadaalinta calaamado badan
Hababka is-male-awaalka ah ee aan u baahnayn nooc qabyo ah oo gaar ah ayaa noqonaya kuwa ugu hooseeya ee matoorada fikradda, cilmi-baaristu waxay riixaysaa heerarka aqbalaadda oo sarreeya oo leh madaxyo qabyo ah oo ka wanaagsan, murashaxiinta geed-qaabaysan, iyo tababbarka qaabka aasaasiga ah ee wadajirka ah ee saadaasha calaamado badan (taas oo sidoo kale hagaajin karta tayada). Filo farsamooyinkan inay ku daraan xisaabinta iyo dufaynta si kaaliyeyaasha isdhexgalka u dareemaan degdeg xitaa marka moodooyinka koraan.
Ku dhaqangelinta
Maxay muhiim u tahay
- Qiimaha iyo miisaaniyada. Go'aamada qaab-dhismeedku waxay horseedaan waxqabadka iyo kharashka hawlgalka sannadaha.
- Go'aamo cad. Waxbarashada farsamada waxay ka caawisaa kooxaha inay doortaan xidhmo sax ah, ma aha oo kaliya kan ugu cusub.
- Xakamaynta tayada. Doorashooyinka injineernimada ee wanaagsan waxay yareeyaan shilalka la isku halleyn karo ee wax soo saarka.
Iska ilaali
- Hagaajinta hal bartilmaameed waxay qarin kartaa daciifnimada nidaamka ballaaran.
- Kaabayaasha dhaqaalaha iyo dayactirka inta badan waa la dhayalsadaa.
- Nabadgelyada iyo daldaloolada u fiirsashada ayaa kori kara marka nidaamyadu noqdaan kuwo aad u adag.
Tallaabooyinka xiga
- Qeex daahida, tayada, iyo bartilmaameedyada qiimaha ka hor inta aan la hirgelin.
- Benchmark marka la eego culeyska dhabta ah iyo xaaladaha xogta.
- La socodka qalabka khaladaadka, leexashada, iyo saamaynta isticmaalaha.
- U diyaari dib-u-noqoshada iyo dariiqyada jawaab-celinta dhacdada ka hor inta aanad miisaan.
Sii wad Sahaminta
Warqad bilaash ah
Hel warbixinta maalinlaha ah ee AI
Saddex sheeko oo la xaqiijiyay oo AI ah maalin kasta oo shaqo ah, oo lagu qoray Ingiriis fudud. Bilaash had iyo jeer, aan xayaysiis lahayn.
Hal iimayl maalin kasta oo shaqo ah. Ka bax hal gujin. Marna ma iibinno ama ma wadaagno ciwaankaaga.
Is tijaabi
Take the Speculative Streaming and Multi-Token Prediction quiz
Fikrad degdeg ah oo ku saabsan jawaab kasta, iyo shahaado la wadaajin karo oo leh aqoonsi la xaqiijin karo markaad ka gudubto koorso.
Taageer waxbarashada AI bilaashka ah. AI Understanding waa 501(c)(3) aan faa'iido doon ahayn — xayaysiis la'aan, albaab lacag ah ma jiro, had iyo jeer. Samee deeq
Su'aalaha soo noqnoqda
Waa maxay Qulqulka Qulqulka ah iyo Saadaasha Token-badan?
Daawashada mala-awaalka ah iyo saadaasha calaamado badan ayaa soo dedejiya jiilka moodalka luqadda iyadoo la qiyaasayo dhowr calaamad oo mustaqbalka ah hal mar oo lagu xaqiijiyo hal baas, halkii laga soo saari lahaa hal calaamad markiiba. Waxay gooyeen daahida iyaga oo aan beddelin qoraalka qaabku qori lahaa.
Waa maxay sababta caadiga ah ee goynta autoregressive ay inta badan u gaabis tahay GPU?
Calaamad kastaa waxay u baahan tahay baas hore oo u gaar ah oo si adag ayay isugu xigaan, markaa GPU-gu wuxuu ku xidhan yahay xusuusta-bandwidth-ka oo aan laga faa'iidaysan inta lagu jiro codeynta.
Muxuu ka qabtaa 'qabyo-qodeeyaha' marka la eegayo dejinta malo-awaalka ah?
Qore raqiis ah ayaa soo jeedinaya qayb ka mid ah calaamadaha musharraxiinta taas oo qaabka bartilmaameedka weyni uu markaas xaqiijinayo si barbar socda.
Sidee loo ilaaliyaa tayada wax-soo-saarka ee dejinta malo-awaalka ah?
Xaqiijinta (isku-dhafka hunguri-xumada ama muunadda diidmada) waxay hubisaa in calaamadaha la aqbalay ay raacaan qaybinta saxda ah ee qaabka la beegsanayo uu soo saari lahaa, markaa wax-soo-saarku isma beddelin.
Maxaa ka sooca saadaasha calaamada badan ee qaabka Medusa ka soo saarida maloawaalka caadiga ah?
Hababka-qaabka Medusa waxay laalaabaan qabyo-qoraalka qaabka oo leh madax saadaalin dheeraad ah, iyaga oo iska ilaalinaya baahida marti-gelinta qaab qabyo ah oo gaar ah.
Muxuu transformer-ku u xaqiijin karaa boosas badan oo musharraxiin ah oo ku dhow sida mid raqiis ah marka la go'aaminayo?
Inta lagu guda jiro kala-soocidda qoob-ka-cayaarku waxay ka dhaqaajinaysaa miisaanka xusuusta, markaa dhibcaha dheeraadka ah ee isla baaska waxay ku kordhinaysaa kharash yar oo xisaabin ah.
Sii wad waxbarashada
Tilmaamaha la xidhiidha
Tilmaamayaal badan ayaa loo doortay mawduucan