HAGAHA Farsamada

Koofiyadaha Tensor

Tensor Cores waa unug qalab gaar ah oo ku dhex jira NVIDIA GPU-yada casriga ah kuwaas oo si xawli ah u qabta hawlo badan oo isku dhufanaya oo ururinaya.

Dulmar

Tensor Cores waa unug qalab gaar ah oo ku dhex jira NVIDIA GPU-yada casriga ah kuwaas oo si xawli ah u qabta hawlo badan oo isku dhufanaya oo ururinaya. Iyagu waa sababta ugu weyn ee hal GPU uu u tababari karo oo uu maamuli karo shabakadaha neerfaha ee waaweyn amarada baaxadda leh ee ka dhaqso badan xisaabinta ujeeddada guud ay oggolaan karto.

Tensor Cores waa dhisme farsamo oo saameeya tayada moodeelka, kharashka kaabayaasha, daahitaanka, iyo isku halaynta cabbirka.

quusid qoto dheer

Waxaa lagu soo bandhigay qaab-dhismeedka Volta ee 2017, Tensor Cores waa wareegyo u go'ay oo xisaabiya isku-dhufashada matrix yar oo lagu daro (D = A x B + C) hal hawlgal, halkii la samayn lahaa mid kasta hal mar ku dhufo koodhadhka CUDA ee caadiga ah. Sababtoo ah ku dhawaad ​​lakab kasta oo ka mid ah shabakada neerfaha ayaa hoos u dhigta isku dhufashada matrixka, tani waxay la mid tahay xisaabta AI runtii u baahan tahay. Jiil kasta oo GPU ah ayaa ballaariyay waxa ay gacanta ku hayaan: Volta wuxuu sameeyay 4 × 4 FP16 tiles, halka markii dambe Ampere, Hopper, iyo Blackwell ay ku darsadeen qaabab hoose oo sax ah sida TF32, BF16, INT8, FP8, iyo FP4. Saxnaanta hoose waxay la macno tahay tirooyin badan oo la farsameeyay saacadiiba, si wayn kor loogu qaadayo wax soo saarka tababarka iyo ka-fiirsashada iyadoo la ilaalinayo saxnaanta la aqbali karo.

Aragtida Farsamada

Qalabka Tensor Core wuxuu ku dhuftaa laba qaybood oo yaryar wuxuuna ku ururiyaa natiijada hal tallaabo oo isku dhafan, isagoo ka faa'iidaysanaya xaqiiqda ah in isla qiyamka wax-soo-saarka dib loogu isticmaalo qaybo badan oo wax soo saar ah. Waxay caadi ahaan u akhridaa wax-soo-gelinta si sax ah oo la dhimay (FP16, BF16, ama FP8) laakiin waxay uruurisaa wadarta socodsiinta si sax ah oo sare (badanaa FP32) si loo xaddido khaladka wareegga. Maktabadaha softiweerka ah sida cuBLAS iyo cuDNN, iyo qaab-dhismeedka sida PyTorch, waxay si toos ah ugu dhejiyaan matrixyada waaweyn ee baloogyadan yar yar si ay moodooyinka u helaan xawaareyn la'aanteed.

Mastering Tensor Cores

Tensor Cores waa unug qalab gaar ah oo ku dhex jira NVIDIA GPU-yada casriga ah kuwaas oo si xawli ah u qabta hawlo badan oo isku dhufanaya oo ururinaya. Iyagu waa sababta ugu weyn ee hal GPU uu u tababari karo oo uu maamuli karo shabakadaha neerfaha ee waaweyn amarada baaxadda leh ee ka dhaqso badan xisaabinta ujeeddada guud ay oggolaan karto. Tensor Cores waa dhisme farsamo oo saameeya tayada moodeelka, kharashka kaabayaasha, daahitaanka, iyo isku halaynta cabbirka. Si loo dhiso faham qoto dheer, ula dhaqan Tensor Cores sida moodeel hawleed, ma aha hal sifo: qeex natiijooyinka la rabo, cadee fikradaha, oo kala saar waxa nidaamku si kalsooni leh u samayn karo iyo waxa weli u baahan go'aan khabiir.

Ficil ahaan, kooxaha xoogga leh ee isticmaalaya 'Tensor Cores' waxay wanaajiyaan qaab dhismeedka, xogta, iyo doorashooyinka kaabayaasha lidka ku ah isku hallaynta iyo qiimaha. Waxay diiwaangeliyaan shuruudaha guusha ee cad, tijaabiyaan xogta dhabta ah iyo qulqulka shaqada, waxayna ku celceliyaan ku saleysan qaababka guul darrida ee la arkay halkii ay hal mar ku guuleysan lahaayeen halbeegyada. Tani waa halka fahamka aragtida uu isu beddelo karti waara oo dhan badeecada, siyaasadda, iyo hawlgallada.

Go'aamada qaab-dhismeedku waxay horseedaan waxqabadka iyo kharashka hawlgalka sannadaha. Isla mar ahaantaana, hagaajinta hal bartilmaameed waxay qarin kartaa daciifnimada nidaamka ballaaran. Habka ugu adkeysi badan waa in la isku daro xawaaraha tijaabada iyo anshaxa maamulka: socodsiinta duuliyayaasha, qabashada caddaynta, daabacaadda go'aanka, iyo si joogto ah u cusboonaysii ilaalinta sida habdhaqanka moodeelka, filashada isticmaale, iyo shuruudaha sharciyaynta.

Saamaynta Istiraatijiyadeed

Go'aamada qaab-dhismeedku waxay horseedaan waxqabadka iyo kharashka hawlgalka sannadaha.

Go'aamada qaab-dhismeedku waxay horseedaan waxqabadka iyo kharashka hawlgalka sannadaha. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Waxbarashada farsamada waxay ka caawisaa kooxaha inay doortaan xidhmo sax ah, ma aha oo kaliya kan ugu cusub.

Waxbarashada farsamada waxay ka caawisaa kooxaha inay doortaan xidhmo sax ah, ma aha oo kaliya kan ugu cusub. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Doorashooyinka injineernimada ee wanaagsan waxay yareeyaan shilalka la isku halleyn karo ee wax soo saarka.

Doorashooyinka injineernimada ee wanaagsan waxay yareeyaan shilalka la isku halleyn karo ee wax soo saarka. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Mustaqbalka Kooreyada Tensor-ka

Kooreyada Tensor-ku waxay sii wadaan inay u socdaan dhinaca saxda ah ee weligood-hooseeya: Hopper wuxuu ku daray FP8 iyo Blackwell wuxuu soo bandhigay 4-bit FP4 oo leh qalab lagu maamulo qalabka, oo qiyaas ahaan labanlaabaya soo saarista tallaabo kasta ee culeyska shaqo ee culus. Filo taageero adag oo loogu talagalay yaraynta (ka boodka miisaanka eber), qaababka mikroskooliga ee ku lifaaqa qodobbada cabbirka tiro yar oo tirooyin ah, iyo is-dhexgalka qoto dheer ee nidaamyada xusuusta si ay udubyadu u sii quudiyaan. Sida moodooyinka u koraan, mishiinka matrixka, ee aan ahayn xawaaraha saacada ceyriinka ah, ayaa weli ah goobta dagaalka dhexe ee waxqabadka qalabka AI.

Dhaqangelinta Adduunka-dhabta ah

Tababarka moodooyinka luqadaha waaweyn sida transformers-yada qaabka GPT, halkaas oo balaayiin isku dhufasho matrix ah talaba kasta ay ku socdaan Tensor Cores ee BF16 ama FP8.

Ku socodsiinta qiimaynta-waqtiga-dhabta ah ee chatbots-ka iyo soo-saareyaasha sawirka, iyada oo la adeegsanayo tirooyinka INT8 ama FP8 si loogu adeego isticmaaleyaal badan halkii GPU.

Dardar gelinta NVIDIA DLSS ee ciyaaraha fiidyaha, halkaas oo shabakada neural ay kor u qaaddo xayndaabyada xallinta hoose iyada oo la adeegsanayo Tensor Cores jir kasta.

Dadajinta xisaabinta sayniska sida borotiinka-lalaabista (AlphaFold) iyo moodooyinka cimilada ee dib loo habeeyey sidii culeysyo shaqo oo culus oo neerfaha ah.

Hababka Dhaqangelinta

Xudunta Tensor-ka ficil ahaan

Tababarka moodooyinka luqadaha waaweyn sida transformers-yada qaabka GPT, halkaas oo balaayiin isku dhufasho matrix ah talaba kasta ay ku socdaan Tensor Cores ee BF16 ama FP8.

Tababarka moodooyinka luqadaha waaweyn sida transformers-style-ka GPT, halkaas oo balaayiin isku dhufasho matrix ah tallaabo kasta ay ku socdaan Tensor Cores ee BF16 ama Kooxaha FP8 inta badan waxay helayaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.

Xudunta Tensor-ka ficil ahaan

Ku socodsiinta qiimaynta-waqtiga-dhabta ah ee chatbots-ka iyo soo-saareyaasha sawirka, iyada oo la adeegsanayo tirooyinka INT8 ama FP8 si loogu adeego isticmaaleyaal badan halkii GPU.

Ku socodsiinta aragtida waqtiga-dhabta ah ee chatbots iyo sawir-soosaarayaasha, iyadoo la adeegsanayo tirooyinka INT8 ama FP8 si loogu adeego isticmaaleyaal badan koox kasta oo GPU ah inta badan waxay helayaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u ilaali dariiqa kor u qaadista bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

Xudunta Tensor-ka ficil ahaan

Dardar gelinta NVIDIA DLSS ee ciyaaraha fiidyaha, halkaas oo shabakada neural ay kor u qaaddo xayndaabyada xallinta hoose iyada oo la adeegsanayo Tensor Cores jir kasta.

Dardargelinta NVIDIA DLSS ee ciyaaraha fiidyaha, halkaas oo shabakada neerfaha ay kor u qaaddo jaantusyada xallinta hoose iyada oo la adeegsanayo Tensor Cores koox kasta waxay caadi ahaan helayaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

Xudunta Tensor-ka ficil ahaan

Dadajinta xisaabinta sayniska sida borotiinka-lalaabista (AlphaFold) iyo moodooyinka cimilada ee dib loo habeeyey sidii culeysyo shaqo oo culus oo neerfaha ah.

Xoojinta xisaabinta sayniska sida borotiinka-lalaabista (AlphaFold) iyo moodooyinka cimilada ee dib loo habeeyey sida culeyska shaqada neerfaha ee culus Kooxuhu inta badan waxay helaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, waxay hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.

Khatarta & Dariiqyada Ilaalada

!

Hagaajinta hal bartilmaameed waxay qarin kartaa daciifnimada nidaamka ballaaran.

!

Kaabayaasha dhaqaalaha iyo dayactirka inta badan waa la dhayalsadaa.

!

Nabadgelyada iyo daldaloolada u fiirsashada ayaa kori kara marka nidaamyadu noqdaan kuwo aad u adag.

Qorshe Hawleedka Dhaqangelinta

1

Qeex daahida, tayada, iyo bartilmaameedyada qiimaha ka hor inta aan la hirgelin.

Qeex daahida, tayada, iyo bartilmaameedyada qiimaha ka hor inta aan la hirgelin. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

2

Benchmark marka la eego culeyska dhabta ah iyo xaaladaha xogta.

Benchmark marka la eego culeyska dhabta ah iyo xaaladaha xogta. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

3

La socodka qalabka khaladaadka, leexashada, iyo saamaynta isticmaalaha.

La socodka qalabka khaladaadka, leexashada, iyo saamaynta isticmaalaha. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

4

U diyaari dib-u-noqoshada iyo dariiqyada jawaab-celinta dhacdada ka hor inta aanad miisaan.

U diyaari dib-u-noqoshada iyo dariiqyada jawaab-celinta dhacdada ka hor inta aanad miisaan. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

Sii wad Sahaminta