Visual AI GUIDE

Luminta Dareenka iyo LPIPS

Luminta garashada waxay cabbirtaa sida labada sawir ee la midka ah ay ugu ekaadaan bini'aadamka iyadoo la barbardhigayo astaamaha shabakada neerfaha ee qoto dheer halkii pixels cayriin ah.

Dulmar

Luminta garashada waxay cabbirtaa sida labada sawir ee la midka ah ay ugu ekaadaan bini'aadamka iyadoo la barbardhigayo astaamaha shabakada neerfaha ee qoto dheer halkii pixels cayriin ah. Waa muhiim sababtoo ah isbarbardhigga pixel-by-pixel wuxuu si khalad ah u ciqaabaa isbeddellada yaryar iyo tafatirka tafatirka, halka luminta garashada ay abaalmariso natiijooyin fiiqan, oo macquul ah.

Luminta Dareenka iyo LPIPS waxaa iska leh socodka shaqada-aragga kombuyuutarka ee tarjuma ama abuura warbaahinta muuqaalka falanqaynta, hawlgallada, iyo hal-abuurka.

quusitaanka qoto dheer

Khasaaraha dhaqameed sida L2 (macnaha khaladka labajibaaran yahay) is barbar dhig sawirada pixel-by-pixel, markaa hal-pixel beddelka ama wax yar oo ka duwan wuxuu u eg yahay qalad weyn inkasta oo aadanuhu si dhib yar u ogaan. Luminta garashada taa beddelkeeda waxay ku socodsiisaa labada sawir iyada oo loo marayo shabakad hore loo tababaray (badanaa VGG) oo waxay barbardhigtaa firfircoonida lakabyada dhexe. Sababtoo ah sifooyinkaasi waxay calaamadeynayaan cidhifyada, textures, iyo qaybaha shayga halkii ay ka ahaan lahaayeen qiyamka pixel saxda ah, khasaaruhu wuxuu si fiican ula siman yahay xukunka bini'aadamka, dhiirigelinta soo saarista fiiqan, macnaha macnaha. LPIPS (Isku ekaanshaha Sawirka Dareenka La Bartay), waxaa soo bandhigay Zhang et al. sanadka 2018, waxa uu si rasmi ah u dhigayaa tan: waxa ay soo saartaa sifooyin qoto dheer, oo ay caadi ka dhigtaa, oo waxa ay khusaysaa miisaanyo la bartay oo ka dhan ah kumanaan xukuno isku mid ah oo bini'aadamka ah, iyada oo soo saarta dhibco masaafo keliya ah halkaas oo hoose macnaheedu yahay isku mid.

Aragtida Farsamada

LPIPS waxay soo marisaa labada sawirba laf dhabarta go'an (VGG, AlexNet, ama SqueezeNet), unug-caadiya firfircoonida kanaalka dhowr lakab, ka dibna waxay qaadataa farqiga labajibaaran ee goob kasta. Qayb yar oo ka mid ah miisaannada kanaalka kasta ee la bartay ayaa cabbiraya kala duwanaanshahaas ka hor inta aan la isku celcelin meel bannaan oo lagu soo koobin lakabyo. Miisaannadaas waxaa lagu tababbaray xogta BAPPS ee laba-doorashada-doorashada-doorashada ee bini'aadamka, markaa cabbirku waxa uu ka tarjumayaa waxa ay dadku dhab ahaantii gartaan halkii ay ka ahaan lahaayeen masaafada muuqaalka cayriin.

Hagaajinta Luminta Dareenka iyo LPIPS

Luminta garashada waxay cabbirtaa sida labada sawir ee la midka ah ay ugu ekaadaan bini'aadamka iyadoo la barbardhigayo astaamaha shabakada neerfaha ee qoto dheer halkii pixels cayriin ah. Waa muhiim sababtoo ah isbarbardhigga pixel-by-pixel wuxuu si khalad ah u ciqaabaa isbeddellada yaryar iyo tafatirka tafatirka, halka luminta garashada ay abaalmariso natiijooyin fiiqan, oo macquul ah. Luminta Dareenka iyo LPIPS waxaa iska leh socodka shaqada-aragga kombuyuutarka ee tarjuma ama abuura warbaahinta muuqaalka falanqaynta, hawlgallada, iyo hal-abuurka. Si loo dhiso faham qoto dheer, ula dhaqan Khasaaraha Dareenka iyo LPIPS sidii qaab hawleed, ma aha hal sifo: qeex natiijooyinka la rabo, cadee fikradaha, oo kala saar waxa nidaamku si kalsooni leh u qaban karo iyo waxa wali u baahan go'aan khabiir.

Ficil ahaan, kooxaha xoogga leh ee isticmaalaya Khasaaraha Dareenka iyo LPIPS dheelitirnaanta saxnaanta iyo xaqiiqada hawlgelinta sida tayada xogta, kala duwanaanta iftiinka, iyo calaamadaynta joogteynta. Waxay diiwaangeliyaan shuruudaha guusha ee cad, tijaabiyaan xogta dhabta ah iyo qulqulka shaqada, waxayna ku celceliyaan ku saleysan qaababka guul darrida ee la arkay halkii ay hal mar ku guuleysan lahaayeen halbeegyada. Tani waa halka fahamka aragtida uu isu beddelo karti waara oo dhan badeecada, siyaasadda, iyo hawlgallada.

Visual AI wuxuu si otomaatig ah u samayn karaa baadhista, ogaanshaha, iyo sumadaynta hawlaha miisaanka. Isla mar ahaantaana, xuquuqda sawirku iyo ogolaanshaha waxay noqon karaan khataro sharci ah haddii caddayntu aanay caddayn. Habka ugu adkeysi badan waa in la isku daro xawaaraha tijaabada iyo anshaxa maamulka: socodsiinta duuliyayaasha, qabashada caddaynta, daabacaadda go'aanka, iyo si joogto ah u cusboonaysii ilaalinta sida habdhaqanka moodeelka, filashada isticmaale, iyo shuruudaha sharciyaynta.

Saamaynta Istiraatijiyadeed

Visual AI wuxuu si otomaatig ah u samayn karaa baadhista, ogaanshaha, iyo sumadaynta hawlaha miisaanka.

Visual AI wuxuu si otomaatig ah u samayn karaa baadhista, ogaanshaha, iyo sumadaynta hawlaha miisaanka. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Kooxaha hal-abuurka leh waxay hindise karaan fikradaha si dhakhso leh iyagoo leh dib-u-eegis buugeed yar.

Kooxaha hal-abuurka leh waxay hindise karaan fikradaha si dhakhso leh iyagoo leh dib-u-eegis buugeed yar. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Hawlgalladu waxay isticmaali karaan calaamadaha muuqaalka iyo muuqaalka kuwaas oo markii hore adkeyd in la farsameeyo.

Hawlgalladu waxay isticmaali karaan calaamadaha muuqaalka iyo muuqaalka kuwaas oo markii hore adkeyd in la farsameeyo. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Mustaqbalka Luminta Aragtida iyo LPIPS

Halbeegyada garashada ayaa ka soo wareegaya laf-dhabarka CNN una socda sifooyin laga soo qaatay moodooyinka is-maamula iyo kuwa wax ka beddela aragtida sida DINO iyo CLIP, kuwaas oo qabta semanti qani ah. Filo is dhexgalka adag oo leh tababbarka qaab-faafinta iyo qiimaynta-sawir-ka-muuqaalka, iyo buundooyinka garashada ee loo habeeyey joogteynta ku-meel-gaadhka ah ee fiidiyowga. Cilmi baadhayaashu waxay sidoo kale baarayaan dhibcaha indho la'aanta ah ee LPIPS: waa la khiyaami karaa si iska soo horjeeda oo daciif ah waxay la xiriirtaa tayada daacadnimada aadka u sareysa, taasoo dhiirigelinaysa cabbirro cusub oo bini'aadam ah sida DISTs iyo habab isku dhafan.

Dhaqangelinta Adduunka-dhabta ah

Tababarka shabakadaha xallinta sare (tusaale, SRGAN) sawiro kor loo qaaday ayaa u muuqda kuwo fiiqan oo muuqaal leh halkii ay ka dhalan lahaayeen.

Qiimaynta sawirka sawirka iyo codecs-ka iyadoo la qiimaynayo sida maskax ahaan ugu dhow sawirka la go'doomiyey ee asalka ah.

Hab wareejinta hagida, halkaas oo nuxurku ku habboon yahay sifooyinka VGG ee qoto dheer halkii ay ka ahaan lahaayeen pixels sax ah.

Benchmarking GAN iyo soosaarayaasha sawirka fidinta iyadoo laga warbixinayo fogaanta LPIPS ee u dhaxaysa sawirada la sameeyay iyo kuwa dhabta ah.

Hababka Dhaqangelinta

Luminta Dareenka iyo LPIPS ficil ahaan

Tababarka shabakadaha xallinta sare (tusaale, SRGAN) sawiro kor loo qaaday ayaa u muuqda kuwo fiiqan oo muuqaal leh halkii ay ka dhalan lahaayeen.

Tababarka shabakadaha xallinta sare (tusaale, SRGAN) sawirada kor loo qaaday waxay u muuqdaan kuwo fiiqan oo muuqaal leh halkii ay kooxuhu isku dhejin lahaayeen inta badan waxay helayaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, waxay hayaan dariiqa kor u kaca bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

Luminta Dareenka iyo LPIPS ficil ahaan

Qiimaynta sawirka sawirka iyo codecs-ka iyadoo la qiimaynayo sida maskax ahaan ugu dhow sawirka la go'doomiyey ee asalka ah.

Qiimaynta sawirka sawirka iyo codecs-ka iyadoo la barbardhigayo sida ugu macquulsan ee ugu dhow sawirka la go'aamiyay ee asalka ah Kooxuhu waxay inta badan helaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, waxay hayaan dariiqa kor u kaca bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

Luminta Dareenka iyo LPIPS ficil ahaan

Hab wareejinta hagida, halkaas oo nuxurku ku habboon yahay sifooyinka VGG ee qoto dheer halkii ay ka ahaan lahaayeen pixels sax ah.

Kala wareejinta qaabka hagida, halka nuxurka lagu jaangooyo sifooyinka VGG ee qoto dheer halkii ay ka ahaan lahaayeen pixels saxda ah Kooxuhu waxay inta badan helaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, waxayna la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

Luminta Dareenka iyo LPIPS ficil ahaan

Benchmarking GAN iyo soosaarayaasha sawirka fidinta iyadoo laga warbixinayo fogaanta LPIPS ee u dhaxaysa sawirada la sameeyay iyo kuwa dhabta ah.

Benchmarking GAN iyo soosaarayaasha sawirka faafinta iyada oo laga warbixinayo masaafada u dhaxaysa LPIPS ee u dhaxaysa sawirada la soo saaray iyo kuwa dhabta ah Kooxuhu caadi ahaan waxay helayaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadista bini'aadamka ee kiisaska cirifka ah, oo ay la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.

Khatarta & Dariiqyada Ilaalada

!

Xuquuqda sawirka iyo ogolaanshaha waxay noqon kartaa khataro sharci ah haddii caddayntu aanay caddayn.

!

Waxqabadka moodeelku wuu ku kala duwanaan karaa iftiinka, tirakoobka, iyo deegaanka.

!

Wanaagga beenta ah waxa laga yaabaa inaan la dareemin ilaa xadka kalsoonida aan la kormeerin.

Qorshe Hawleedka Dhaqangelinta

1

Qeex shuruudaha aqbalida ee saxnaanta, dib u celinta, iyo kharashyada khaladka.

Qeex shuruudaha aqbalida ee saxnaanta, dib u celinta, iyo kharashyada khaladka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

2

Ku tijaabi xogta ku habboon xaaladaha wax soo saarka dhabta ah.

Ku tijaabi xogta ku habboon xaaladaha wax soo saarka dhabta ah. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

3

Ku dar dib u eegis bini'aadamka si aad u hesho kalsoonida hoose ama saameeynta sare.

Ku dar dib u eegis bini'aadamka si aad u hesho kalsoonida hoose ama saameeynta sare. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

4

Lasoco moodeel dhaqaaqa oo dib u cusboonaysii kamarada ama xogta kaydinta ka dib.

Lasoco moodeel dhaqaaqa oo dib u cusboonaysii kamarada ama xogta kaydinta ka dib. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

Sii wad Sahaminta