GUIDE IA visuel

Distance bi Fréchet tàmbalee

Distance bi Fréchet tàmbalee (FID) mooy metriku standard bi ñuy jëfandikoo ngir jàngat ni nataal yiñ defaree dëgg ak wuute.

Résumé

Distance bi Fréchet tàmbalee (FID) mooy metriku standard bi ñuy jëfandikoo ngir jàngat ni nataal yiñ defaree dëgg ak wuute. Dafay méngale lim yi ci nataal yu dëggu yi ak yiñ defar ci barab bu xóot - poñ yu néew dañuy tekki ni njuumte yi dañu gëna jege li dëgg gi.

Fréchet Inception Distance bokk na ci liggéey yiy wane ordinatër, yuy tekki wala defar ay mejaa yuñ mëna gis ngir jàngat, liggéey ak sos lu bees.

Plongeur bu xóot

FID, Heusel ak ñeneen ñi ñoo ko dugal. ci 2017, defar nañu benn fippu bu mag ci poñ yi njëkka am: musul méngale nataal yiñ defar ak done yu dëggu yi. FID dafay dundal nataal yu dëggu yi ak yiñ defar jaaraleko ci reso Inception-v3 buñ tàggat bu njëkk ba noppi di jàng vecteur 2048-dimensionel ci benn couche pooling bu xóot ngir nataal bu nekk. Ginaaw loolu mu modele ensemble bu nekk ci màndarga yi ni Gaussien bu barivariate, daal di leen tënk ci vecteur moyen ak matrix kovariance. Diggante ñaari Gaussian yi ñu ngi koy xayma ci diggante Fréchet (ñu koy woowe itam diggante 2-Wasserstein). FID bu gëna ndaw dafay tekki ni distribution biñ defar ak tasaaroo bi méngoo bu baax ak nataal yu dëggu yi, di jàpp njub (ndax dañu nuru dëgg?) ak wuute (ndax dañuy muur bariwaayu done dëgg yi?).

Gis-gis xarala

Formul FID mooy difference kare bi am ci diggante ñaari vecteur moyen yi boole ci (tolluwaayu kovariance yi dindi ñaari yoon rasine kare matrix bi ci seen produit). Ndax dafay jëfandikoo covariance bu mat, FID dafay yar génne yu fësul, yu amul dëgg ak mode collapse fu model bi defar bariwaay bu néew lool. Dafay sensible ci dayo misaal bi - nataal yu néew lool ñooy gëna yokk xayma bi - kon praktisien yi dañu koy xayma ci fukki junni nataal, lu bari 50,000.

xam fu Fréchet tàmbalee distance

Ngir am xam-xam bu xóot, jàppal Distance Inception Fréchet ni xeetu liggéey, te baña jàppee benn man-man. Mandargal njariñ yi nga bëgg, leeral li nga xalaat, ba noppi tàqale li sistem bi mëna def ci anam wu wóor ak liy laaj ba leegi àtteb kàngam.

Ci jëf, ekip yu am doole yiy jëfandikoo Fréchet Inception Distance dañuy méngale njubte gi ak dëggantaan yi ci liggéey bi, lu ci melni kalite done yi, faraasu leeraay bi, ak dëppoo ci etiket bi. Dañuy bind kritër yu leer ngir am ndam, natt leen ci done yu dëggu ak def liggéey, ba noppi ñu baamtu ci anamu ñàkka mëna seetlu, du ci benn yoon benchmark wins. Mooy barab bi xam-xam theorie bi di soppiku nekk kàttan buy yàgg ci produit yi, ci politik yi ak ci liggéey yi.

Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal. Ci jamano jooju, yelleefi nataal ak nangu mën na nekk risku yoon sudee fimu bawoo leerul. Xeetu jëf bi gëna dëgër mooy boole gaawaayu jàngat ak disipline nguur: doxal pilote, jàpp firnde, siiwal dogal yi, ak wéy di yeesal kaaraange gi ci anam wi ñuy doxalee, li jëfandikukat bi di xaar, ak sàrti sàrt yi di jëm kanam.

njeextalu pexe

Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal.

Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.

Ekipu kreatif yi mën nañu defar konsept yu gëna gaaw te duñu def lu bari ci loxo.

Ekipu kreatif yi mën nañu defar konsept yu gëna gaaw te duñu def lu bari ci loxo. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.

Liggéeyukaay yi mën nañu jëfandikoo siñaal nataal wala wideo yu jafewoon lool ci liggéey.

Liggéeyukaay yi mën nañu jëfandikoo siñaal nataal wala wideo yu jafewoon lool ci liggéey. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.

Ëlëgu Fréchet ci ndoorte li

FID mooy nekk default bi ci barab bi, waaye ay ñakk kattan dañuy dawal yeneen pexe. Gëstukat yi dañu wane ni dafa jël ImageNet ci Inception-v3 te mën na baña ànd ak àtte nit, di yóbbe ay jagleel yu melni FID yuñ xayma ci man-mani CLIP (yenn saa yi ñu koy woowe FDD wala CMMD), Kernel Inception Distance (KID) ngir misaal yu ndaw, ak njub / fàttaliku metric. Xaarandil jàngat bu gëna riis, baña bàyyi xel ci man-man yi, ak jàngat bu méngoo ak ni ñuy gisee, rawatina ginaaw bi bind-ci-nataal ak defar wideo di gëna bari ay resumé yu am benn nimero.

Doxal ci àdduna dëgg

Benchmarking GANs yu melni StyleGAN, fu ekip yi di joxe FID ci done yu melni FFHQ ngir méngale kalite kanam-generation.

Topp jëm kanam gi ci tàggat yaram ci xeetu diffusion ci xayma FID ci poñ yi ngir xam kañ la kalite nataal bi taxawee yokk.

Tegtale xeetu bind-ak-nataal yiy joŋante ci kaw COCO dataset, fu FID bu gëna suufe ñuy wax ni firnde ci génne yi gëna dëggu.

Gis xeetu daanu ci generatër, depi terme covariance FID dafay yokk su model bi defaree nataal yu bari yu néew.

Modèlu jëfandikoo

Fréchet Distance biy tàmbali ci jëf

Benchmarking GANs yu melni StyleGAN, fu ekip yi di joxe FID ci done yu melni FFHQ ngir méngale kalite kanam-generation.

Ekip yi dañuy faral di am njariñ yu gëna baax suñu tëralee ay threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp benefiis yi ak njëgu njuumte yi ci diir bi.

Fréchet Distance biy tàmbali ci jëf

Topp jëm kanam gi ci tàggat yaram ci xeetu diffusion ci xayma FID ci poñ yi ngir xam kañ la kalite nataal bi taxawee yokk.

Ekip yi dañuy faral di am njariñ yu gëna baax suñu tëralee ay threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp benefiis yi ak njëgu njuumte yi ci diir bi.

Fréchet Distance biy tàmbali ci jëf

Tegtale xeetu bind-ak-nataal yiy joŋante ci kaw COCO dataset, fu FID bu gëna suufe ñuy wax ni firnde ci génne yi gëna dëggu.

Ekip yi dañuy faral di am njariñ yu gëna baax suñu tëralee ay threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp benefiis yi ak njëgu njuumte yi ci diir bi.

Fréchet Distance biy tàmbali ci jëf

Gis xeetu daanu ci generatër, depi terme covariance FID dafay yokk su model bi defaree nataal yu bari yu néew.

Ekip yi dañuy faral di am njariñ yu gëna baax suñu tëralee ay threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp benefiis yi ak njëgu njuumte yi ci diir bi.

Risk yi ak balustrade yi

!

Yelleefi nataal ak nangu mën na nekk risku yoon sudee fi ñu bawoo leerul.

!

Performance model bi mën na wuute ci leeraay bi, demographie bi ak environmaa bi.

!

Njuumteg positive yi mën nañu dem te kenn duko seetlu fileek xool wuñu buntu wóolu sa bopp.

Roadmap ngir samp gi

1

Mandargal kritërium nangug njub, woowaat ak njëgu njuumte.

Jàppaleel lii ni buntu firnde: sudee mattul kritër yi, dakkal génne gi, tëj bërëb bi, suko defee nga yaatal jëfandikoo gi.

2

Saytu ak done yu méngoo ak anam yi ñuy liggéeyee dëgg.

Jàppaleel lii ni buntu firnde: sudee mattul kritër yi, dakkal génne gi, tëj bërëb bi, suko defee nga yaatal jëfandikoo gi.

3

Yokk jàngat nit ngir xam fu wóorul dara wala am njeexital yu rëy.

Jàppaleel lii ni buntu firnde: sudee mattul kritër yi, dakkal génne gi, tëj bërëb bi, suko defee nga yaatal jëfandikoo gi.

4

Toppal model drift bi nga baaxal ko ginaaw bi kamera bi wala done yi soppeekoo.

Jàppaleel lii ni buntu firnde: sudee mattul kritër yi, dakkal génne gi, tëj bërëb bi, suko defee nga yaatal jëfandikoo gi.

Weyal di banneexu

Check your understanding

Test yourself: take the Fréchet Inception Distance quiz

Start quiz