Akopọ
Pipadanu oye ṣe iwọn bii awọn aworan meji ti o jọra ṣe n wo si eniyan nipa ifiwera awọn ẹya nẹtiwọọki ti o jinlẹ dipo awọn piksẹli aise. O ṣe pataki nitori lafiwe pixel-nipasẹ-piksẹli ni aṣiṣe jiya awọn iyipada kekere ati awọn alaye blurs, lakoko ti ipadanu oye san ere didasilẹ, awọn abajade ojulowo.
Pipadanu Iwoye ati LPIPS jẹ ti awọn ṣiṣan iṣẹ-iriran kọnputa ti o tumọ tabi ṣe agbekalẹ media wiwo fun itupalẹ, awọn iṣẹ ṣiṣe, ati ẹda.
Jin Dive
Awọn adanu aṣa bii L2 (aṣiṣe onigun mẹrin tumọ si) ṣe afiwe awọn aworan pixel-nipasẹ-piksẹli, nitorinaa iyipada piksẹli kan tabi awoara ti o yatọ die-die dabi aṣiṣe nla paapaa botilẹjẹpe eniyan ko ni akiyesi. Pipadanu oye dipo ṣiṣe awọn aworan mejeeji nipasẹ nẹtiwọọki iṣaaju (nigbagbogbo VGG) ati ṣe afiwe awọn iṣẹ ṣiṣe lati awọn ipele agbedemeji. Nitoripe awọn ẹya wọnyẹn ṣe koodu awọn egbegbe, awọn awoara, ati awọn ẹya ohun dipo awọn iye piksẹli deede, pipadanu naa ṣe deede dara julọ pẹlu idajọ eniyan, iwuri didasilẹ, awọn abajade otitọ ni itumọ. LPIPS (Ibajọra Aworan Patch Iro ti Kọ), ti a ṣe nipasẹ Zhang et al. ni 2018, formalizes yi: o jade jin awọn ẹya ara ẹrọ, normalizes wọn, ati ki o kan eko òṣuwọn calibrated lodi si egbegberun eda eniyan idajo, producing kan nikan ijinna Dimegilio ibi ti kekere tumo si siwaju sii perceptually bakanna.
Imọ-imọ-ẹrọ
LPIPS kọja awọn aworan mejeeji nipasẹ ẹhin ti o wa titi (VGG, AlexNet, tabi SqueezeNet), ẹyọkan-ṣe deede awọn imuṣiṣẹ ikanni ni awọn ipele pupọ, lẹhinna gba iyatọ onigun mẹrin ni ipo aye kọọkan. Eto kekere ti awọn iwuwo ikanni kọọkan ṣe iwọn awọn iyatọ wọnyẹn ṣaaju ki wọn jẹ aropin ni aye ati akopọ kọja awọn fẹlẹfẹlẹ. Awọn iwuwo wọnyẹn ni ikẹkọ lori iwe data BAPPS ti awọn idajọ yiyan-iyanju-meji ti eniyan, nitorinaa metiriki ṣe afihan ohun ti eniyan rii gangan kuku ju ijinna ẹya aise lọ.
Mastering Perceptual Loss ati LPIPS
Pipadanu oye ṣe iwọn bii awọn aworan meji ti o jọra ṣe n wo si eniyan nipa ifiwera awọn ẹya nẹtiwọọki ti o jinlẹ dipo awọn piksẹli aise. O ṣe pataki nitori lafiwe pixel-nipasẹ-piksẹli ni aṣiṣe jiya awọn iyipada kekere ati awọn alaye blurs, lakoko ti ipadanu oye san ere didasilẹ, awọn abajade ojulowo. Pipadanu Iwoye ati LPIPS jẹ ti awọn ṣiṣan iṣẹ-iriran kọnputa ti o tumọ tabi ṣe agbekalẹ media wiwo fun itupalẹ, awọn iṣẹ ṣiṣe, ati ẹda. Lati kọ oye ti o jinlẹ, tọju Isonu Iro ati LPIPS bi awoṣe iṣẹ, kii ṣe ẹya ẹyọkan: ṣalaye awọn abajade ti o fẹ, ṣe alaye awọn arosọ, ati sọtọ ohun ti eto le ṣe ni igbẹkẹle lati ohun ti o tun nilo idajọ amoye.
Ni iṣe, awọn ẹgbẹ ti o lagbara ni lilo Ipadanu Irora ati iṣedede iwọntunwọnsi LPIPS pẹlu awọn otitọ iṣẹ ṣiṣe bii didara data, iyatọ ina, ati isamisi aitasera. Wọn ṣe akọsilẹ awọn ibeere aṣeyọri ti o fojuhan, idanwo lodi si data ojulowo ati ṣiṣan iṣẹ, ati atunbere ti o da lori awọn ilana ikuna ti a ṣakiyesi dipo awọn bori ala-akoko kan. Eyi ni ibiti oye imọ-jinlẹ yipada si agbara ti o tọ kọja ọja, eto imulo, ati awọn iṣẹ ṣiṣe.
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn. Ni akoko kanna, Awọn ẹtọ aworan ati ifọkansi le di awọn eewu labẹ ofin ti o ba jẹ afihan. Ọna resilient julọ julọ ni lati darapọ iyara idanwo pẹlu ibawi ijọba: ṣiṣe awọn awakọ awakọ, mu ẹri mu, ṣe atẹjade awọn iwe ipinnu, ati imudojuiwọn awọn aabo nigbagbogbo bi ihuwasi awoṣe, awọn ireti olumulo, ati awọn ibeere ilana ti dagbasoke.
Ipa Ilana
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Real-World imuse
Awọn nẹtiwọọki ipinnu-giga ikẹkọ (fun apẹẹrẹ, SRGAN) nitorina awọn fọto ti o ga soke dabi didasilẹ ati ifojuri kuku ju blurry.
Iṣirowọn funmorawon aworan ati awọn kodẹki nipa titọka bi iwoye ṣe sunmọ aworan ti a yipada si atilẹba.
Gbigbe ara itọsọna, nibiti akoonu ti baamu nipasẹ awọn ẹya VGG jin kuku ju awọn piksẹli deede.
Benchmarking GAN ati awọn olupilẹṣẹ aworan kaakiri nipasẹ jijabọ ijinna LPIPS laarin awọn aworan ti ipilẹṣẹ ati gidi.
Awọn Ilana imuse
Isonu Iro ati LPIPS ni iṣe
Awọn nẹtiwọọki ipinnu-giga ikẹkọ (fun apẹẹrẹ, SRGAN) nitorina awọn fọto ti o ga soke dabi didasilẹ ati ifojuri kuku ju blurry.
Awọn nẹtiwọọki ipinnu-giga ikẹkọ (fun apẹẹrẹ, SRGAN) nitorinaa awọn fọto ti o ga julọ dabi didasilẹ ati ifojuri dipo awọn ẹgbẹ blurry nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe lori akoko.
Isonu Iro ati LPIPS ni iṣe
Iṣirowọn funmorawon aworan ati awọn kodẹki nipa titọka bi iwoye ṣe sunmọ aworan ti a yipada si atilẹba.
Ṣiṣayẹwo funmorawon aworan ati awọn kodẹki nipa igbelewọn bii oye ti o sunmọ aworan ti a yipada si awọn ẹgbẹ atilẹba nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe ni akoko pupọ.
Isonu Iro ati LPIPS ni iṣe
Gbigbe ara itọsọna, nibiti akoonu ti baamu nipasẹ awọn ẹya VGG jin kuku ju awọn piksẹli deede.
Gbigbe ara itọsọna, nibiti akoonu ti baamu nipasẹ awọn ẹya VGG jinlẹ dipo awọn piksẹli deede Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe lori akoko.
Isonu Iro ati LPIPS ni iṣe
Benchmarking GAN ati awọn olupilẹṣẹ aworan kaakiri nipasẹ jijabọ ijinna LPIPS laarin awọn aworan ti ipilẹṣẹ ati gidi.
Benchmarking GAN ati awọn olupilẹṣẹ aworan kaakiri nipasẹ jijabọ ijinna LPIPS laarin ipilẹṣẹ ati awọn aworan gidi Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe lori akoko.
Awọn ewu & Awọn ọna iṣọ
Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Ilana Ilana imuse
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.