Kayayyakin AI JAGORA

Asarar Hankali da LPIPS

Asarar hasashe tana auna yadda hotuna biyu masu kama da juna suke kallon mutane ta hanyar kwatanta fasalin cibiyar sadarwa mai zurfi maimakon danyen pixels.

Dubawa

Asarar hasashe tana auna yadda hotuna biyu masu kama da juna suke kallon mutane ta hanyar kwatanta fasalin cibiyar sadarwa mai zurfi maimakon danyen pixels. Yana da mahimmanci saboda kwatancen pixel-by-pixel ba daidai ba yana azabtar da ƙananan canje-canje da ɓarna daki-daki, yayin da hasarar fahimi ke ba da sakamako mai kaifi.

Rashin Haskarewa da LPIPS na cikin ayyukan aikin hangen nesa na kwamfuta wanda ke fassara ko samar da kafofin watsa labarai na gani don bincike, ayyuka, da kerawa.

Zurfafa nutsewa

Hasara ta al'ada kamar L2 (kuskuren murabba'i) kwatanta hotuna pixel-by-pixel, don haka motsi-pixel guda ɗaya ko nau'in rubutu daban-daban yana kama da babban kuskure ko da yake ɗan adam ba sa lura. Asarar fahimta a maimakon haka tana gudanar da hotuna biyu ta hanyar sadarwar da aka riga aka horar (sau da yawa VGG) kuma tana kwatanta kunnawa daga tsaka-tsaki. Saboda waɗannan fasalulluka suna ɓoye gefuna, laushi, da sassan abu maimakon madaidaicin ƙimar pixel, asarar ta daidaita da kyau tare da hukuncin ɗan adam, yana ƙarfafa fitar da kaifi, amintaccen bayanan ma'ana. LPIPS (Kwantar da Hankalin Hoto Patch), wanda Zhang et al ya gabatar. a cikin 2018, ya tsara wannan: yana fitar da siffofi masu zurfi, yana daidaita su, kuma yana amfani da ma'aunin nauyi da aka kwatanta da dubban hukunce-hukuncen kamanni na ɗan adam, yana samar da maki ɗaya tazara inda ƙananan yana nufin mafi fahimta iri ɗaya.

Fahimtar Fasaha

LPIPS yana wucewa duka hotuna ta hanyar kafaffen kashin baya (VGG, AlexNet, ko SqueezeNet), naúrar tana daidaita kunna tashoshi a yadudduka da yawa, sannan ta ɗauki bambancin murabba'i a kowane wuri na sarari. Ƙananan ma'aunin ma'auni na kowane tashoshi da aka koya yana daidaita waɗannan bambance-bambancen kafin a ƙididdige su ta sarari da taƙaita su a cikin yadudduka. An horar da waɗancan ma'aunin nauyi akan tsarin bayanan BAPPS na hukunce-hukuncen zaɓi na zaɓi biyu na ɗan adam, don haka ma'aunin yana nuna abin da mutane ke fahimta a zahiri maimakon ɗan nesa mai nisa.

Jagorar Haɓaka Haskaka da LPIPS

Asarar hasashe tana auna yadda hotuna biyu masu kama da juna suke kallon mutane ta hanyar kwatanta fasalin cibiyar sadarwa mai zurfi maimakon danyen pixels. Yana da mahimmanci saboda kwatancen pixel-by-pixel ba daidai ba yana azabtar da ƙananan canje-canje da ɓarna daki-daki, yayin da hasarar fahimi ke ba da sakamako mai kaifi. Rashin Haskarewa da LPIPS na cikin ayyukan aikin hangen nesa na kwamfuta wanda ke fassara ko samar da kafofin watsa labarai na gani don bincike, ayyuka, da kerawa. Don gina fahimta mai zurfi, bi da hasarar hasashe da LPIPS azaman ƙirar aiki, ba sifa ɗaya ba: ayyana sakamakon da ake so, fayyace zato, da raba abin da tsarin zai iya yi da dogaro daga abin da har yanzu ke buƙatar yanke hukunci na ƙwararru.

A aikace, ƙungiyoyi masu ƙarfi suna amfani da Haɓaka Haskaka da daidaiton daidaituwa na LPIPS tare da haƙiƙanin aiki kamar ingancin bayanai, bambancin haske, da daidaiton lakabi. Suna rubuta ƙayyadaddun ƙa'idodin nasara, gwaji akan bayanan gaskiya da gudanawar aiki, da jujjuyawar bisa ga tsarin gazawar da aka lura maimakon cin nasara na lokaci ɗaya. Wannan shine inda fahimtar ka'idar ta juya zuwa iyawa mai dorewa a cikin samfura, manufofi, da ayyuka.

Kayayyakin AI na iya sarrafa aiki da bincike, ganowa, da ayyuka masu alama a sikelin. A lokaci guda, Haƙƙin Hoto da yarda na iya zama haɗari na shari'a idan ba a fayyace ba. Hanyar da ta fi dacewa ita ce haɗa saurin gwaji tare da horon gudanarwa: gudanar da matukin jirgi, kama shaida, buga rajistan ayyukan yanke shawara, da ci gaba da sabunta abubuwan tsaro kamar yadda halayen ƙira, tsammanin mai amfani, da buƙatun tsari ke tasowa.

Dabarun Tasiri

Kayayyakin AI na iya sarrafa aiki da bincike, ganowa, da ayyuka masu alama a sikelin.

Kayayyakin AI na iya sarrafa aiki da bincike, ganowa, da ayyuka masu alama a sikelin. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.

Ƙungiyoyin ƙirƙira za su iya samar da ra'ayoyi cikin sauri tare da ƙarancin bita da hannu.

Ƙungiyoyin ƙirƙira za su iya samar da ra'ayoyi cikin sauri tare da ƙarancin bita da hannu. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.

Ayyuka na iya amfani da siginar hoto da bidiyo waɗanda a baya suke da wahalar aiwatarwa.

Ayyuka na iya amfani da siginar hoto da bidiyo waɗanda a baya suke da wahalar aiwatarwa. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.

Makomar Asarar Hankali da LPIPS

Ma'auni na fahimta suna jujjuya daga kasusuwan CNN zuwa fasali daga nau'ikan kulawa da kai da hangen nesa kamar DINO da CLIP, waɗanda ke ɗaukar ingantattun ilimin tarukan. Yi tsammanin haɗin kai mai ƙarfi tare da horarwa-samfurin watsawa da kimanta rubutu-zuwa-hoto, da makin fahimta da aka kunna don daidaiton bidiyo na ɗan lokaci. Masu bincike kuma suna binciken wuraren makafi na LPIPS: ana iya yaudare shi da gaba kuma yana da alaƙa da inganci da aminci sosai, yana ƙarfafa sabbin ma'auni masu alaƙa da ɗan adam kamar DITS da hanyoyin haɗin gwiwa.

Aiwatar da Gaskiyar Duniya

Horar da manyan cibiyoyin sadarwa (misali, SRGAN) don haka hotuna masu girman gaske suna kallon kaifi da rubutu maimakon blush.

Ƙimar damfara hoto da codecs ta hanyar ƙididdige yadda fahimtar yanayin rufe hoton da aka yanke zuwa asali.

Canja wurin salon jagora, inda abun ciki ya dace ta hanyar zurfin fasalin VGG maimakon ainihin pixels.

Benchmarking GAN da masu samar da hoto na watsawa ta hanyar ba da rahoton tazarar LPIPS tsakanin hotuna da aka ƙirƙira da na gaske.

Hanyoyin Aiwatarwa

Asarar Hankali da LPIPS a aikace

Horar da manyan cibiyoyin sadarwa (misali, SRGAN) don haka hotuna masu girman gaske suna kallon kaifi da rubutu maimakon blush.

Horar da manyan cibiyoyin sadarwa (misali, SRGAN) don haka hotuna masu girman gaske suna kallon kaifi da rubutu maimakon ƙungiyoyi masu ruɗi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ma'auni masu inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in gefe, da bin duk nasarorin samarwa da ƙimar kuskure akan lokaci.

Asarar Hankali da LPIPS a aikace

Ƙimar damfara hoto da codecs ta hanyar ƙididdige yadda fahimtar yanayin rufe hoton da aka yanke zuwa asali.

Ƙididdigar matsawar hoto da codecs ta hanyar ƙididdige yadda fahimtar kusancin hoton da aka yanke zuwa ainihin Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ƙofofin inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in gefen, da kuma bin duk nasarorin samarwa da ƙimar kuskure akan lokaci.

Asarar Hankali da LPIPS a aikace

Canja wurin salon jagora, inda abun ciki ya dace ta hanyar zurfin fasalin VGG maimakon ainihin pixels.

Canja wurin salon jagora, inda abun ciki ya dace ta hanyar zurfin fasalulluka na VGG maimakon ainihin pixels Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ma'auni masu inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in gefe, da bin duk nasarorin samarwa da farashi na kuskure akan lokaci.

Asarar Hankali da LPIPS a aikace

Benchmarking GAN da masu samar da hoto na watsawa ta hanyar ba da rahoton tazarar LPIPS tsakanin hotuna da aka ƙirƙira da na gaske.

Benchmarking GAN da masu samar da hoto na watsawa ta hanyar ba da rahoton nesa na LPIPS tsakanin ƙirƙira da hotuna na gaske Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ƙofofin inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in gefe, da bin duk nasarorin samarwa da ƙimar kuskure akan lokaci.

Hatsari & Tsare-tsare

!

Haƙƙoƙin hoto da yarda na iya zama haɗari na shari'a idan ba a fayyace ba.

!

Ayyukan samfuri na iya bambanta a ko'ina cikin haske, ƙididdiga, da mahalli.

!

Ƙarya tabbataccen ƙila ba za a iya lura da shi ba sai dai idan an kula da ƙofofin amincewa.

Taswirar Hanya

1

Ƙayyade ma'auni na karɓa don daidaito, tunowa, da farashi na kuskure.

Ƙayyade ma'auni na karɓa don daidaito, tunowa, da farashi na kuskure. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

2

Gwada tare da bayanan da suka dace da ainihin yanayin samarwa.

Gwada tare da bayanan da suka dace da ainihin yanayin samarwa. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

3

Ƙara bita na ɗan adam don ƙarancin amincewa ko tsinkaya mai tasiri.

Ƙara bita na ɗan adam don ƙarancin amincewa ko tsinkaya mai tasiri. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

4

Bi diddigin ƙirar ƙira kuma sake ingantawa bayan canje-canjen kamara ko saitin bayanai.

Bi diddigin ƙirar ƙira kuma sake ingantawa bayan canje-canjen kamara ko saitin bayanai. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

Ci gaba da Bincike