Dubawa
Marigold yana sake fasalin samfurin watsa shirye-shiryen da aka riga aka horar (Stable Diffusion) don tsinkayar taswirorin zurfin zurfi sosai. Yana nuna za ku iya juyar da wadataccen ilimin gani na janareta zuwa ainihin kayan aiki na fahimta tare da ƙarancin bayanan horo.
Ƙimar Zurfin Yaɗawar Marigold na cikin ayyukan aikin hangen nesa na kwamfuta wanda ke fassara ko samar da kafofin watsa labarai na gani don bincike, ayyuka, da ƙirƙira.
Zurfafa nutsewa
Marigold (ETH Zurich, CVPR 2024 Mafi kyawun Bayanin Takarda Mai Girma) yana sake fasalin ƙididdigewa mai zurfi azaman matsalar tsara yanayin yanayi. Maimakon horar da hanyar sadarwa mai zurfi daga karce, yana da kyau-saukar da Stable Diffusion don 'ƙirƙira' zurfin taswira mai sharadi akan hoton shigarwa. Hankali shine cewa samfurin da aka horar don haɗa hotunan hoto ya riga ya koyi ilimin lissafi, haske, da tsari mai zurfi a cikin sararin samaniyar sa, daidai abubuwan da ke da amfani ga zurfin. Abin sha'awa, Marigold ya kasance mai kyau-saukar akan saitin bayanan roba kawai (kamar Hypersim da Virtual KITTI) amma duk da haka ya cika da kyau ga ainihin hotuna sifili. Yana haifar da zurfin dangi mai banƙyama tare da kyawawan cikakkun bayanai na musamman, kodayake ƙin yarda ya sa ya yi hankali fiye da samfuran ciyarwa kamar DepthAnything.
Fahimtar Fasaha
Marigold yana aiki a cikin ɓoyewar sarari na Stable Diffusion. Duka hoton da taswirar zurfin suna VAE iri ɗaya ne; U-Net ɗin yana da kyau-saukarwa don ƙirƙira zurfin latent sharadi akan latent hoto mai tsabta. Bisa ga ƙididdigewa yana gudanar da daidaitaccen madaidaicin madaidaicin madauki, sannan yana yanke latent mai zurfi. Saboda samfuransa, ana iya haɗa gudummuwa da yawa don kwanciyar hankali, ƙididdige ciniki don daidaito. Daga baya 'LCM' da nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan nau'ikan iri) da masu siye da siye da siye da siye da siye da siye da siye da girkin girkin girkin girki da aka girka sun yanke matakan matakai da yawa zuwa fasfo guda.
Ƙimar Zurfin Yaduwa Marigold
Marigold yana sake fasalin samfurin watsa shirye-shiryen da aka riga aka horar (Stable Diffusion) don tsinkayar taswirorin zurfin zurfi sosai. Yana nuna za ku iya juyar da wadataccen ilimin gani na janareta zuwa ainihin kayan aiki na fahimta tare da ƙarancin bayanan horo. Ƙimar Zurfin Yaɗawar Marigold na cikin ayyukan aikin hangen nesa na kwamfuta wanda ke fassara ko samar da kafofin watsa labarai na gani don bincike, ayyuka, da ƙirƙira. Don gina zurfin fahimta, bi da Ƙididdiga mai zurfi na Marigold Diffusion a matsayin samfurin aiki, ba fasali ɗaya ba: ayyana sakamakon da ake so, bayyana zato, da raba abin da tsarin zai iya yi da dogaro daga abin da har yanzu ke buƙatar yanke hukunci na ƙwararru.
A aikace, ƙaƙƙarfan ƙungiyoyi masu amfani da Marigold Diffusion Zurfin Kiyasin Kiyasin Ma'auni tare da haƙiƙanin aiki kamar ingancin bayanai, bambancin haske, da daidaiton lakabi. Suna rubuta ƙayyadaddun ƙa'idodin nasara, gwaji akan bayanan gaskiya da gudanawar aiki, da jujjuyawar bisa ga tsarin gazawar da aka lura maimakon cin nasara na lokaci ɗaya. Wannan shine inda fahimtar ka'idar ta juya zuwa iyawa mai dorewa a cikin samfura, manufofi, da ayyuka.
Kayayyakin AI na iya sarrafa aiki da bincike, ganowa, da ayyuka masu alama a sikelin. A lokaci guda, Haƙƙin Hoto da yarda na iya zama haɗari na shari'a idan ba a fayyace ba. Hanyar da ta fi dacewa ita ce haɗa saurin gwaji tare da horon gudanarwa: gudanar da matukin jirgi, kama shaida, buga rajistan ayyukan yanke shawara, da ci gaba da sabunta abubuwan tsaro kamar yadda halayen ƙira, tsammanin mai amfani, da buƙatun tsari ke tasowa.
Dabarun Tasiri
Kayayyakin AI na iya sarrafa aiki da bincike, ganowa, da ayyuka masu alama a sikelin.
Kayayyakin AI na iya sarrafa aiki da bincike, ganowa, da ayyuka masu alama a sikelin. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.
Ƙungiyoyin ƙirƙira za su iya samar da ra'ayoyi cikin sauri tare da ƙarancin bita da hannu.
Ƙungiyoyin ƙirƙira za su iya samar da ra'ayoyi cikin sauri tare da ƙarancin bita da hannu. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.
Ayyuka na iya amfani da siginar hoto da bidiyo waɗanda a baya suke da wahalar aiwatarwa.
Ayyuka na iya amfani da siginar hoto da bidiyo waɗanda a baya suke da wahalar aiwatarwa. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.
Aiwatar da Gaskiyar Duniya
Ciro zurfin-girma mai kyau daga zane-zane da hotunan samfur don haskakawa da izgili na 3D.
Samar da taswirorin zurfin daki-daki da aka yi amfani da su azaman sanyaya don sarrafa hoto da tsarar bidiyo.
Taimakawa fim ɗin da ƙungiyoyin VFX a cikin matte da aikin parallax inda daidaitattun abubuwan ke da mahimmanci.
Yin hidima azaman tushen bincike yana nuna yadda ake daidaita abubuwan ƙirƙira kafin ayyukan tsinkaya masu yawa.
Hanyoyin Aiwatarwa
Ƙimar Zurfin Yaɗa Marigold a aikace
Ciro zurfin-girma mai kyau daga zane-zane da hotunan samfur don haskakawa da izgili na 3D.
Cire zurfin zurfi daga gine-gine da hotuna na samfur don haskakawa da izgili na 3D Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ma'auni masu inganci a gaba, kiyaye hanyar haɓakar ɗan adam don ƙararraki, da bin diddigin nasarorin samarwa da ƙimar kuskure akan lokaci.
Ƙimar Zurfin Yaɗa Marigold a aikace
Samar da taswirorin zurfin daki-daki da aka yi amfani da su azaman sanyaya don sarrafa hoto da tsarar bidiyo.
Ƙirƙirar taswirorin zurfin dalla-dalla da aka yi amfani da su azaman sanyaya don hoto mai iya sarrafawa da Ƙungiyoyin tsara bidiyo yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ƙofofin inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in gefe, da bin duk nasarorin samarwa da ƙimar kuskure akan lokaci.
Ƙimar Zurfin Yaɗa Marigold a aikace
Taimakawa fim ɗin da ƙungiyoyin VFX a cikin matte da aikin parallax inda daidaitattun abubuwan ke da mahimmanci.
Taimakawa fina-finai da ƙungiyoyin VFX a cikin matte da parallax aiki inda daidaitattun al'amura Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ma'auni masu inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in gefe, da bin duk nasarorin samarwa da ƙimar kuskure a kan lokaci.
Ƙimar Zurfin Yaɗa Marigold a aikace
Yin hidima azaman tushen bincike yana nuna yadda ake daidaita abubuwan ƙirƙira kafin ayyukan tsinkaya masu yawa.
Yin aiki azaman tushen bincike yana nuna yadda ake daidaita abubuwan haɓakawa kafin manyan ayyukan hasashe Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ma'auni masu inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'i, da kuma bin diddigin nasarorin samarwa da ƙimar kuskure akan lokaci.
Hatsari & Tsare-tsare
Haƙƙoƙin hoto da yarda na iya zama haɗari na shari'a idan ba a fayyace ba.
Ayyukan samfuri na iya bambanta a ko'ina cikin haske, ƙididdiga, da mahalli.
Ƙarya tabbataccen ƙila ba za a iya lura da shi ba sai dai idan an kula da ƙofofin amincewa.
Taswirar Hanya
Ƙayyade ma'auni na karɓa don daidaito, tunowa, da farashi na kuskure.
Ƙayyade ma'auni na karɓa don daidaito, tunowa, da farashi na kuskure. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.
Gwada tare da bayanan da suka dace da ainihin yanayin samarwa.
Gwada tare da bayanan da suka dace da ainihin yanayin samarwa. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.
Ƙara bita na ɗan adam don ƙarancin amincewa ko tsinkaya mai tasiri.
Ƙara bita na ɗan adam don ƙarancin amincewa ko tsinkaya mai tasiri. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.
Bi diddigin ƙirar ƙira kuma sake ingantawa bayan canje-canjen kamara ko saitin bayanai.
Bi diddigin ƙirar ƙira kuma sake ingantawa bayan canje-canjen kamara ko saitin bayanai. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.