DalšíDalší průvodce
Sémantické versus akustické zvukové tokeny
Zvuková AI
Vizuální průvodce AI
Konvoluční klasifikátor obrázků se může více spoléhat na místní povrchovou strukturu než na globální obrys objektu, v závislosti na jeho školení.
Poslechněte si tento návodAI-vyprávěný · ~3 min
Obrazy konfliktu tág, které kombinují tvar jednoho objektu s jinou texturou, odhalují, které tágo vyhrává. Pozorovaná preference textury u CNN trénovaných pomocí ImageNet je zjištěním výzkumu, nikoli tvrzením, že každá CNN vždy ignoruje tvar.
Lidé často rozpoznávají objekt přes změny vzoru povrchu, ačkoli lidé také používají texturu. Klasifikátor se může naučit jinou rovnováhu. Geirhos a kolegové použili obrázky, ve kterých tvar a textura ukazovaly na různé kategorie, k testování konvolučních neuronových sítí trénovaných ImageNet. V těchto experimentech testované CNN často sledovaly texturu více než lidští pozorovatelé. Tým také prozkoumal stylizované tréninkové obrázky, aby podpořil větší využití tvaru. Zjištění se týká hodnocených modelů a postupů; architektura, data a úloha mohou změnit rovnováhu. Obraz konfliktu vodítek je diagnostický, protože dva zdroje důkazů nesouhlasí. Představte si obrys a části těla kočky vyplněné povrchovým vzorem spojeným se slonem. Rozhodnutí na základě textury a rozhodnutí založené na tvaru nyní vytvářejí různé štítky. Obyčejná přesnost obrázků, kde se obě vodítka shodují, nemůže tuto preferenci odhalit. Skóre zkreslení tvaru shrnuje volby na definované sadě konfliktních podnětů, není absolutní mírou lidského porozumění nebo všech druhů robustnosti. Textura může být legitimně užitečná. Inspektor tkanin může potřebovat zjistit vady tkaní a klasifikátor materiálů má používat vlastnosti povrchu. Problém vzniká, když produkt musí rozpoznat identitu objektu po změně osvětlení, barvy, kamery nebo pozadí. Zvýšení preference tvaru může pomoci některým posunům, ale může také poškodit úkoly, kde textura nese zamýšlený signál. Stylizované školení mění jak vizuální statistiky, tak distribuci dat, takže hodnocení musí zahrnovat čisté obrázky, testy konfliktu cue-conflict a cílové podmínky nasazení. Chcete-li prozkoumat, zadejte úkol a vytvořte řízené obrázky, které zachovávají tvar při změně textury a naopak. Zkontrolujte, zda generované obrázky neobsahují artefakty, které se samy stávají zkratkami. Porovnejte modely a lidské poznámky podle stejného pravidla štítků. Nenárokujte si univerzálně lepší tágo z jednoho benchmarku. Užitečným výsledkem je vědět, na jaké informace model spoléhá a zda tato spolehlivost bude platit, když se jeho prostředí změní.
Výzkumník testuje obrázek ve tvaru kočky vykreslený s texturou podobnou slonovi a zaznamenává, jakou kategorii klasifikátor vybere.
Výrobní model je zkontrolován na stejné součásti s novou povrchovou úpravou, aby se zjistilo, zda změny textury převáží jeho geometrii.
Tým porovnává běžná a stylizovaná tréninková data, ale následně obojí ověřuje na fotografiích skutečného nasazení.
Hodnotitel hlásí rozhodnutí tvarových podnětů odděleně od přesnosti čistého obrazu, místo aby je nazýval stejnou metrikou.
Architektury a školicí recepty mohou týmům poskytnout větší kontrolu nad podněty, které obrazový model používá. Lepším cílem není maximální tvarové vychýlení pro každou aplikaci; je to preference funkce, která odpovídá úkolu a zůstává užitečná i po očekávaných změnách. Budoucí hodnocení mohou zahrnovat řízené konflikty tág spolu s přirozenými posuny v dokončení, osvětlení a kameře. Hlášení čisté přesnosti i spolehlivosti podnětu pomůže vysvětlit, proč se jeden model přenáší lépe než jiný. Týmy by měly nadále testovat skutečné příklady nasazení, protože sada syntetických konfliktů nemůže reprodukovat všechny vizuální podmínky, se kterými se produkt setká.
Newsletter zdarma
Tři ověřené příběhy ze světa AI každý všední den ráno, psané srozumitelnou angličtinou. Navždy zdarma, bez reklam.
Jeden e-mail každý všední den. Odhlásit se můžete jedním kliknutím. Vaši adresu nikdy neprodáváme ani nesdílíme.
Otestujte se
Okamžitá zpětná vazba ke každé odpovědi a sdílitelný certifikát s ověřitelným ID po absolvování kurzu.
Podpořte bezplatnou AI vzdělávání. AI Understanding je nezisková organizace 501(c)(3) — žádné reklamy, žádná platba za přístup, nikdy. Darujte
Konvoluční klasifikátor obrázků se může více spoléhat na místní povrchovou strukturu než na globální obrys objektu, v závislosti na jeho školení. Obrazy konfliktu tág, které kombinují tvar jednoho objektu s jinou texturou, odhalují, které tágo vyhrává. Pozorovaná preference textury u CNN trénovaných pomocí ImageNet je zjištěním výzkumu, nikoli tvrzením, že každá CNN vždy ignoruje tvar.
Architektury a školicí recepty mohou týmům poskytnout větší kontrolu nad podněty, které obrazový model používá. Lepším cílem není maximální tvarové vychýlení pro každou aplikaci; je to preference funkce, která odpovídá úkolu a zůstává užitečná i po očekávaných změnách. Budoucí hodnocení mohou zahrnovat řízené konflikty tág spolu s přirozenými posuny v dokončení, osvětlení a kameře. Hlášení čisté přesnosti i spolehlivosti podnětu pomůže vysvětlit, proč se jeden model přenáší lépe než jiný. Týmy by měly nadále testovat skutečné příklady nasazení, protože sada syntetických konfliktů nemůže reprodukovat všechny vizuální podmínky, se kterými se produkt setká.
Výsledek je zaměřen na testované modely a postupy při konfliktu podnětů.
Skóre operacionalizuje rozhodnutí na základě definované sady podnětů.
Učte se dál
Pro toto téma bylo vybráno více průvodců
DalšíDalší průvodce
Sémantické versus akustické zvukové tokeny
Zvuková AI