LegközelebbKövetkező útmutató
AI képgenerátorok művészeti osztályban
Vizuális AI
Vizuális MI ÚTMUTATÓ
Az AI képgenerátorok tévednek, mert a kezek kicsik, nagyon rugalmasak, gyakran részben rejtve vannak, és ritkán írják le a feliratokban.
Hallgassa meg ezt az útmutatótAI-narrált · ~3 min
A modellek anélkül tanulják meg, hogyan néznek ki a kezek a felszínen, anélkül, hogy megbízhatóan megismernék a szerkezetüket, például kezenként öt ujjat. A kézhibák a szintetikus képek jól ismert jeleivé váltak, és annak megértése, hogy miért fordulnak elő, megmagyarázza az újabb modellek fejlődését, és azt is, hogy az ujjak számlálása miért nem megbízható módszer a hamisítványok észlelésére.
A diffúziós modellek több milliárd kép-felirat párból tanulnak azáltal, hogy megtanulják megfordítani a hozzáadott zajt. Nagyon jók a helyi vizuális minták: a bőr textúrája, a megvilágítás, a kéz általános megjelenése. Amit soha nem kapnak meg, az egy kifejezett szabály, miszerint egy kéznek öt ujja meghatározott sorrendben kapcsolódik a tenyérhez. Számos tényező nehezíti a kezet. A kezek a legtöbb fénykép egy kis részét foglalják el, így kevés képpontot kapnak. A látens diffúziós modellek, mint például a Stable Diffusion, szintén nyolcszorosára zsugorítják a képeket minden dimenzióban, mielőtt létrehoznák, aminek következtében csak egy maroknyi látens sejt maradhat a kezében. A kezek rengeteg pózt vesznek fel, megragadják a tárgyakat, átfedik egymást és gyakran részben rejtettek, így az edzésadatok tele vannak hiányos nézetekkel. Az ujjak egyformán néznek ki, így az „ujj, ujj, ujj” kifejezést produkáló modellnek nincs erős jele, amely megmondja, mikor kell megállnia. A feliratok szinte soha nem említik a kezeket, nem is beszélve a pózról, így a felszólítás kevés útmutatást ad. Az eredmény egy sor ismerős hiba: extra vagy hiányzó ujjak, összeolvadt számjegyek, hüvelykujj a rossz oldalon, és a kezek tárgyakba vagy más emberekbe olvadnak. A fogak, a fülek és az ékszerek hasonló okokból romlanak el. Az újabb rendszerek csökkentették ezeket a hibákat. A nagyobb modellek, a nagyobb képzési felbontás, a jobban szűrt és feliratozott adatok, a transzformátor alapú architektúrák és az emberi preferencia-besorolások finomhangolása mind segítettek. A Midjourney 5-ös verziója 2023-ban széles körben ismertté vált a jobb kezek miatt, és több laboratóriumból származó későbbi modellek tovább fejlődtek. A hibák azonban nem tűntek el, különösen összetett pózokban, tömegben és dolgokat tartó kézben. Általános tévhit, hogy a modell „nem tud számolni”. Helyesebb azt mondani, hogy statisztikailag tanulja meg a megjelenést, és csak akkor alakul ki a helyes struktúra, ha az adatok és a modellkapacitás elegendő.
Egy korai Stable Diffusion portré azt mutatja, hogy valaki egy kávéscsészét tart, és hat ujja köré van tekeredve, ami tipikus kudarc, amikor egy modell sok egymást átfedő markolatpózt kever.
Egy régebbi modell csoportos jelenete egyesíti két ember kezét, ahol összeérnek, mert a modellnek nincs határozott elképzelése arról, hol végződik az egyik test és hol kezdődik a másik.
Egy művész a saját kezének fényképéből készített ControlNet OpenPose-t vagy mélységtérképet táplál be, hogy kikényszerítse a helyes pózt, majd befesti a fennmaradó hibákat.
Egy tényellenőr megjegyzi, hogy a feltételezett hamisítványnak teljesen normális kezei vannak, ami arra emlékeztet, hogy az újabb generátorok gyakran helyesen rajzolják le a kezeket, és más nyomokra van szükség.
A kézhibák valószínűleg folyamatosan csökkenni fognak, ahogy a modellek nőnek és a képzési adatok javulnak, de a szokatlan pózok, az összekulcsolt kezek és a tárgyakat manipuláló kezek keményebbek maradnak, mint egy egyszerű nyitott tenyér. A videógenerálás a probléma új verzióját adja, mivel az ujjaknak képről kockára egységesnek kell maradniuk. Mindenki számára, aki a hitelességet ítéli meg, a kézi ellenőrzés gyenge jel. A rosszul formázott kéz még mindig azt sugallja, hogy egy kép keletkezett, de a helyes kéz nem bizonyít semmit. A származási feljegyzések és a vízjelek megbízhatóbbak, mint az anatómia ellenőrzése.
Ingyenes hírlevél
Minden hétköznap reggel három ellenőrzött AI történet, egyszerű angol nyelven. Örökké ingyen, hirdetések nélkül.
Minden hétköznap egy e-mail. Egy kattintással lemondhat. Soha nem értékesítjük vagy osztjuk meg az Ön címét.
Teszteld magad
Azonnali visszajelzés minden válaszra, és megosztható tanúsítvány egy ellenőrizhető azonosítóval, miután sikeresen teljesít egy kurzust.
Támogassa az ingyenes AI oktatást. AI Understanding egy 501(c)(3) nonprofit – nincs hirdetés, nincs fizetőfal, soha. Tegyen adományt
A mesterséges intelligencia képgenerátorai tévednek, mert a kezek kicsik, nagyon rugalmasak, gyakran részben rejtettek, és ritkán írják le a feliratokban. A modellek anélkül tanulják meg, hogyan néznek ki a kezek a felszínen, anélkül, hogy megbízhatóan megismernék a szerkezetüket, például kezenként öt ujjat. A kézhibák a szintetikus képek jól ismert jeleivé váltak, és annak megértése, hogy miért fordulnak elő, megmagyarázza az újabb modellek fejlődését, és azt is, hogy az ujjak számlálása miért nem megbízható módszer a hamisítványok észlelésére.
A modellek megtanulják, hogyan néznek ki a dolgok statisztikailag. Az edzés során semmi sem ad kifejezett szabályt, miszerint a kéznek öt ujja van.
Egy kis kéz, amely minden dimenzióban nyolcszorosára zsugorodik, nagyon kevés helyet foglal el öt különböző ujj ábrázolásához.
A kézpózokat leíró szöveg nélkül a modell nem tud prompt szavakat kézszerkezethez kapcsolni.
A Midjourney 2023-ban kiadott 5-ös verziója széles körben ismertté vált a jobb lapokról, ami a skálázás és a jobb adatok szélesebb trendjének része.
A termés megnagyobbítása a kéznek sokkal több látens sejtet ad a regeneráció során, ami javítja a szerkezetét.
Tanulj tovább
További útmutatók készültek ehhez a témához
LegközelebbKövetkező útmutató
AI képgenerátorok művészeti osztályban
Vizuális AI