Mai departeUrmătorul ghid
inversarea textului nul
Inteligența vizuală AI
GHID AI vizual
Inversia textuală personalizează un model text-to-image prin optimizarea unei noi încorporare a simbolurilor din câteva imagini conceptuale, păstrând în același timp greutățile modelului preantrenat fixe.
Ascultă acest ghidNarativ AI · ~2 min
Hârtia de inversare textuală optimizează încorporarea unui pseudo-cuvânt nou în spațiul de încorporare al codificatorului de text folosind un set mic de imagini. Restul modelului text-to-image rămâne fix. Vectorul învățat poate fi apoi inserat în solicitări pentru generare. Aceasta este o metodă de personalizare eficientă din punct de vedere al parametrilor; rezultatele lucrării sunt specifice modelului, conceptelor și exemplelor testate și nu asigură generalizarea fiecărui punct de vedere sau context.
Antrenează încorporarea unui simbol dintr-un set mic de imagini ale unui obiect sau stil.
Folosiți jetonul într-un prompt text cu generatorul preantrenat înghețat.
Comparați vizualizările și contextele generate pentru a testa dacă simbolul învățat surprinde conceptul dorit.
Păstrați fișierul de încorporare separat de greutățile modelului original pentru partajare sau reutilizare.
Evaluați fidelitatea conceptului și comportamentul compozițional pe baza solicitărilor și vizualizărilor reținute. Înregistrați modelul de bază și condițiile prompte, deoarece rezultatele depind de modelul preantrenat și de imaginile de antrenament. Lucrarea citată nu stabilește o cerință universală de numărare a imaginilor și nu garantează păstrarea identității subiectului.
Buletin gratuit
Trei povești AI verificate în fiecare dimineață de zi lucrătoare, scrise în engleză simplă. Gratuit pentru totdeauna, fără reclame.
Un e-mail în fiecare zi lucrătoare. Dezabonare cu un singur clic. Nu vindem niciodată și nu împărtășim adresa ta.
Testează-te
Feedback instantaneu la fiecare răspuns și un certificat partajabil cu un ID verificabil după ce parcurgi un curs.
Susține educația AI gratuită. AI Understanding este o organizație nonprofit 501(c)(3) — fără reclame, fără barieră de plată, pentru totdeauna. Fă o donație
Inversia textuală personalizează un model text-to-image prin optimizarea unei noi încorporare a simbolurilor din câteva imagini conceptuale, păstrând în același timp greutățile modelului preantrenat fixe.
Lucrarea demonstrează învățarea unei încorporare pentru un concept furnizat de utilizator, cum ar fi un obiect sau un stil, din câteva imagini; aceasta testează conținutul țintă, separat de dimensiunea încorporarii.
O mână mică, de obicei 3-5 imagini ale conceptului, este suficientă pentru a învăța un simbol utilizabil.
Este salvat doar un singur vector de încorporare, astfel încât fișierul este mic și ușor de partajat.
Modelul de bază este înghețat; numai noua încorporare este actualizată, astfel încât cunoștințele anterioare sunt păstrate.
Pur și simplu includeți noul jeton (cum ar fi S*) într-un prompt text normal pentru a invoca conceptul.
Continuați să învățați
Mai multe ghiduri alese pentru acest subiect
Mai departeUrmătorul ghid
inversarea textului nul
Inteligența vizuală AI