Visual AI Itọsọna

Aṣa Itankale Olona-Concept Tuning

Itankale Aṣa jẹ ọna titọ-itanran iwuwo fẹẹrẹ ti o nkọ awoṣe ọrọ-si-aworan awọn imọran ti ara ẹni tuntun, bii aja rẹ tabi alaga kan pato, lati awọn fọto diẹ.

2 min kakẹhin imudojuiwọn

Akopọ

Its standout feature is composing several newly learned concepts together in one generated scene.

Jin Dive

Itusilẹ nipasẹ Adobe ati awọn oniwadi CMU ni ọdun 2022, Itupalẹ Aṣa ṣe adani awọn awoṣe bii Itankale Iduroṣinṣin laisi atunkọ gbogbo nẹtiwọọki naa. Dipo mimu gbogbo iwuwo dojuiwọn, o ṣe awari pe mimu dojuiwọn bibẹ kekere kan nikan, bọtini ati awọn matrices asọtẹlẹ iye ni awọn fẹlẹfẹlẹ akiyesi agbelebu, ti to lati fa imọran tuntun lati aijọju awọn aworan 4 si 20. Eyi ntọju yiyi ni iyara (iṣẹju) ati ibi ipamọ kekere (megabyte kuku ju gigabytes). Ni pataki, o le kọ ẹkọ awọn imọran lọpọlọpọ ni ẹẹkan nipasẹ ikẹkọ apapọ tabi nipa didapọ awọn imọran ikẹkọ lọtọ ni lilo iṣapeye ti o ni ihamọ. Iyẹn jẹ ki o tọ fun, sọ, ologbo rẹ kan pato ti o joko lori alaga apẹrẹ kan pato, awọn ọna ero-ọkan kan n tiraka lati darapo.

Imọ-imọ-ẹrọ

Ifarabalẹ-agbelebu ni ibiti ọrọ ti o tọ ni ipa lori aworan; awọn ami ọrọ ṣe awọn ibeere ti o wa si awọn ẹya wiwo ti awoṣe tan kaakiri nipasẹ bọtini ati awọn matiri iye. Itankale aṣa ṣe didi pupọ julọ ti U-Net ati tunes nikan awọn asọtẹlẹ K ati V wọnyẹn, awọn ẹya ti o ni iduro julọ fun sisọ awọn ọrọ si irisi. O tun nlo eto isọdọtun ti awọn aworan gidi pinpin ẹka ero lati ṣe idiwọ awoṣe lati ṣaju ati gbagbe itumọ ọrọ gbooro.

Ipa Ilana

Iyara ati iwọn

Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.

Kọ awọn yiyan

Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.

Ẹgbẹ ati ṣiṣan iṣẹ

Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.

Ojo iwaju ti Aṣa tan kaakiri Olona-Concept Tuning

Isọdi-ara-pupọ ti ara ẹni n ṣajọpọ pẹlu awọn ilolupo ilolupo ti nmu badọgba bi LoRA, nibiti ọpọlọpọ awọn modulu ero kekere le ti dapọ ni akoko itọkasi. Awọn ọna ṣiṣe iwaju ni ifọkansi lati ṣajọ awọn dosinni ti awọn imọran aṣa ni mimọ laisi ẹjẹ ikalara (awọ ologbo ti n jo sori alaga), ati lati ṣe atunṣe ni iṣẹju-aaya tabi paapaa koodu koodu-nikan, laisi iṣapeye. Reti eyi lati ṣe atilẹyin iran dukia deede-brand, awọn avatar ti ara ẹni, ati isọdi ẹrọ lori ẹrọ.

Real-World imuse

Kọ ẹkọ awoṣe ohun ọsin rẹ pato lati ọwọ awọn fọto, lẹhinna ṣiṣẹda ni awọn iduro tuntun, awọn aṣọ, ati awọn eto

Kọ ẹkọ ọja ami iyasọtọ kan (sneaker tabi igo) ati mascot ami iyasọtọ kan, lẹhinna ṣajọ mejeeji ni aworan tita kan

Yiyaworan ohun aworan ti ara ẹni pẹlu irisi ọmọ ẹgbẹ ẹbi ati gbigbe wọn papọ ni awọn iṣẹlẹ ti a ṣẹda

Apapọ ohun-ọṣọ aṣa aṣa pẹlu ara yara aṣa lati ṣe ẹlẹyà awọn imọran inu inu

Awọn ewu & Awọn ọna iṣọ

Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.

Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.

Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.

Ilana Ilana imuse

1

Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.

2

Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.

3

Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.

4

Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.

Tesiwaju Ṣiṣawari

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Custom Diffusion Multi-Concept Tuning quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Bẹrẹ adanwo

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Itọsọna atẹle

Ilana Itankale fun Iṣakoso Robot

Awọn ibeere ti a beere nigbagbogbo

What is Custom Diffusion Multi-Concept Tuning?

Itankale Aṣa jẹ ọna titọ-itanran iwuwo fẹẹrẹ ti o nkọ awoṣe ọrọ-si-aworan awọn imọran ti ara ẹni tuntun, bii aja rẹ tabi alaga kan pato, lati awọn fọto diẹ. Ẹya iduro rẹ jẹ kikojọ ọpọlọpọ awọn imọran tuntun ti a kọ papọ ni iṣẹlẹ ti ipilẹṣẹ kan.

Apa wo ni awoṣe itankale ṣe Itankale Aṣa nipataki itanran-tune?

O ṣe imudojuiwọn o kan akiyesi-agbelebu K ati V matrices, eyiti o so awọn ọrọ pọ si irisi, titọ ni iyara ati faili ti o fipamọ ni kekere.

Kini Itankale Aṣa ti o ṣe akiyesi julọ fun akawe si awọn ọna ero-ọkan?

Agbara ibuwọlu rẹ jẹ iran ero-ọpọlọpọ, ni apapọ ọpọlọpọ awọn koko-ọrọ ti ara ẹni papọ.

O fẹrẹ to awọn aworan apẹẹrẹ melo ni Itankale Aṣa nilo lati kọ ẹkọ kan?

O kọ ẹkọ lati ọwọ kekere ti awọn aworan, ṣiṣe isọdi ti ara ẹni wulo fun awọn olumulo lojoojumọ.

Kini idi ti Itankale Aṣa lo ṣeto awọn aworan isọdọtun lati ẹka gbooro ti imọran?

Awọn aworan isọdọtun jẹ ki itumọ gbogbogbo ti ọrọ ẹka jẹ mimule ki awoṣe ko ba ṣubu si imọran tuntun nikan.

Bawo ni a ṣe le lo awọn imọran Itan kaakiri Aṣa meji ti o lọtọ lọtọ?

Awọn imọran ti a kọ ni ominira le ṣe idapọpọ nipasẹ iṣapeye ti o ni idiwọ fọọmu-pipade, ti n mu awọn itusilẹ apapọ ṣiṣẹ.