Visual AI GUIDE

ControlNet

ControlNet bụ ihe mgbakwunye na-enye ụdị-ọgbọ oyiyi nhazi nhazi nhazi nke ọma, na-ahapụ gị ka ị jiri akụkụ, poses, maapụ miri emi, ma ọ bụ akwụkwọ edemede mee ihe.

Nchịkọta

ControlNet bụ ihe mgbakwunye na-enye ụdị-ọgbọ oyiyi nhazi nhazi nhazi nke ọma, na-ahapụ gị ka ị jiri akụkụ, poses, maapụ miri emi, ma ọ bụ akwụkwọ edemede mee ihe. Ọ na-atụgharị ederede-na-oyiyi site na igwe oghere ka ọ bụrụ ngwá ọrụ imewe nwere ike ịchịkwa.

ControlNet bụ nke kọmpụta na-arụ ọrụ ọhụụ nke na-akọwa ma ọ bụ na-emepụta mgbasa ozi anya maka nyocha, ọrụ na mmepụta ihe.

Ime miri emi

N'ịbụ nke Lvmin Zhang na ndị ọrụ ibe webatara na 2023, ControlNet na-ejikọta ya na ụdị mgbasa ozi a zụrụ azụ dị ka Stable Diffusion na-enweghị ịzụghachi ihe niile. Ọ na-emechi ngọngọ nzuzo nke U-Net mgbasa ozi ka ọ bụrụ nnomi enwere ike ịzụrụ, wee jikọọ nnomi ahụ laghachi azụ na nke mbụ oyi kpọnwụrụ site na oyiri-ntụgharị uche efu (zero-convs). Zero-convs ndị a na-amalite na-enweghị mmetụta, yabụ ọzụzụ na-amalite site na omume mbụ nke ụdị wee mụta ịgbanye ntụ oyi. Ndokwa ahụ bụ maapụ oghere: onyonyo ihu Canny, skeleton OpenPose, maapụ miri emi, nkpuchi nkebi, ma ọ bụ eserese siri ike. Ihe si na ya pụta bụ na onyonyo ewepụtara na-agbaso nhazi nke maapụ njikwa ebe ederede ozugbo na-edobe ụdị na ọdịnaya, na-enye ndị na-ese ihe nwere ntụkwasị obi, nhazi usoro ọzọ.

Nghọta nka nka

Ihe na-akọwa aghụghọ bụ zero-convolution. N'ihi na a na-ebunye akwa njikọ ahụ ka ọ bụrụ ihe efu efu, ngalaba ControlNet anaghị agbakwụnye ihe ọ bụla na mbụ, ya mere ihe nlereanya ahụ yiri nke mbụ na mmalite ọzụzụ. Nke a na-egbochi mkpọtụ na-emerụ ahụ nke ọkwa dị ọhụrụ ga-agbanye ma na-eme ka nhazi nke ọma guzosie ike ọbụna na obere datasets. Gradients na-abanye na zero-convs wee jiri nwayọọ nwayọọ mepee ụzọ ntụzịaka, na-amụta njikwa nhazi ahụ n'enweghị nsogbu.

Njikwa njikwa njikwa

ControlNet bụ ihe mgbakwunye na-enye ụdị-ọgbọ oyiyi nhazi nhazi nhazi nke ọma, na-ahapụ gị ka ị jiri akụkụ, poses, maapụ miri emi, ma ọ bụ akwụkwọ edemede mee ihe. Ọ na-atụgharị ederede-na-oyiyi site na igwe oghere ka ọ bụrụ ngwá ọrụ imewe nwere ike ịchịkwa. ControlNet bụ nke kọmpụta na-arụ ọrụ ọhụụ nke na-akọwa ma ọ bụ na-emepụta mgbasa ozi anya maka nyocha, ọrụ na mmepụta ihe. Iji wulite nghọta miri emi, na-emeso ControlNet dị ka ihe nlereanya na-arụ ọrụ, ọ bụghị otu atụmatụ: kọwaa ihe a chọrọ, dokwuo anya echiche, ma kewapụ ihe usoro ahụ nwere ike ime nke ọma na ihe ka na-achọ mkpebi ndị ọkachamara.

Na omume, ndị otu siri ike na-eji nguzozi njikwa ControlNet nwere eziokwu arụ ọrụ dị ka ogo data, iche iche ọkụ, na ịkpọ aha. Ha na-edepụta njirisi ịga nke ọma nke ọma, nwalee megide data ziri ezi yana usoro ọrụ, yana na-atụgharị dabere na usoro ọdịda ahụrụ karịa karịa mmeri otu oge. Nke a bụ ebe nghọta usoro ihe atụ na-atụgharị ghọọ ike na-adịgide adịgide n'ofe ngwaahịa, amụma na arụmọrụ.

Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ. N'otu oge ahụ, ikike onyonyo na nkwenye nwere ike bụrụ ihe egwu iwu ma ọ bụrụ na edoghị anya. Ụzọ kachasị na-agbanwe agbanwe bụ ijikọ ọsọ nnwale na ịdọ aka ná ntị ọchịchị: ndị na-anya ụgbọ elu, ijide ihe akaebe, bipụta ndekọ mkpebi, na na-aga n'ihu na-emelite nchekwa dị ka omume nlereanya, atụmanya ndị ọrụ, na ihe iwu chọrọ.

Mmetụta atụmatụ

Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ.

Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.

Otu ndị na-emepụta ihe nwere ike imepụta echiche ngwa ngwa site na ngbanwe akwụkwọ ntuziaka ole na ole.

Otu ndị na-emepụta ihe nwere ike imepụta echiche ngwa ngwa site na ngbanwe akwụkwọ ntuziaka ole na ole. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.

Ọrụ nwere ike iji onyonyo na akara vidiyo siri ike ịhazi.

Ọrụ nwere ike iji onyonyo na akara vidiyo siri ike ịhazi. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.

Ọdịnihu nke ControlNet

Ndokwa n'ụdị ControlNet na-aghọ akụrụngwa ọkọlọtọ na ngwaọrụ okike, yana stacking multi-condition (jikọta pose gbakwunyere omimi gbakwunyere ọnụ) yana ihe nkwụnye ọkụ dị ka T2I-Adapter na IP-Adapter. Na-atụ anya ntinye siri ike na mgbasa ozi vidiyo maka njikwa ngagharị na-agbanwe agbanwe, ndezi mkparịta ụka n'ezie, yana ụdị ejikọtara ọnụ na-anabata ọtụtụ ụdị njikwa n'otu oge, na-eme ka ahịrị dị n'etiti eserese na nsụgharị ikpeazụ.

Mmejuputa n'ezie n'ụwa

Iji skeleton OpenPose kpochie ọnọdụ agwa kpọmkwem mgbe ị na-agbanwe uwe na ndabere site na ngwa ngwa

Iji maapụ ihu Canny rụgharịa foto ụlọ ka ị na-echekwa ahịrị ụkpụrụ ụlọ ya

Na-atụgharị ihe odide aka siri ike ka ọ bụrụ ihe atụ a na-egbu maramara maka nka echiche na bọọdụ akụkọ

Itinye maapụ omimi ya mere ihe onyonyo ewepụtara na-akwanyere okirikiri nhọrọ ukwuu 3D maka ndị nrụpụta ngwaahịa na ihe njakịrị ime ụlọ.

Usoro mmejuputa

ControlNet na omume

Iji skeleton OpenPose kpochie ọnọdụ agwa kpọmkwem mgbe ị na-agbanwe uwe na ndabere site na ngwa ngwa.

Iji skeleton OpenPose kpochie ụdị agwa kpọmkwem mgbe ị na-agbanwe uwe na ndabere site na ngwa ngwa Otu egwuregwu na-enweta nsonaazụ kacha mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, debe ụzọ mmụba mmadụ maka ikpe ọnụ, ma soro ma uru nrụpụta yana ụgwọ njehie n'ime oge.

ControlNet na omume

Iji maapụ ihu Canny rụgharịa foto ụlọ ka ị na-echekwa ahịrị ụkpụrụ ụlọ ya.

Iji maapụ ihu Canny iji megharịa foto ụlọ mgbe ị na-echekwa ahịrị ụkpụrụ ụlọ ya, otu na-enwetakarị nsonaazụ kacha mma mgbe ha kọwapụtara ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka ọnụ ọnụ, ma soro ma uru nrụpụta yana ụgwọ njehie n'ime oge.

ControlNet na omume

Na-atụgharị ihe odide aka siri ike ka ọ bụrụ ihe atụ a na-egbu maramara maka nka echiche na bọọdụ akụkọ.

Ịtụgharị ihe odide aka siri ike ka ọ bụrụ ihe atụ na-egbu maramara maka nka echiche na bọọdụ akụkọ Otu dị iche iche na-enwetakarị nsonaazụ ka mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka oke ikpe, ma soro ma uru nrụpụta yana ụgwọ njehie n'oge.

ControlNet na omume

Itinye maapụ omimi ya mere ihe onyonyo ewepụtara na-asọpụrụ okirikiri nhọrọ ukwuu maka ndị nrụpụta ngwaahịa na ihe njakịrị ime ụlọ.

Itinye maapụ omimi ka ihe onyonyo emepụtara na-asọpụrụ okirikiri nhọrọ ukwuu maka ndị na-emepụta ngwaahịa na ihe njakịrị ime ụlọ Otu na-enwetakarị nsonaazụ kacha mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-edobe ụzọ ịrị elu mmadụ maka oke ikpe, ma soro ma uru nrụpụta na ụgwọ njehie na-aga n'ihu oge.

Ihe ize ndụ & okporo ụzọ nche

!

Ikike onyonyo na nkwenye nwere ike bụrụ ihe egwu dị n'iwu ma ọ bụrụ na edoghị anya.

!

Ọrụ nlereanya nwere ike ịdịgasị iche n'ofe ọkụ, igwe mmadụ, na gburugburu.

!

Enwere ike ghara ịhụ ihe dị mma ma ọ bụrụ na enyochaghị oke ntụkwasị obi.

Map mmejuputa

1

Kọwaa ụkpụrụ nnabata maka nkenke, icheta, na ụgwọ njehie.

Kọwaa ụkpụrụ nnabata maka nkenke, icheta, na ụgwọ njehie. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.

2

Nwalee na data dabara na ọnọdụ mmepụta n'ezie.

Nwalee na data dabara na ọnọdụ mmepụta n'ezie. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.

3

Tinye nyocha mmadụ maka obere obi ike ma ọ bụ amụma mmetụta dị elu.

Tinye nyocha mmadụ maka obere obi ike ma ọ bụ amụma mmetụta dị elu. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.

4

Sochie ihe nlere anya wee megharịa ka emechara mgbanwe igwefoto ma ọ bụ dataset.

Sochie ihe nlere anya wee megharịa ka emechara mgbanwe igwefoto ma ọ bụ dataset. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.

Nọgide na-eme nchọpụta