Nchịkọta
Tune-A-Video dị mma-na-akụ ụdị mgbasa ozi ederede-gaa na onyonyo a zụrụ azụ n'otu vidiyo ka ọ nwee ike degharịa obere vidiyo ahụ site na mkpali ederede ọhụrụ. Ọ dị mkpa n'ihi na ọ gosipụtara na ịchọghị nnukwu dataset vidiyo iji nweta ndezi vidiyo na-akpali ederede na-arụ ọrụ.
Tune-A-Video Otu-Shot edezi bụ nke kọmputa-ọhụụ workflows na-akọwa ma ọ bụ n'ịwa visual media maka nyocha, arụmọrụ, na okike.
Ime miri emi
Tune-A-Video, ewebata na mbubreyo 2022, na-akwado 'ọgbọ vidiyo otu-ise': ị na-enye ya otu vidiyo isi iyi gbakwunyere isiokwu, ọ na-amụtakwa nke ọma iji megharịa vidiyo ahụ n'okpuru mkpali ọhụrụ (na-agbanwe isiokwu, ụdị, ma ọ bụ àgwà) ka ị na-edebe mmegharị mbụ. Kama ịzụ ihe ngosi vidiyo site na ọkọ, ọ na-ebunye ihe nlere ederede gaa na onyonyo a zụrụ azụ (Stable Diffusion) n'ime ihe ngosi vidiyo pseudo site na ịgbatị mgbanwe 2D na nlebara anya n'ofe oge. Mgbe ahụ, ọ na-ada ụda naanị ntakịrị ihe na otu clip. N'ịtụle, ntụgharị DDIM nke okpokolo agba isi mmalite na-akwado nhazi ahụ ka ndezi ya na-adịru nwa oge kama ịmegharị fremu-to-frame.
Nghọta nka nka
Isi aghụghọ bụ 'nlegharị anya otu égbè' na nlebara anya na-adị obere oge. A na-emegharị nlebara anya onwe onye ihe onyonyo a ka etiti ọ bụla ga-aga na etiti nke mbụ na nke gara aga, na-agbasa ọdịdị yana na-eme ka njikọta ngagharị. Naanị matrices nlebara anya (na ọkwa oge) ka emelitere, na-edobe ngwa ngwa na ọnụ ala. Ntugharị DDIM na-atụgharị fremu isi iyi azụ ka ọ bụrụ mkpọtụ ka ọgbọ na-amalite site na nhazi-ichekwa latent kama mkpọtụ mkpọtụ.
Ịmalite Tune-A-Video Otu-mgbasa edezi
Tune-A-Video dị mma-na-akụ ụdị mgbasa ozi ederede-gaa na onyonyo a zụrụ azụ n'otu vidiyo ka ọ nwee ike degharịa obere vidiyo ahụ site na mkpali ederede ọhụrụ. Ọ dị mkpa n'ihi na ọ gosipụtara na ịchọghị nnukwu dataset vidiyo iji nweta ndezi vidiyo na-akpali ederede na-arụ ọrụ. Tune-A-Video Otu-Shot edezi bụ nke kọmputa-ọhụụ workflows na-akọwa ma ọ bụ n'ịwa visual media maka nyocha, arụmọrụ, na okike. Iji wulite nghọta miri emi, na-emeso Tune-A-Video One-Shot Editing dị ka ihe nlere anya na-arụ ọrụ, ọ bụghị otu njirimara: kọwaa nsonaazụ achọrọ, dokwuo anya echiche, ma kewaa ihe sistemụ nwere ike ime nke ọma na ihe ka na-achọ mkpebi ndị ọkachamara.
Na omume, ndị otu siri ike na-eji Tune-A-Video One-Shot Editing nguzozi ziri ezi yana ezigbo arụmọrụ dị ka ogo data, iche iche ọkụ, na ịkpọ aha. Ha na-edepụta njirisi ịga nke ọma nke ọma, nwalee megide data ziri ezi yana usoro ọrụ, yana na-atụgharị dabere na usoro ọdịda ahụrụ karịa karịa mmeri otu oge. Nke a bụ ebe nghọta usoro ihe atụ na-atụgharị ka ọ bụrụ ike na-adịgide adịgide gafee ngwaahịa, amụma na arụmọrụ.
Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ. N'otu oge ahụ, ikike onyonyo na nkwenye nwere ike bụrụ ihe egwu iwu ma ọ bụrụ na edoghị anya. Ụzọ kachasị na-agbanwe agbanwe bụ ijikọ ọsọ nnwale na ịdọ aka ná ntị ọchịchị: ndị na-anya ụgbọ elu, ijide ihe akaebe, bipụta ndekọ mkpebi, na na-aga n'ihu na-emelite nchekwa dị ka omume nlereanya, atụmanya ndị ọrụ, na ihe iwu chọrọ.
Mmetụta Strategic
Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ.
Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Otu ndị na-emepụta ihe nwere ike imepụta echiche ngwa ngwa site na ngbanwe akwụkwọ ntuziaka ole na ole.
Otu ndị na-emepụta ihe nwere ike imepụta echiche ngwa ngwa site na ngbanwe akwụkwọ ntuziaka ole na ole. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Ọrụ nwere ike iji onyonyo na akara vidiyo siri ike ịhazi.
Ọrụ nwere ike iji onyonyo na akara vidiyo siri ike ịhazi. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Mmejuputa n'ezie n'ụwa
Na-atụgharị obere vidiyo nke 'nwoke na-egwu ski' ka ọ bụrụ 'Spider-Man ski' ka ọ na-echekwa ihe osise mbụ.
Ichekwa ezigbo vidiyo nkịta na-eje ije n'ime ihe nkiri Van Gogh ma ọ bụ mmiricolor
Ịgbanwe àgwà isiokwu, dị ka ịgbanwe panda na-eri achara ka ọ bụrụ koala na-eri achara.
Ngosipụta echiche dị mkpirikpi maka mgbasa ozi site na-edezi otu obere vidiyo nwere mkpali dị iche iche
Usoro mmejuputa
Tune-A-Video Otu-shot edezi na omume
Na-atụgharị obere vidiyo nke 'nwoke na-egwu ski' ka ọ bụrụ 'Spider-Man ski' mgbe ị na-echekwa ihe osise mbụ.
Ịtụgharị vidiyo nke 'nwoke ski' ka ọ bụrụ 'Spider-Man skiing' ka ị na-echekwa ihe ngosi ihe osise mbụ Otu dị iche iche na-enwetakarị nsonaazụ ka mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka ikpe ikpe, ma soro ma uru nrụpụta na ụgwọ njehie na oge.
Tune-A-Video Otu-shot edezi na omume
Ichekwa ezigbo vidiyo nkịta na-eje ije n'ime ihe nkiri Van Gogh ma ọ bụ mmiricolor.
Ịmegharị ezigbo vidiyo nkịta na-eje ije n'ime Van Gogh ma ọ bụ ihe nkiri mmiricolor Otu egwuregwu na-enwetakarị nsonaazụ ka mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka ikpe ikpe, ma soro ma uru nrụpụta na ụgwọ njehie na-aga n'ihu oge.
Tune-A-Video Otu-shot edezi na omume
Ịgbanwe àgwà isiokwu, dị ka ịgbanwe panda na-eri achara ka ọ bụrụ achara na-eri koala.
Ịgbanwe àgwà isiokwu, dị ka ịgbanwe panda na-eri achara n'ime koala na-eri achara Ndị otu na-enwetakarị nsonaazụ kacha mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka ikpe ikpe, ma soro ma uru mmepụta yana ụgwọ njehie na oge.
Tune-A-Video Otu-shot edezi na omume
Ngosipụta echiche dị mkpirikpi maka mgbasa ozi site na-edezi otu obere vidiyo nwere mkpali dị iche iche.
Prototyping dị mkpirikpi echiche animation maka mgbasa ozi site na-edezi otu clip ntụaka nwere iche iche mkpali Otu na-enwekarị mma arụpụta mgbe ha na-akọwa àgwà ọnụ ụzọ n'ihu, na-edebe a mmadụ escalation ụzọ maka ihu ikpe, na soro ma arụpụtaghị uru na njehie na-eri na oge.
Ihe ize ndụ & okporo ụzọ nche
Ikike onyonyo na nkwenye nwere ike bụrụ ihe egwu dị n'iwu ma ọ bụrụ na edoghị anya.
Ọrụ nlereanya nwere ike ịdịgasị iche n'ofe ọkụ, igwe mmadụ, na gburugburu.
Enwere ike ghara ịhụ ihe dị mma ma ọ bụrụ na enyochaghị oke ntụkwasị obi.
Map mmejuputa
Kọwaa ụkpụrụ nnabata maka nkenke, icheta, na ụgwọ njehie.
Kọwaa ụkpụrụ nnabata maka nkenke, icheta, na ụgwọ njehie. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Nwalee na data dabara na ọnọdụ mmepụta n'ezie.
Nwalee na data dabara na ọnọdụ mmepụta n'ezie. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Tinye nyocha mmadụ maka obere obi ike ma ọ bụ amụma mmetụta dị elu.
Tinye nyocha mmadụ maka obere obi ike ma ọ bụ amụma mmetụta dị elu. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Sochie ihe nlere anya wee megharịa ka emechara mgbanwe igwefoto ma ọ bụ dataset.
Sochie ihe nlere anya wee megharịa ka emechara mgbanwe igwefoto ma ọ bụ dataset. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.