Résumé
Kling model text-à-video la bu baax te bawoo ci Kuaishou, liggéeyukaay bu mag bi tuddu Kuaishou, mën defar ay clip yu dëggu, ànd ci yëngu ak physique yu dëgër. Dafa am solo ndax nekk na njiit lu bokkul ak waa sowwu jàng ci OpenAI's Sora ak yeneen defarkati wideo.
Kling by Kuaishou ñu ngi koy gëna xamee ci wàllu pexe, xeetu jëfandikoo, dogal ci platform, ak jàppante ci ecosystem.
Plongeur bu xóot
Kling (Keling) benn xeetu wideo la bu Kuaishou genne ci weeru suwe 2024, di sosiete bu nekk ci Beijing bi nga xamni ap aplikaasioŋu wideo bu gàtt bu siiw lool di xëccoo ak Douyin/TikTok ci Chine. Kling dafa jël raw gàddu gi ci defar clip yu yegg ba ñaari simili ci guddaay ak 30 kadre ci seconde ci 1080p, ak yëngu-yëngu yu dëggu, melokaanu kanam, ak topp dinaamiku physique bu melni ni ndox mi di sotti wala tissu bi di yëngu. Dafay jàppale mbind-ci-wideo, nataal-ci-wideo, ak man-man yu melni broos buy yëngu, doxal kamera, ak lip-sync. Kuaishou dafa gaaw baamtu ci ay weer (Kling 1.5, 1.6, 2.0 ak ginaaw), gëna yombal topp ak kalite. Ndax Kuaishou amna done yu bari ci wideo yu gàtt te di liggéeyal téemeeri milioŋ ciy jëfandikukat, Kling dafa nekk jumtukaayu defarkat ak wane kàttan IA bu frontiere bu Chine.
Gis-gis xarala
Kling dafa boole architecture diffusion-transformateur (DiT) ak bàyyi xel ci barab ak jamono 3D, loolu tax mu wane ni mbir yi di doxee ak di jaxasoo ci diir bi, moo gën ñuy jëfandikoo kaadar yi seen bopp. Benn autoencoder bu wuute dafay komprime wideo ci barab bu nëbbu bu dëgër ngir mëna defar bu baax, ba noppi ñu tàggat model bi mu sargal plausibilité physique. Broos buy yëngu ak doxalinu kamera yi dañuy may jëfandikukat yi trajectoire yuñ mëna jaar, ci noonu denoising diffusion dafay defaraat kadre yu leer te am dayo bu kawe ci bruit biy bawoo ci laaj bi.
Mastering Kling by Kuaishou
Kling model text-à-video la bu baax te bawoo ci Kuaishou, liggéeyukaay bu mag bi tuddu Kuaishou, mën defar ay clip yu dëggu, ànd ci yëngu ak physique yu dëgër. Dafa am solo ndax nekk na njiit lu bokkul ak waa sowwu jàng ci OpenAI's Sora ak yeneen defarkati wideo. Kling by Kuaishou ñu ngi koy gëna xamee ci wàllu pexe, xeetu jëfandikoo, dogal ci platform, ak jàppante ci ecosystem. Ngir tabax xam-xam bu xóot, jàppal Kling by Kuaishou ni xeetu liggéey, du benn màndarga: fësal njariñ yi nga bëgg, leeral xalaat yi, ba noppi tàqale li sistem bi mëna def ci anam wu wóor ak li ba leegi soxla àtteb kàngam.
Ci jëf, ekip yu am doole yiy jëfandikoo Kling by Kuaishou dañuy jàngat pexem jaaykat bi, wóorum kàrtu yoon wi, ak risku tëjug balaa ñuy jël dogal. Dañuy bind kritër yu leer ngir am ndam, natt leen ci done yu dëggu ak def liggéey, ba noppi ñu baamtu ci anamu ñàkka mëna seetlu, du ci benn yoon benchmark wins. Mooy barab bi xam-xam theorie bi di soppiku nekk kàttan buy yàgg ci produit yi, ci politik yi ak ci liggéey yi.
Kartu yoonu jaaykat yi ñooy wane man-man yi sa ekip mëna tabax ci kanam. Ci jamano jooju, annonce lansma yi mën nañu raw stabilite ci liggéeyu production dëgg. Xeetu jëf bi gëna dëgër mooy boole gaawaayu jàngat ak disipline nguur: doxal pilote, jàpp firnde, siiwal dogal yi, ak wéy di yeesal kaaraange gi ci anam wi ñuy doxalee, li jëfandikukat bi di xaar, ak sàrti sàrt yi di jëm kanam.
njeextalu pexe
Kartu yoonu jaaykat yi ñooy wane man-man yi sa ekip mëna tabax ci kanam.
Kartu yoonu jaaykat yi ñooy wane man-man yi sa ekip mëna tabax ci kanam. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.
Anamu jënd ak jaay ak tànneefi dugal dañu am njeexital ci njëg ak risk ci diir bu xawa yàgg.
Anamu jënd ak jaay ak tànneefi dugal dañu am njeexital ci njëg ak risk ci diir bu xawa yàgg. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.
Li liggéeyukaay bi di ñaax mooy tëral ni produit bi di doxee, kaaraange gi ak ubbeeku gi.
Li liggéeyukaay bi di ñaax mooy tëral ni produit bi di doxee, kaaraange gi ak ubbeeku gi. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.
Doxal ci àdduna dëgg
Ab defarkatu wideo bu gàtt ci Kuaishou dafay anime ab storyboard mu nekk ab clip bu rafet te filmewul.
Jaaykatu e-commerce dafay defar ay wideo di wane produit yi ñuy yëngu ci anam wu dëggu.
Defarkatu filmu dafay jëfandikoo image-to-video ak ay doxalinu kamera ngir njëkka xool seen balaa muy filme dëgg.
Piblisitekat bi dafay defar ay wideo yu bari ci kàmpaañ ci anam wu gaaw te yomb.
Modèlu jëfandikoo
Kling by Kuaishou in practice
Ab defarkatu wideo bu gàtt ci Kuaishou dafay anime ab storyboard mu nekk ab clip bu rafet te filmewul.
Benn defarkatu wideo bu gàtt ci Kuaishou dafay anime benn storyboard ci benn clip promotionel bu leer te du filme. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee ay kalite ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp njariñu produit ak njëgu njuumte ci diir bu gàtt.
Kling by Kuaishou in practice
Jaaykatu e-commerce dafay defar ay wideo di wane produit yi ñuy yëngu ci anam wu dëggu.
Jaaykatu e-commerce dafay defar ay wideo di wane produit yi di wane mbir yi ci mouvement realiste. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee ay threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp njariñu produit yi ak njëgu njuumte yi ci diir bu gàtt.
Kling by Kuaishou in practice
Defarkatu filmu dafay jëfandikoo image-to-video ak ay doxalinu kamera ngir njëkka xool seen balaa muy filme dëgg.
Defarkatu filmu dafay jëfandikoo nataal-ci-wideo ak doxalinu kamera ngir njëkka seetlu benn seen balaa ñuy filme dëgg. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxe ay poñ yu baax ci kanam, tëye yoonu eskalaasioŋ nit ngir jafe-jafe yi, ba noppi topp njariñu liggéey bi ak njëgu njuumte yi ci diir bu gàtt.
Kling by Kuaishou in practice
Piblisitekat bi dafay defar ay wideo yu bari ci kàmpaañ ci anam wu gaaw te yomb.
Piblisitekat bi dafay defar ay wideo yu bari yu wuute ci benn kàmpaañ ci anam wu gaaw te yomb. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee ay pursàntaasu kalite ci kanam, tëye yoonu eskalaasioŋ nit ngir jafe-jafe yi, ba noppi topp njariñu liggéey ak njëgu njuumte ci diir bu gàtt.
Risk yi ak balustrade yi
Koom-koomu ubbite mën na raw stabilite ci def liggéeyu defar dëgg.
Njëg yi ci API wala coppite ci sàrt yi mën nañu dindi xalaat yi ci guddi gi.
Dependence ci benn jaaykat dafay yokk njëgu tëjug ak migraasioŋ.
Roadmap ngir samp gi
Saytu sa fournisseur yi nga jëfandikoo sa liggéey ak say done.
Saytu sa fournisseur yi nga jëfandikoo sa liggéey ak say done. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.
Xoolaat mbir yu nëbbu, kaaraange ak sàrti yoon balaa ngay boole.
Xoolaat mbir yu nëbbu, kaaraange ak sàrti yoon balaa ngay boole. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.
Fexe am palaŋu fallback ci model yi wala jaaykat yi.
Fexe am palaŋu fallback ci model yi wala jaaykat yi. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.
Xool notu génne yi suko defee coppite yi ci kàrtu yoon du jaaxal ekip yi.
Xool notu génne yi suko defee coppite yi ci kàrtu yoon du jaaxal ekip yi. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.