आगेअगली गाइड
वीडियो के लिए एआई आई कॉन्टैक्ट सुधार
विजुअल एआई
विज़ुअल एआई गाइड
वीडियो-टू-वीडियो शैली परिवर्तन मूल गति, समय और संरचना को बनाए रखते हुए मौजूदा फुटेज को एक नया रूप देने के लिए एआई, आमतौर पर प्रसार मॉडल का उपयोग करता है, जैसे एनीमे, क्ले एनीमेशन या ऑयल पेंट।
इस गाइड को सुनेंएआई-नैरेटेड · ~3 min
यह महत्वपूर्ण है क्योंकि यह रचनाकारों को नई दृश्य शैलियों में वास्तविक प्रदर्शन और कैमरा कार्य का पुन: उपयोग करने देता है। जब स्रोत फ़ुटेज वास्तविक लोगों को दिखाता है या किसी और का होता है तो यह सहमति और कॉपीराइट प्रश्न भी उठाता है।
अधिकांश वीडियो-टू-वीडियो पाइपलाइनों में दो चरण होते हैं। सबसे पहले वे स्रोत वीडियो से संरचना निकालते हैं: MiDaS या डेप्थ एनीथिंग जैसे मॉडलों से गहराई के नक्शे, किनारे या रेखा के नक्शे, ओपनपोज़ जैसे उपकरणों से मानव मुद्रा कंकाल, और कभी-कभी ऑप्टिकल प्रवाह, जो रिकॉर्ड करता है कि फ्रेम के बीच पिक्सेल कैसे चलते हैं। फिर वे उस संरचना पर नए फ्रेम तैयार करते हैं और साथ ही एक स्टाइल प्रॉम्प्ट या संदर्भ छवि भी तैयार करते हैं। कंट्रोलनेट, जिसे 2023 में पेश किया गया था, ने बेस मॉडल को फिर से प्रशिक्षित किए बिना डेप्थ मैप या पोज़ स्केलेटन स्टीयर जेनरेशन की सुविधा देकर इसे Stable Diffusion के लिए व्यावहारिक बना दिया। मुख्य सेटिंग आमतौर पर परिवर्तन या शक्ति को निरूपित करना है। स्रोत फ़्रेम को आंशिक रूप से शोर किया जाता है और फिर नई शैली की ओर दर्शाया जाता है। कम ताकत मूल के करीब रहती है लेकिन थोड़ा बदलती है। उच्च शक्ति एक साहसी शैली देती है, लेकिन आउटपुट स्रोत से हटना शुरू कर देता है और फ्रेम के बीच झिलमिलाहट करता है। गहराई कंडीशनिंग कमरे के लेआउट और ऑब्जेक्ट प्लेसमेंट को बनाए रखती है। पोज़ कंडीशनिंग मानव गति को बनाए रखती है। किनारे के नक्शे बढ़िया रूपरेखा रखते हैं। तीन व्यापक दृष्टिकोण हैं। कंट्रोलनेट के साथ प्रति-फ़्रेम प्रसार झिलमिलाहट को सीमित करने के लिए साझा बीजों और क्रॉस-फ़्रेम ध्यान पर निर्भर करता है। कीफ़्रेम विधियाँ कुछ फ़्रेमों को सावधानीपूर्वक पुनर्स्थापित करती हैं और उस लुक को बाकी हिस्सों में प्रचारित करती हैं, जैसा कि EbSynth पैच-आधारित प्रसार के साथ करता है। रेरेंडर-ए-वीडियो और टोकनफ्लो जैसी अनुसंधान विधियां उस दिशा में आगे बढ़ती हैं। मूल वीडियो मॉडल जो एक इनपुट वीडियो स्वीकार करते हैं, जिसे Runway के Gen-1 ने 2023 में पेश किया था, मॉडल के अंदर समय को संभालते हैं। एक आम ग़लतफ़हमी यह है कि रीस्टाइलिंग लोगों को गुमनाम कर देती है या फ़ुटेज को एक नए, स्वतंत्र रूप से उपयोग करने योग्य कार्य में बदल देती है। यह न तो स्वचालित रूप से होता है. चाल, शरीर का आकार, आवाज़ और सेटिंग अक्सर पहचान योग्य रहती है, समानता और प्रचार अधिकार अभी भी लागू हो सकते हैं, और अंतर्निहित फ़ुटेज अपना कॉपीराइट रखता है। ज़िम्मेदारीपूर्ण उपयोग का अर्थ है अपनी स्वयं की सामग्री को फिल्माना या अनुमति प्राप्त करना, और यह खुलासा करना कि फुटेज को रूपांतरित किया गया था।
एक इंडी फिल्म निर्माता एक गैरेज में अभिनेताओं को शूट करता है और गहराई के मानचित्रों का उपयोग करके फुटेज को एक चित्रित काल्पनिक रूप में परिवर्तित करता है ताकि दीवारें, टेबल और दरवाजे हर फ्रेम में अपना आकार बनाए रखें।
एक नृत्य निर्माता एक दिनचर्या से पोज़ कंकाल निकालता है और एक एनिमेटेड चरित्र उत्पन्न करता है जो समान समय के साथ समान कोरियोग्राफी करता है।
एक छोटी एजेंसी एक वाणिज्यिक वीडियो-टू-वीडियो टूल के साथ स्मार्टफोन उत्पाद फुटेज को पेपर-क्राफ्ट लुक में बदल देती है, जिससे परिवर्तन शक्ति कम हो जाती है ताकि उत्पाद का आकार और लोगो पठनीय बना रहे।
कोई किसी अजनबी की वायरल क्लिप को कार्टून में बदल देता है और उसे दोबारा पोस्ट करता है। व्यक्ति का शरीर, आवाज़ और हावभाव अभी भी पहचाने जा सकते हैं, और मूल अपलोडर का कॉपीराइट ख़त्म नहीं हुआ है।
वीडियो-देशी संपादन मॉडल जो एक स्रोत क्लिप लेते हैं और सीधे संरचना और गति का पालन करते हैं, कई उपकरणों में हाथ से निर्मित प्रति-फ्रेम पाइपलाइनों की जगह ले रहे हैं। सुधार के संभावित क्षेत्र हैं लंबी क्लिप, चेहरे और हाथों का बेहतर संरक्षण, और कौन से क्षेत्र बदलते हैं, इस पर बेहतर नियंत्रण। जिम्मेदार-उपयोग पक्ष पर, C2PA सामग्री क्रेडेंशियल, प्लेटफ़ॉर्म लेबलिंग नियम और वास्तविक लोगों की समानता के लिए सहमति आवश्यकताएं जैसे उद्गम मानक अधिक प्रासंगिक होते जा रहे हैं। उपकरण लगातार सहमति को कैसे लागू करेंगे यह अभी भी स्पष्ट नहीं है, और अलग-अलग प्लेटफ़ॉर्म और क्षेत्राधिकार इसे अलग-अलग तरीके से संभाल सकते हैं।
मुफ़्त न्यूज़लेटर
हर कार्यदिवस की सुबह तीन सत्यापित एआई कहानियाँ, सादे अंग्रेजी में लिखी गईं। हमेशा के लिए मुफ़्त, कोई विज्ञापन नहीं।
प्रत्येक सप्ताह के दिन एक ईमेल. एक क्लिक में सदस्यता समाप्त करें. हम आपका पता कभी नहीं बेचते या साझा नहीं करते।
स्वयं की जांच करो
प्रत्येक उत्तर पर त्वरित प्रतिक्रिया, और पाठ्यक्रम पास करने के बाद एक सत्यापन योग्य आईडी के साथ एक साझा करने योग्य प्रमाणपत्र।
निःशुल्क एआई शिक्षा का समर्थन करें। AI Understanding एक 501(c)(3) गैर-लाभकारी संस्था है - कोई विज्ञापन नहीं, कोई पेवॉल नहीं। दान करें
वीडियो-टू-वीडियो शैली परिवर्तन मूल गति, समय और संरचना को बनाए रखते हुए मौजूदा फुटेज को एक नया रूप देने के लिए एआई, आमतौर पर प्रसार मॉडल का उपयोग करता है, जैसे एनीमे, क्ले एनीमेशन या ऑयल पेंट। यह महत्वपूर्ण है क्योंकि यह रचनाकारों को नई दृश्य शैलियों में वास्तविक प्रदर्शन और कैमरा कार्य का पुन: उपयोग करने देता है। जब स्रोत फ़ुटेज वास्तविक लोगों को दिखाता है या किसी और का होता है तो यह सहमति और कॉपीराइट प्रश्न भी उठाता है।
पाइपलाइनें पहले स्रोत की संरचना को पकड़ती हैं ताकि पीढ़ी शैली बदलते समय इसके लेआउट और गति का अनुसरण कर सके।
कंट्रोलनेट एक कंडीशनिंग मार्ग जोड़ता है ताकि गहराई या मुद्रा कंकाल जैसे संरचनात्मक इनपुट मौजूदा मॉडल के आउटपुट का मार्गदर्शन कर सकें।
उच्च शक्ति स्रोत को अधिक शोर करती है, जिससे मॉडल को अधिक स्वतंत्रता मिलती है। इसका मतलब है अधिक शैली लेकिन कम विश्वसनीयता और अधिक फ्रेम-टू-फ्रेम असंगतता।
पोज़ कंकाल समय के साथ संयुक्त स्थिति पर कब्जा कर लेते हैं, इसलिए वे सीधे मानव आंदोलन को संरक्षित करते हैं।
कीफ़्रेम प्रसार कुछ फ़्रेमों को सावधानीपूर्वक पुनर्स्थापित करता है और फिर उस उपस्थिति को क्लिप के बाकी हिस्सों में ले जाता है।
सीखते रहो
इस विषय के लिए अधिक मार्गदर्शिकाएँ चुनी गईं
आगेअगली गाइड
वीडियो के लिए एआई आई कॉन्टैक्ट सुधार
विजुअल एआई