विज़ुअल एआई गाइड

शाब्दिक उलटाव

टेक्स्टुअल इनवर्जन एक छवि जनरेटर को एक बिल्कुल नई अवधारणा सिखाता है - जैसे एक विशिष्ट बिल्ली, कला शैली, या उत्पाद - मॉडल को बदले बिना, इसके लिए एक नया शब्द सीखकर।

2 मिनट लालअंतिम बार अद्यतन किया गया

सिंहावलोकन

It lets you put your own subject into AI art using just 3-5 example photos.

गहरा गोता

2022 में शोधकर्ताओं द्वारा पेश किया गया टेक्स्टुअल इनवर्जन एक वैयक्तिकरण समस्या का समाधान करता है: आप स्टेबल डिफ्यूजन जैसे मॉडल को *अपने* कुत्ते को खींचने के लिए कैसे कहते हैं, जब 'कुत्ता' अकेले इसे पकड़ नहीं पाएगा? विशाल तंत्रिका नेटवर्क को फिर से प्रशिक्षित करने के बजाय, यह पूरे मॉडल को फ्रीज कर देता है और एक चीज सीखता है: एक नया 'छद्म शब्द' एम्बेडिंग - टेक्स्ट एनकोडर की शब्दावली में एक एकल वेक्टर, जिसे अक्सर एस * के रूप में लिखा जाता है। आप इसे अवधारणा की 3-5 छवियां खिलाते हैं, और अनुकूलन उस एक वेक्टर को तब तक प्रेरित करता है जब तक कि मॉडल विश्वसनीय रूप से विषय को पुन: पेश नहीं करता है जब आप नया शब्द टाइप करते हैं। चूँकि केवल एक वेक्टर (कुछ किलोबाइट) ही सीखा जाता है, परिणाम छोटे और साझा करने योग्य होते हैं। फिर आप 'एस* स्केटबोर्ड की सवारी, ऑयल पेंटिंग' जैसे संकेत लिख सकते हैं और अवधारणा नए संदर्भों में प्रकट होती है।

तकनीकी अंतर्दृष्टि

चाल यह है कि टेक्स्ट-टू-इमेज मॉडल जेनरेट करने से पहले प्रत्येक शब्द को एक एम्बेडिंग वेक्टर में बदल देते हैं। टेक्स्टुअल इनवर्जन उस एम्बेडिंग तालिका में एक नया वेक्टर जोड़ता है और आपकी उदाहरण छवियों पर हानि को दर्शाने वाले समान प्रसार का उपयोग करके केवल इसे अनुकूलित करता है। ग्रेडियेंट एम्बेडिंग में वापस प्रवाहित होते हैं जबकि सभी मॉडल भार स्थिर रहते हैं। परिणाम एक कॉम्पैक्ट वेक्टर (कुछ केबी) है जो मॉडल के मौजूदा शब्दावली स्थान में रहता है - कोई वजन नहीं बदलता है, इसलिए बेस मॉडल अपने सभी पूर्व ज्ञान को बनाए रखता है।

सामरिक प्रभाव

गति और पैमाना

विज़ुअल एआई बड़े पैमाने पर निरीक्षण, पता लगाने और टैगिंग कार्यों को स्वचालित कर सकता है।

विकल्प बनाएं

रचनात्मक टीमें कम मैन्युअल संशोधनों के साथ तेजी से अवधारणाओं का प्रोटोटाइप बना सकती हैं।

टीम और वर्कफ़्लो

संचालन छवि और वीडियो संकेतों का उपयोग कर सकते हैं जिन्हें संसाधित करना पहले कठिन था।

पाठ्य व्युत्क्रम का भविष्य

टेक्स्टुअल इनवर्जन अपने छोटे फ़ाइल आकार और साझा करने की क्षमता के लिए लोकप्रिय बना हुआ है, और ओपन-सोर्स समुदाय इनमें से हजारों एम्बेडिंग का व्यापार करता है। भविष्य के निर्देश इसे अन्य तरीकों के साथ मिलाते हैं - समृद्ध दृश्यों के लिए कई सीखे गए शब्दों को ढेर करना, इसे तेज निष्ठा के लिए लोरा या ड्रीमबूथ के साथ जोड़ना, और विचार को वीडियो और 3 डी जनरेटर तक विस्तारित करना। 'अवधारणा पुस्तकालयों' की अपेक्षा करें जहां उपयोगकर्ता सीखे गए टोकन का मिश्रण और मिलान करते हैं, साथ ही तेज़, लगभग-तत्काल उलटाव करते हैं ताकि वैयक्तिकरण मिनटों के बजाय सेकंड में हो।

वास्तविक विश्व कार्यान्वयन

एक कलाकार अपनी विशिष्ट चित्रण शैली के लिए एक टोकन सीखता है, फिर उसे एक सतत पोर्टफोलियो के लिए दर्जनों नए दृश्यों पर संकेत देता है।

एक पालतू जानवर का मालिक अपने कुत्ते को एक अंतरिक्ष यात्री, एक पुनर्जागरण पेंटिंग या एक कार्टून के रूप में प्रस्तुत करने के लिए उसकी पांच तस्वीरें अपलोड करता है।

एक छोटा ई-कॉमर्स ब्रांड अपने उत्पाद के लिए एक शब्द सीखता है ताकि वह इसे बिना किसी फोटोशूट के कई मार्केटिंग पृष्ठभूमि में प्रस्तुत कर सके।

एक गेम स्टूडियो पूरी टीम में अवधारणा कला को सुसंगत बनाए रखने के लिए एक पुन: प्रयोज्य टोकन के रूप में एक आवर्ती चरित्र के रूप को कैप्चर करता है।

जोखिम और रेलिंग

यदि उत्पत्ति अस्पष्ट है तो छवि अधिकार और सहमति कानूनी जोखिम बन सकते हैं।

मॉडल का प्रदर्शन प्रकाश व्यवस्था, जनसांख्यिकी और वातावरण के अनुसार भिन्न हो सकता है।

जब तक आत्मविश्वास की सीमा की निगरानी नहीं की जाती, तब तक झूठी सकारात्मक बातों पर ध्यान नहीं दिया जा सकता।

कार्यान्वयन रोडमैप

1

सटीकता, रिकॉल और त्रुटि लागत के लिए स्वीकृति मानदंड परिभाषित करें।

2

वास्तविक उत्पादन स्थितियों से मेल खाने वाले डेटा के साथ परीक्षण करें।

3

कम-आत्मविश्वास या उच्च-प्रभाव वाली भविष्यवाणियों के लिए मानवीय समीक्षा जोड़ें।

4

कैमरा या डेटासेट में बदलाव के बाद मॉडल बहाव को ट्रैक करें और पुनः सत्यापित करें।

अन्वेषण करते रहें

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Textual Inversion quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

प्रश्नोत्तरी प्रारंभ करें

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

अक्सर पूछे जाने वाले प्रश्नों

What is Textual Inversion?

टेक्स्टुअल इनवर्जन एक छवि जनरेटर को एक बिल्कुल नई अवधारणा सिखाता है - जैसे एक विशिष्ट बिल्ली, कला शैली, या उत्पाद - मॉडल को बदले बिना, इसके लिए एक नया शब्द सीखकर। यह आपको केवल 3-5 उदाहरण फ़ोटो का उपयोग करके अपने स्वयं के विषय को एआई कला में डालने की सुविधा देता है।

प्रशिक्षण के दौरान टेक्स्टुअल इनवर्जन वास्तव में क्या सीखता है?

यह पूरे मॉडल को स्थिर रखते हुए केवल एक नए छद्म-शब्द एम्बेडिंग वेक्टर को अनुकूलित करता है।

टेक्स्टुअल इनवर्जन के लिए आमतौर पर कितनी उदाहरण छवियों की आवश्यकता होती है?

एक छोटी मुट्ठी, आमतौर पर अवधारणा की 3-5 छवियां, एक उपयोगी टोकन सीखने के लिए पर्याप्त है।

टेक्स्टुअल इनवर्ज़न फ़ाइलें इतनी छोटी (अक्सर कुछ किलोबाइट) क्यों होती हैं?

केवल एक एम्बेडिंग वेक्टर सहेजा गया है, इसलिए फ़ाइल छोटी है और साझा करना आसान है।

पाठ्य व्युत्क्रमण प्रशिक्षण के दौरान क्या अपरिवर्तित रहता है?

आधार मॉडल जमे हुए है; केवल नई एम्बेडिंग अद्यतन की जाती है, इसलिए पूर्व ज्ञान संरक्षित रहता है।

पाठ्य व्युत्क्रमण के बाद आप सीखी हुई अवधारणा का उपयोग कैसे करते हैं?

आप अवधारणा को बुलाने के लिए सामान्य टेक्स्ट प्रॉम्प्ट में बस नया टोकन (जैसे S*) शामिल करते हैं।