बुनियादी गाइड

विश्व मॉडल और सीखे हुए सिमुलेटर

विश्व मॉडल एक तंत्रिका नेटवर्क है जो भविष्यवाणी करना सीखता है कि समय के साथ वातावरण कैसे बदलता है, जिससे एआई को कार्य करने से पहले भविष्य के परिणामों की 'कल्पना' करने की सुविधा मिलती है।

सिंहावलोकन

विश्व मॉडल एक तंत्रिका नेटवर्क है जो भविष्यवाणी करना सीखता है कि समय के साथ वातावरण कैसे बदलता है, जिससे एआई को कार्य करने से पहले भविष्य के परिणामों की 'कल्पना' करने की सुविधा मिलती है। सीखे गए सिमुलेटर इसे और आगे ले जाते हैं, इंजीनियरों द्वारा हाथ से कोड किए जाने के बजाय डेटा से इंटरैक्टिव, खेलने योग्य वातावरण तैयार करते हैं।

विश्व मॉडल और सीखे गए सिमुलेटर मुख्य एआई टूलकिट में बैठते हैं। जब आप इसे समझ जाते हैं, तो अन्य एआई विषयों का मूल्यांकन और तुलना करना आसान हो जाता है।

गहरा गोता

क्या करना है यह याद रखने के बजाय, एक विश्व मॉडल एक पर्यावरण की गतिशीलता को पकड़ता है: वर्तमान स्थिति और एक प्रस्तावित कार्रवाई को देखते हुए, यह अगले अवलोकन की भविष्यवाणी करता है। हा और श्मिडहुबर द्वारा क्लासिक 2018 'वर्ल्ड मॉडल्स' पेपर ने एक ऑटोएनकोडर के साथ गेम फ्रेम को संपीड़ित किया, एक आवर्ती नेटवर्क के साथ उनकी गतिशीलता को मॉडल किया, और इस सीखे हुए 'सपने' के अंदर लगभग पूरी तरह से एक नियंत्रक को प्रशिक्षित किया। डीपमाइंड की ड्रीमर लाइन काल्पनिक प्रक्षेप पथों को चलाकर अव्यक्त गतिशीलता और योजनाएं सीखती है, और ड्रीमरवी3 ने विविध कार्यों में महारत हासिल की है - यहां तक ​​कि माइनक्राफ्ट में शुरुआत से हीरों को इकट्ठा करना भी। हाल ही में, Google का जिन्न छवियों और बिना लेबल वाले वीडियो से नियंत्रणीय 2D दुनिया उत्पन्न करता है, और GameNGen ने केवल एक प्रसार मॉडल का उपयोग करके वास्तविक समय में गेम DOOM को पुन: पेश किया। अपील: एजेंट जोखिम भरी, धीमी वास्तविकता के बजाय सस्ती, तेज़ कल्पना में सीख सकते हैं या परीक्षण कर सकते हैं।

तकनीकी अंतर्दृष्टि

विश्व मॉडल आम तौर पर उच्च-आयामी अवलोकनों को एक कॉम्पैक्ट अव्यक्त स्थिति में एन्कोड करते हैं, फिर अगली अव्यक्त स्थिति की भविष्यवाणी करने और एक कार्रवाई से इनाम पाने के लिए एक संक्रमण फ़ंक्शन सीखते हैं। योजना 'रोलआउट' का उपयोग करती है: आगे के कई क्रिया अनुक्रमों की कल्पना करना और सर्वश्रेष्ठ चुनना, या कल्पित डेटा पर नीति का प्रशिक्षण देना। आधुनिक संस्करण फ्रेम की सीधे भविष्यवाणी करने के लिए ट्रांसफॉर्मर या वीडियो-डिफ्यूजन का उपयोग करते हैं, उपयोगकर्ता क्रियाओं पर आधारित होते हैं, जिससे इंटरैक्टिव फ्रेम-दर-फ्रेम पीढ़ी प्राप्त होती है।

विश्व मॉडलों और सीखे गए सिमुलेटरों में महारत हासिल करना

गहरी समझ बनाने के लिए, वर्ल्ड मॉडल्स और लर्न्ड सिमुलेटर्स को एक ऑपरेटिंग मॉडल के रूप में मानें, न कि एक फीचर के रूप में। वांछित परिणामों को परिभाषित करें, धारणाओं को स्पष्ट करें, और जो सिस्टम विश्वसनीय रूप से कर सकता है उसे अलग करें जिसके लिए अभी भी विशेषज्ञ निर्णय की आवश्यकता है।

व्यवहार में, वर्ल्ड मॉडल और लर्नड सिमुलेटर का उपयोग करने वाली मजबूत टीमें पहले मजबूत वैचारिक मॉडल बनाती हैं, फिर उन मॉडलों को वास्तविक उत्पादन बाधाओं के अनुसार मैप करती हैं। वे स्पष्ट सफलता मानदंडों का दस्तावेजीकरण करते हैं, यथार्थवादी डेटा और वर्कफ़्लो के विरुद्ध परीक्षण करते हैं, और एक बार की बेंचमार्क जीत के बजाय देखे गए विफलता पैटर्न के आधार पर पुनरावृत्ति करते हैं। यहीं पर सैद्धांतिक समझ उत्पाद, नीति और संचालन में टिकाऊ क्षमता में बदल जाती है।

यह आपको स्पष्ट तकनीकी दावों को मार्केटिंग भाषा से अलग करने में मदद करता है। एक ही समय में, अलग-अलग टीमें एक ही शब्द का अलग-अलग उपयोग कर सकती हैं, इसलिए दायरे को जल्दी परिभाषित करें। सबसे लचीला दृष्टिकोण प्रयोग की गति को शासन अनुशासन के साथ जोड़ना है: पायलट चलाना, साक्ष्य प्राप्त करना, निर्णय लॉग प्रकाशित करना, और मॉडल व्यवहार, उपयोगकर्ता अपेक्षाओं और नियामक आवश्यकताओं के विकसित होने पर सुरक्षा उपायों को लगातार अपडेट करना।

सामरिक प्रभाव

यह आपको स्पष्ट तकनीकी दावों को मार्केटिंग भाषा से अलग करने में मदद करता है।

यह आपको स्पष्ट तकनीकी दावों को मार्केटिंग भाषा से अलग करने में मदद करता है। उच्च-गुणवत्ता वाली तैनाती में, इसे मापने योग्य संचालन नियमों, स्वामित्व सीमाओं और आवर्ती समीक्षा अनुष्ठानों में अनुवादित किया जाता है ताकि टीमें अस्पष्टता को मापने के बजाय आत्मविश्वास को बढ़ा सकें।

आप पैसा या समय खर्च करने से पहले बेहतर कार्यान्वयन संबंधी प्रश्न पूछ सकते हैं।

आप पैसा या समय खर्च करने से पहले बेहतर कार्यान्वयन संबंधी प्रश्न पूछ सकते हैं। उच्च-गुणवत्ता वाली तैनाती में, इसे मापने योग्य संचालन नियमों, स्वामित्व सीमाओं और आवर्ती समीक्षा अनुष्ठानों में अनुवादित किया जाता है ताकि टीमें अस्पष्टता को मापने के बजाय आत्मविश्वास को बढ़ा सकें।

साझा समझ वाली टीमें बेहतर उत्पाद, नीति और सीखने के निर्णय लेती हैं।

साझा समझ वाली टीमें बेहतर उत्पाद, नीति और सीखने के निर्णय लेती हैं। उच्च-गुणवत्ता वाली तैनाती में, इसे मापने योग्य संचालन नियमों, स्वामित्व सीमाओं और आवर्ती समीक्षा अनुष्ठानों में अनुवादित किया जाता है ताकि टीमें अस्पष्टता को मापने के बजाय आत्मविश्वास को बढ़ा सकें।

विश्व मॉडलों और सीखे गए सिमुलेटरों का भविष्य

विश्व मॉडल रोबोटिक्स और गेम जेनरेशन के केंद्र बन रहे हैं: वे डेटा-कुशल सीखने का वादा करते हैं जहां वास्तविक इंटरैक्शन महंगा है, और ऑन-द-फ्लाई जेनरेट, खेलने योग्य वातावरण है। उच्च-निष्ठा, लंबे-क्षितिज, एक्शन-कंडीशंड वीडियो मॉडल, योजना एजेंटों के साथ सख्त एकीकरण और स्व-ड्राइविंग और हेरफेर नीतियों के प्रशिक्षण के लिए 'तंत्रिका सिमुलेटर' के रूप में उपयोग की अपेक्षा करें। खुली चुनौतियों में दीर्घकालिक स्थिरता, मतिभ्रम भौतिकी से बचना और स्मृति को बढ़ाना शामिल है।

वास्तविक विश्व कार्यान्वयन

हा और श्मिधुबर एक कार-रेसिंग एजेंट को लगभग पूरी तरह से पर्यावरण के अपने सीखे हुए सपने के अंदर प्रशिक्षण देते हैं

डीपमाइंड का ड्रीमरवी3 कल्पना में योजना बनाकर माइनक्राफ्ट में हीरे इकट्ठा कर रहा है

Google का जिन्न एक एकल छवि से खेलने योग्य 2D प्लेटफ़ॉर्मर दुनिया तैयार कर रहा है

GameNGen वास्तविक समय में DOOM का एक खेलने योग्य संस्करण चला रहा है, जिसमें एक प्रसार मॉडल द्वारा निर्मित फ्रेम हैं

कार्यान्वयन पैटर्न

व्यवहार में विश्व मॉडल और सीखे गए सिम्युलेटर

हा और श्मिधुबर एक कार-रेसिंग एजेंट को लगभग पूरी तरह से पर्यावरण के अपने सीखे हुए सपने के अंदर प्रशिक्षण देते हैं।

टीमों को आमतौर पर बेहतर परिणाम मिलते हैं जब वे गुणवत्ता सीमा को पहले से परिभाषित करते हैं, किनारे के मामलों के लिए मानव वृद्धि पथ रखते हैं, और समय के साथ उत्पादकता लाभ और त्रुटि लागत दोनों को ट्रैक करते हैं।

व्यवहार में विश्व मॉडल और सीखे गए सिम्युलेटर

डीपमाइंड का ड्रीमरवी3 कल्पना में योजना बनाकर माइनक्राफ्ट में हीरे इकट्ठा कर रहा है।

टीमों को आमतौर पर बेहतर परिणाम मिलते हैं जब वे गुणवत्ता सीमा को पहले से परिभाषित करते हैं, किनारे के मामलों के लिए मानव वृद्धि पथ रखते हैं, और समय के साथ उत्पादकता लाभ और त्रुटि लागत दोनों को ट्रैक करते हैं।

व्यवहार में विश्व मॉडल और सीखे गए सिम्युलेटर

Google का जिन्न एक एकल छवि से खेलने योग्य 2डी प्लेटफ़ॉर्मर दुनिया तैयार कर रहा है।

टीमों को आमतौर पर बेहतर परिणाम मिलते हैं जब वे गुणवत्ता सीमा को पहले से परिभाषित करते हैं, किनारे के मामलों के लिए मानव वृद्धि पथ रखते हैं, और समय के साथ उत्पादकता लाभ और त्रुटि लागत दोनों को ट्रैक करते हैं।

व्यवहार में विश्व मॉडल और सीखे गए सिम्युलेटर

GameNGen वास्तविक समय में DOOM का एक खेलने योग्य संस्करण चला रहा है, जिसमें एक प्रसार मॉडल द्वारा निर्मित फ्रेम हैं।

टीमों को आमतौर पर बेहतर परिणाम मिलते हैं जब वे गुणवत्ता सीमा को पहले से परिभाषित करते हैं, किनारे के मामलों के लिए मानव वृद्धि पथ रखते हैं, और समय के साथ उत्पादकता लाभ और त्रुटि लागत दोनों को ट्रैक करते हैं।

जोखिम और रेलिंग

!

अलग-अलग टीमें एक ही शब्द का अलग-अलग इस्तेमाल कर सकती हैं, इसलिए दायरे को पहले ही परिभाषित कर लें।

!

बेंचमार्क मजबूत दिख सकते हैं जबकि वास्तविक दुनिया का प्रदर्शन असमान है।

!

डेटा गुणवत्ता और मूल्यांकन योजनाओं की अनदेखी अक्सर नाजुक परिणाम पैदा करती है।

कार्यान्वयन रोडमैप

1

आपको जिस परिणाम की आवश्यकता है उसकी सरल भाषा में परिभाषा से शुरुआत करें।

इसे एक साक्ष्य द्वार के रूप में मानें: यदि मानदंड पूरे नहीं होते हैं, तो रोलआउट रोकें, अंतर को बंद करें, और उसके बाद ही उपयोग का विस्तार करें।

2

परीक्षण से पहले एक सफलता मीट्रिक और एक विफलता स्थिति चुनें।

इसे एक साक्ष्य द्वार के रूप में मानें: यदि मानदंड पूरे नहीं होते हैं, तो रोलआउट रोकें, अंतर को बंद करें, और उसके बाद ही उपयोग का विस्तार करें।

3

प्रतिनिधि डेटा के साथ एक छोटा पायलट चलाएँ, न कि एक परिष्कृत डेमो सेट।

इसे एक साक्ष्य द्वार के रूप में मानें: यदि मानदंड पूरे नहीं होते हैं, तो रोलआउट रोकें, अंतर को बंद करें, और उसके बाद ही उपयोग का विस्तार करें।

4

दस्तावेज़ जहां विश्व मॉडल और सीखे गए सिम्युलेटर मदद करते हैं और जहां सरल तरीके बेहतर हैं।

इसे एक साक्ष्य द्वार के रूप में मानें: यदि मानदंड पूरे नहीं होते हैं, तो रोलआउट रोकें, अंतर को बंद करें, और उसके बाद ही उपयोग का विस्तार करें।

अन्वेषण करते रहें

Check your understanding

Test yourself: take the World Models and Learned Simulators quiz

Start quiz