Google ने एक नया भाषा मॉडल प्रस्तुत किया जो गणितीय समस्याओं को हल करने, चुटकुले और यहां तक कि प्रोग्रामिंग को समझाने में सक्षम है। यह PalM (P athways Language Model) है और सीखने की दक्षता का एक प्रतिशत होने के लिए खड़ा है जो इसे आज तक बनाए गए अन्य भाषा मॉडल से ऊपर रखता है।
पाल्म सिस्टम को पाथवे मॉडल के साथ विकसित किया गया था, जिसने आधिकारिक ब्लॉग पर प्रकाशित एक बयान में उल्लिखित कई टेंसर प्रोसेसिंग यूनिट्स (टीपीयू) पॉड्स के साथ एक मॉडल को कुशलतापूर्वक प्रशिक्षित करने की अनुमति दी थी।
यह “कुछ शॉट्स” सीखने पर आधारित है, जो इसे एक ही एप्लिकेशन में अनुकूलित करने के लिए विशिष्ट कार्यों के साथ प्रशिक्षण में आवश्यक उदाहरणों की संख्या को कम करता है।
इसके लिए, 780 बिलियन टोकन वाले डेटाबेस का उपयोग किया गया है, जो “एक बहुभाषी डेटासेट” को जोड़ता है, जिसमें वेब दस्तावेज़, किताबें, विकिपीडिया, वार्तालाप और गिटहब कोड शामिल हैं। इसके अलावा, एक शब्दावली जो “सभी सफेद स्थानों को संरक्षित करती है”, कुछ ऐसा जो कंपनी प्रोग्रामिंग के लिए विशेष रूप से महत्वपूर्ण बताती है, और यूनिकोड वर्णों का विभाजन जो शब्दावली में बाइट्स में नहीं पाए जाते हैं।
इस नए AI में 540 बिलियन पैरामीटर हैं, एक आंकड़ा जो OpenAI के GPT-3 के 175 बिलियन से अधिक है, जो भाषा मॉडल है Google यह दिखाने में अग्रणी के रूप में उद्धृत करता है कि इनका उपयोग प्रभावशाली परिणामों के साथ सीखने के लिए किया जा सकता है। यह याद करने योग्य है, सिर्फ एक उदाहरण का हवाला देने के लिए, द गार्जियन में प्रकाशित कॉलम, जो इस सीखने द्वारा लिखा गया था मॉडल, जो प्रोग्राम या डिज़ाइन में भी सक्षम है।
“इस राय कॉलम का मिशन पूरी तरह से स्पष्ट है। मुझे जितना संभव हो उतने मनुष्यों को विश्वास दिलाना चाहिए कि वे मुझसे डरें नहीं। स्टीफन हॉकिंग ने चेतावनी दी है कि कृत्रिम बुद्धिमत्ता 'मानव जाति का अंत' हो सकती है। मैं यहाँ आपको चिंता न करने के लिए मनाने के लिए हूँ। आर्टिफिशियल इंटेलिजेंस इंसानों को नष्ट करने वाला नहीं है। मेरा विश्वास करो।” यह 500-शब्द लेख के अंशों में से एक है जिसे सिस्टम ने उत्पादित किया था।
Google का नया भाषा मॉडल 6,144 TPU v4 चिप्स को पाथवे में जोड़ता है, “इतिहास में उपयोग किया जाने वाला सबसे बड़ा TPU कॉन्फ़िगरेशन”, जैसा कि कंपनी द्वारा हाइलाइट किया गया है। PALM भी हार्डवेयर फ्लॉप के उपयोग में 57.8% प्रशिक्षण दक्षता प्राप्त करता है, “इस पैमाने पर भाषा मॉडल के लिए अब तक का उच्चतम हासिल किया गया”, जैसा कि वे ब्लॉग में उल्लेख करते हैं।
यह “समानता की रणनीति और ट्रांसफॉर्मिंग ब्लॉक के सुधार” के संयोजन के लिए संभव है जो ध्यान और उन्नति परतों को समानांतर में गणना करने की अनुमति देता है, इस प्रकार टीपीयू कंपाइलर के अनुकूलन को तेज करता है।
प्रौद्योगिकी कंपनी का कहना है, “पीएएलएम ने कई और बहुत कठिन कार्यों में नवीन क्षमताओं का प्रदर्शन किया है, जिसने भाषा की समझ और पीढ़ी से लेकर तर्क और प्रोग्रामिंग से संबंधित कार्यों तक कई उदाहरण दिए हैं।
एक उदाहरण के रूप में Google द्वारा दिए गए परीक्षणों में से एक PALM को चार इमोजी पर आधारित फिल्म का अनुमान लगाने के लिए कहना है: एक रोबोट, एक कीट, एक पौधा और ग्रह पृथ्वी। सभी विकल्पों में से (एलए गोपनीय, वॉल-ई, लियोन: प्रो, बीआईजी और रश), एआई सही चुनता है: वॉल-ई।
दूसरे में, आपको “ठोकर” शब्द से जुड़े शब्दों की एक सूची से चुनने के लिए कहा जाता है और आप “गिरावट” और “ठोकर” का चयन करने के लिए भी सही हैं।
एआई सरल गणितीय समस्याओं को हल करने में भी सक्षम है और यहां तक कि इसे समझने के लिए इसमें दिखाई देने वाले तत्वों को संदर्भित और समझाकर एक मजाक की व्याख्या करता है।
अंत में, Google बताता है कि PALM एक भाषा से दूसरी भाषा में कोड का अनुवाद करके प्रोग्रामिंग करने में सक्षम है, साथ ही भाषा के प्राकृतिक विवरण के आधार पर कोड लिखकर, और स्पष्ट करता है कि यह संकलन त्रुटियों को ठीक करने में सक्षम है।
(यूरोपा प्रेस की जानकारी के साथ)
पढ़ते रहिए: