मपेट्स के नाम पर इतने सारे AI सिस्टम क्यों हैं?
अंदर का मज़ाक जो AI विकास के बारे में बहुत कुछ कहता है
एआई में हाल ही में सबसे बड़े रुझानों में से एक मशीन लर्निंग मॉडल का निर्माण रहा है जो अभूतपूर्व तरलता के साथ लिखित शब्द उत्पन्न कर सकता है। ये प्रोग्राम गेम-चेंजर हैं, संभावित रूप से सुपरचार्जिंग कंप्यूटर की भाषा को पार्स और उत्पादन करने की क्षमता।
लेकिन कुछ ऐसा जो काफी हद तक किसी का ध्यान नहीं गया है वह एक माध्यमिक प्रवृत्ति है - पहले की छाया - और वह है: इन उपकरणों की एक आश्चर्यजनक संख्या का नाम मपेट्स के नाम पर रखा गया है।
एक प्लस प्रो
आज तक, भाषा AI की इस नई नस्ल में शामिल हैं aएल्मो, सेवा मेरेबर्ट, सेवा मेरेग्रोवर, सेवा मेरेबड़ा पक्षी, सेवा मेरेरोज़ीटा, सेवा मेरेरॉबर्टा, कम से कमदो एर्नीs (तीन यदि आप शामिल करते हैंएर्नी 2.0), और एकर्मिट. Google, Facebook, और AI के लिए एलन इंस्टीट्यूट जैसे बड़े तकनीकी खिलाड़ी सभी शामिल हैं, और चीनी खोज दिग्गज Baidu और बीजिंग के सिंघुआ विश्वविद्यालय के मॉडल के योगदान के साथ सनक की वैश्विक पहुंच है। नामकरण परंपरा इतनी अच्छी तरह से स्थापित है कि इन प्रणालियों को कभी-कभी मपेटवेयर कहा जाता है। लेकिन अधिवेशन की शुरुआत किसने और क्यों की?
जैसा कि आपने अनुमान लगाया होगा, इसका सरल उत्तर है: यह एक अंदरूनी मजाक है, शोधकर्ताओं ने एआई मॉडल का नामकरण मपेट्स के नाम पर किया है क्योंकिअन्यशोधकर्ताओं ने AI मॉडल्स का नाम मपेट्स के नाम पर रखा है। लेकिन यह एक मजाक है जो एआई अनुसंधान की एक विशेष विशेषता को उजागर करने के लिए होता है, यह दर्शाता है कि कैसे प्रयोगशालाएं एक दूसरे के काम को श्रद्धांजलि देती हैं और निर्माण करती हैं।
2018: भाषा मॉडल पेपर में तिल स्ट्रीट से संबंधित समरूपों को पेश करना होगा
- माइल्स ब्रंडेज (@Miles_Brundage)11 जून 2019
2019: भाषा मॉडल पेपर के शीर्षक में तिल स्ट्रीट चुटकुले की जरूरत है, सभी वार्ताओं में कम से कम एक तिल स्ट्रीट छवि की आवश्यकता होती है।
2020: एसीएल/एनएएसीएल तिल स्ट्रीट सम्मेलन के साथ सह-स्थित, बिग बर्ड एक मुख्य भाषण देता है।
प्रवृत्ति एलन इंस्टीट्यूट द्वारा तैयार किए गए मॉडल ईएलएमओ के साथ शुरू हुई और पहली बार अक्टूबर 2017 में ऑनलाइन प्रकाशित हुई। जैसा कि अक्सर अनुसंधान के मामले में होता है जो नई जमीन को तोड़ता है, काम के पीछे की टीम अपने मॉडल के लिए एक तेज़ संक्षिप्त नाम के साथ आना चाहती थी। पेपर के प्रमुख लेखक मैट पीटर्स ने बतायाकगारईमेल पर कि उन्होंने स्लैक पर विचारों पर मंथन किया।
पीटर्स कहते हैं, हमारे पास संक्षिप्त रूप में प्रयोग करने योग्य अक्षरों की एक सूची थी। भाषा मॉडल, प्रासंगिक, एम्बेडिंग इत्यादि। यह जोएल ग्रस नाम का एक इंजीनियर था, जो भाषा मॉडल से एंबेडिंग्स के लिए खड़े होने के लिए ELMo के साथ आया था, वे कहते हैं, और नाम तुरंत अटक गया।
मेरा सबसे बड़ा बेटा उस समय लगभग तीन साल का था और उसे पेपर समर्पित करने का यह मेरा तरीका भी था।मुझे यह पसंद आया क्योंकि यह कुछ सनकी लेकिन यादगार है, पीटर्स कहते हैं। मेरा सबसे बड़ा बेटा उस समय लगभग तीन साल का था और उसे पेपर समर्पित करने का यह मेरा तरीका भी था।
ELMo एक बार की बात हो सकती थी, यह BERT के लिए नहीं था - 2018 में Google की AI टीम द्वारा बनाया गया एक भाषा मॉडल। यह मॉडल शक्तिशाली और प्रभावशाली साबित हुआ, और भाषा निर्माण के बारे में कई नए विचारों को AI मुख्यधारा में धकेल दिया।
BERT स्वयं आधिकारिक तौर पर ट्रांसफॉर्मर से द्विदिश एनकोडर प्रतिनिधित्व के लिए खड़ा है, और हालांकि Google ने कई अनुरोधों को अस्वीकार कर दियाकगारनाम की उत्पत्ति पर चर्चा करने के लिए, यह व्यापक रूप से माना जाता है कि शोधकर्ता, एलन के लोगों की तरह, मपेट्स को ध्यान में रखते थे। Google के अपने मेंब्लॉग भेजाइस विषय पर, कंपनी का कहना है कि बीईआरटी पूर्व-प्रशिक्षण प्रासंगिक अभ्यावेदन में हाल के काम पर बनाता है - जिसमें ... ईएलएमओ भी शामिल है।
BERT ने कई परीक्षणों पर अत्याधुनिक परिणाम प्राप्त किए, और यह इतना सफल रहा कि Google ने हाल ही में इसे अपने खोज इंजन में शामिल किया। एक बार मॉडल जारी होने के बाद, मपेटवेयर के फ्लडगेट खुल गए, और इसके बाद जल्द ही कई चतुर एल्गोरिदम द्वारा ब्रूट-फोर्स समरूपों को स्पोर्ट किया गया, जिसमें ERNIE (ज्ञान एकीकरण के माध्यम से उन्नत प्रतिनिधित्व), KERMIT (इंसर्शन ट्रांसफ़ॉर्मेशन द्वारा निर्मित कॉन्टेक्स्ट्यूएल एनकोडर रिप्रेजेंटेशन), और बिग शामिल हैं। BIRD (दस्तावेजों के लिए बिग बाइडायरेक्शनल इंसर्शन रिप्रेजेंटेशन)।
लेकिन यह चलन सिर्फ एक मजाक से ज्यादा है। जैसा कि एलन इंस्टीट्यूट के सीईओ ओरेन एट्ज़ियोनी बताते हैं, यह एआई दुनिया के भीतर बौद्धिक ऋण को पहचानने का एक गंभीर तरीका है। इस प्रकार ELMo को एक सनक के रूप में नामित किया गया था, लेकिन BERT सीधे ELMo की अंतर्दृष्टि पर बनाता है; ग्रोवर BERT, आदि का उपयोग करता है, एट्ज़ियोनी ने बतायाकगारईमेल पर। ELMo के कारण होने वाले क्रेडिट पर जोर देना हमारे लिए बहुत महत्वपूर्ण है ... Snuffaluffagus बहुत पीछे नहीं हो सकता है!
बर्कले में पीएचडी छात्र मिशेल स्टर्न, जिन्होंने केर्मिट और बिग बर्ड बनाने में मदद की, ने कहा कि नामकरण सम्मेलन ज्यादातर मजेदार था, लेकिन इसका एक ब्रांडिंग पहलू भी था।
मपेट्स के नाम पर मॉडल का नामकरण बौद्धिक ऋण को पहचानने का एक तरीका हैयह देखते हुए कि यह प्रवृत्ति कितनी व्यापक हो गई है, इस क्षेत्र में काम करने वाले लोग स्वाभाविक रूप से नए पत्रों को पहचानेंगे जिनमें aसेसमी स्ट्रीट-थीम्ड नाम, स्टर्न ने बतायाकगारईमेल द्वारा। और जबकि हर AI भाषा मॉडल इन नई तकनीकों का उपयोग नहीं कर रहा हैहैएक मपेट के नाम पर रखा गया (ओपनएआई की अच्छी तरह से यात्रा की गई जीपीटी -2 एक अपवाद है, हालांकि स्नफलेपगस, या संक्षिप्त के लिए स्नफी थामानाएक नाम के रूप में बहुत अधिक फ़्लिपेंट के रूप में अस्वीकार किए जाने से पहले), यह एक निश्चित बात है कि यदि आप एक मपेटवेयर मॉडल देखते हैं तो आप जानते हैं कि इसका उपयोग किस दृष्टिकोण से किया जाता है।
यह सब, बदले में, हमें यह समझने में मदद करता है कि एआई दुनिया कैसे विचारों को उत्पन्न करने और परिष्कृत करने के लिए खुलेपन और सहयोग पर निर्भर करती है। एआई एक ऐसा विषय नहीं है जहां अकेले वैज्ञानिक रात में प्रयोगशाला में मेहनत करते हैं, प्रोसेसर के माध्यम से बिजली पंप करते हैं, और यह एक चमकदार कमांड लाइन पर काम करता है। (अस्वीकरण: यह निश्चित रूप से होता है, लेकिन यह हमेशा सबसे अधिक उत्पादक दृष्टिकोण नहीं होता है।) इसके बजाय, प्रगति पुनरावृत्त और सहयोगी होती है, शोधकर्ताओं के समूह एक दूसरे के काम और विचारों पर निर्माण करते हैं।
और जब तक यह संभव है कि मपेटवेयर मजाक बहुत जल्द पतला हो जाएगा, जब तक ऐसा नहीं होता, यह एक उपयुक्त परंपरा है। आखिरकार, सहयोग और सम्मान ठीक उसी तरह की विशेषताएं हैं जोसेसमी स्ट्रीटपात्रों पर गर्व होगा।
s20 चश्मा
अपडेट बुध ११ दिसंबर, दोपहर १२:०० अपराह्न ET: नीति निदेशक जैक क्लार्क के अनुसार, कहानी को अद्यतन किया गया है कि OpenAI ने GPT-2 Snuffleupagus, या Snuffy को संक्षेप में कॉल करने पर विचार किया।
