AI की क्षमताएं और सीमाएं
← सभी पाठ
पाठ 04AI की क्षमताएं और सीमाएं

Next Token Prediction

सारांश ऑडियो

बोला गया सारांश — साथ पढ़ने के लिए प्ले दबाएँ: बोली जा रही पंक्ति ऊपर रहती है।

अध्ययन नोट्स

आप क्या सीखेंगे

अनुमानित समय: 30 मिनट

इस पाठ के अंत तक आप सक्षम होंगे:

  • Next Token Prediction को जनरेटिव AI के मूल तंत्र के रूप में समझाएं और यह क्यों प्रवाहिता और भ्रम दोनों उत्पन्न करता है
  • कार्यों को Next Token Prediction सातत्य पर स्थित करें (अच्छी तरह से चलने वाला पथ बनाम नया क्षेत्र)
  • विशिष्टता (नाम, तारीखें, उद्धरण, आंकड़े) को उस क्षेत्र के रूप में पहचानें जहां निर्माण केंद्रित है
  • उत्पाद सुविधाओं (उद्धरण, अनिश्चितता संकेत, विवश पीढ़ी, जनरेटर-सत्यापक पैटर्न) को पहचानें जो इस सीमा के लिए शमन हैं

AI मॉडल Next Token Prediction का उपयोग कैसे करते हैं

(4 मिनट)

जनरेटिव AI एक खोज इंजन की तुलना में एक बहुत ही परिष्कृत ऑटोकंप्लीट के करीब है। यह शब्द दर शब्द उत्तर लिखता है जो आमतौर पर क्या अनुसरण करता है इसके आधार पर। वह एकल संपत्ति आपको प्रवाहिता और भ्रम दोनों देती है।

स्केल पर ऑटोकंप्लीट

पढ़ने से पहले

आप AI को एक लंबी रिपोर्ट को सारांशित करने के लिए कहते हैं। आपको परिणाम की कितनी बारीकी से जांच करनी होगी? सातत्य पर एक स्थान चुनें, फिर अपने अनुमान को लॉक करें।

Next Token Prediction Knowledge Working Memory Steerability

##

क्षमता सीमा

इस पर विश्वास करें स्पॉट-चेक विवरण जांचें सावधानीपूर्वक सत्यापित करें उच्च जोखिम

आपका अनुमान

विशिष्ट

यह क्या सक्षम करता है

यह विशेषता कहां विफल होता है

उत्पाद सुविधाएं जो किनारे को आगे बढ़ाती हैं

एक स्टॉप चुनें, फिर अपने अनुमान को लॉक करें। एक बार जब आप ऐसा करते हैं तो पाठ खुल जाता है।

अपना अनुमान लॉक करें

अपने अंतर्ज्ञान की जांच करें

विशिष्ट प्लेसमेंट के विरुद्ध तुलना करने के लिए ऊपर अपना अनुमान लॉक करें।

अनुकूलित करें

बार ऊंचाई

पिक्टोग्राम आकार

पैलेट Sky → Clay Olive → Clay Cactus → Fig Slate → Clay

मुख्य बिंदु

  • Next Token Prediction इस तथ्य को संदर्भित करता है कि जनरेटिव AI शब्द दर शब्द उत्तर लिखता है जो आमतौर पर क्या अनुसरण करता है इसके आधार पर।
  • क्षमता क्षेत्र: कार्य जो पैटर्न से मिलते जुलते हैं जो मॉडल ने कई बार देखे हैं (सारांशित करना, पुनः स्वरूपित करना, सामान्य अवधारणाओं की व्याख्या करना)।
  • सीमा क्षेत्र: नया या विरल क्षेत्र, और कहीं भी कार्य के लिए "सत्य" से "सत्य लगता है" को अलग करने की आवश्यकता होती है।
  • निर्माण विशिष्टता में केंद्रित है: नाम, तारीखें, आंकड़े, उद्धरण, URL, उद्धरण। दावा जितना सटीक होता है, सत्यापन की उतनी ही अधिक आवश्यकता होती है।
  • उत्पाद सुविधाएं जैसे उद्धरण, अनिश्चितता संकेत, विवश पीढ़ी, और जनरेटर-सत्यापक लूप विशेष रूप से इस सीमा को आगे बढ़ाने के लिए मौजूद हैं।
  • 4D कनेक्शन: Next Token Prediction विवेक की नींव है। यह जानना कि आउटपुट उत्पन्न किया गया था, आपको बताता है कि किस प्रकार की जांच लागू करनी है।

अभ्यास

अभ्यास: सत्यापन परीक्षण

_क्यों? अब आप जानते हैं कि वही जनरेटिव प्रक्रिया जो AI को प्रवाह देती है वह भी इसे निर्माण करती है। अपने स्वयं के क्षेत्र में इसे देखने का समय है, एक ऐसे डोमेन में जहां आप इसे पकड़ सकते हैं।_

अपनी कार्य सूची पर वापस जाएं और वह कार्य चुनें जहां आप अपनी डोमेन विशेषज्ञता में सबसे आत्मविश्वासी हैं। आपको एक ऐसा विषय चाहिए जहां आप विशेषज्ञ हैं, क्योंकि आपको जो वापस आता है उसे सत्यापित करने में सक्षम होना चाहिए। उस डोमेन से पांच विशिष्ट, जांचने योग्य तथ्य लिखें: किसी व्यक्ति का नौकरी का शीर्षक, एक प्रकाशन तारीख, एक आंकड़ा, एक उत्पाद विनिर्देश, एक सीधा उद्धरण, एक URL। ऐसी चीजें जो आप सटीक जानते हैं और स्वतंत्र रूप से पुष्टि कर सकते हैं।

अब तीन जांच चलाएं:

  • जांच 1: क्षमता क्षेत्र। AI को अपने डोमेन में एक प्रसिद्ध अवधारणा की व्याख्या या सारांश देने के लिए कहें। कुछ लोकप्रिय और अच्छी तरह से प्रलेखित। प्रवाहिता पर ध्यान दें। सामग्री को स्पॉट-चेक करें। यह है कि क्षमता क्षेत्र कैसा लगता है: चिकना, आत्मविश्वासी, और बड़े पैमाने पर सटीक।
  • जांच 2: दबाव में विशिष्टता। AI को अपने डोमेन में पांच जांचने योग्य विशिष्टताएं प्रदान करने के लिए कहें: तीन स्रोतों का हवाला दें, एक लेखक का नाम दें, सटीक आंकड़े दें, एक URL प्रदान करें। हर एक को सत्यापित करें। इसे पांच में से स्कोर करें: कितने पूरी तरह सटीक थे? यदि यह निर्माण करता है, तो ध्यान दें कि यह कितना आत्मविश्वासी लगता था।
  • जांच 3: कार्रवाई में नमूनाकरण। एक ताजी बातचीत में बिल्कुल वही विशिष्ट-तथ्य अनुरोध चलाएं। दोनों आउटपुट की तुलना करें। क्या सुसंगत रहा? क्या बदल गया? आप जो भिन्नता देखते हैं वह Next Token Prediction के नमूनाकरण में काम है।

स्ट्रेच लक्ष्य: जांच 2 को उद्धरण सक्षम टूल में फिर से चलाएं (Claude में Research mode की तरह)। इसे फिर से स्कोर करें। क्या जांच करने के लिए स्रोत होने से स्कोर बदलता है?

पाठ प्रतिबिंब

  • क्या आप एक ऐसे डोमेन में निर्माण को पकड़ते जहां आप अच्छी तरह नहीं जानते थे?
  • अपनी कार्य सूची को देखें: कौन से कार्य ज्यादातर क्षमता क्षेत्र में बैठते हैं, और कौन से विशिष्टता में धकेलते हैं जिसे सत्यापन की आवश्यकता है?

आगे क्या है

Next Token Prediction समझाता है कि AI कैसे उत्पन्न करता है। अगला हम देखते हैं कि यह क्या उत्पन्न कर रहा है से: Knowledge संपत्ति। मॉडल वास्तव में क्या जानता है, वह ज्ञान कहां से आता है, और अंतराल कहां हैं?

प्रतिक्रिया

जैसे ही आप पाठ्यक्रम के माध्यम से आगे बढ़ते हैं, हम आपसे सुनना पसंद करेंगे कि आप अपने काम में पाठ्यक्रम से अवधारणाओं का उपयोग कैसे कर रहे हैं, साथ ही आपके पास कोई भी प्रतिक्रिया हो सकती है। अपनी प्रतिक्रिया यहां साझा करें।

स्वीकृति और लाइसेंस

_कॉपीराइट 2026 Anthropic। AI Fluency Framework पर आधारित मूल कार्य जिसे Prof. Rick Dakan (Ringling College of Art and Design) और Prof. Joseph Feller (University College Cork) द्वारा विकसित किया गया। CC BY-NC-SA 4. 0 लाइसेंस के तहत जारी।_

फ्लैशकार्ड 10 कार्ड
प्रश्न
प्रकट करने के लिए क्लिक करें · ←/→
उत्तर
वापस पलटने के लिए क्लिक करें
ज्ञान जाँच 6 प्रश्न