क्या है AI टोकन? किसान से लेकर स्टार्टअप तक को कैसे मिलेगा इसका लाभ, यहाँ विस्तार से जाने सबकुछ
दुनिया भर की टेक कंपनियों, खासकर चीन (अलीबाबा, बाइटडांस) और अमेरिका के बीच एआई टोकन की कीमतों को लेकर घमासान मचा हुआ है। अधिक से अधिक ग्राहकों को आकर्षित करने के लिए कंपनियों ने अपने टोकन की कीमतें 90% तक कम कर दी हैं। मूल रूप से, टोकन एआई की वह इकाई है जो यह निर्धारित करती है कि एआई ने आपके लिए कितना काम किया है। जैसे हम बिजली को इकाइयों में मापते हुए देखते हैं, वैसे ही प्रत्येक एआई प्रतिक्रिया को टोकन में मापा जाता है। आप जितना लंबा प्रश्न पूछेंगे या AI जितना लंबा उत्तर देगा, आप उतने ही अधिक टोकन खर्च करेंगे।
यह इस तरह काम करता है
जब आप AI को कुछ लिखकर भेजते हैं तो यह आपके पूरे वाक्य को छोटे-छोटे टुकड़ों में तोड़ देता है, जिन्हें टोकन कहा जाता है। इसे ऐसे समझें: जैसे छोटे बच्चों को शब्दों को जोड़कर पढ़ना सिखाया जाता है। अंग्रेजी में, एक शब्द अक्सर एक टुकड़ा होता है, लेकिन हिंदी की संरचना थोड़ी अलग होती है। हिंदी में स्वर और व्यंजन मिलकर एक शब्द बनाते हैं, इसलिए किसी हिंदी शब्द को समझने के लिए AI को उसे 2-3 टुकड़ों में तोड़ना पड़ता है। यही कारण है कि जब हिंदी में AI का प्रयोग किया जाता है तो मीटर (टोकन गिनती) थोड़ा तेज चलता है।
एआई कंपनियां टोकन कीमतों पर दौड़ लगाती हैं
एआई कंपनियां अपनी सेवाओं के लिए टोकन के आधार पर पैसे लेती हैं। यानी आप एआई से जितना लंबा सवाल पूछेंगे या उससे जितना लंबा जवाब मिलेगा, उतने ही ज्यादा टोकन लगेंगे और उतने ही ज्यादा पैसे लगेंगे। इस खर्च को कम करने के लिए आजकल टेक कंपनियों के बीच प्रतिस्पर्धा बढ़ गई है। अब कई कंपनियां 10 लाख टोकन के लिए पैकेज रेट तय कर रही हैं, ताकि बड़े प्रोजेक्ट सस्ते में पूरे हो सकें. खासकर चीनी AI कंपनियों ने टोकन की कीमतें काफी कम कर दी हैं, जिससे AI का इस्तेमाल पहले की तुलना में सस्ता हो गया है।
यह बिल्कुल वैसा ही है जैसे टेलीकॉम कंपनियां कम कीमत पर इंटरनेट डेटा उपलब्ध कराने के लिए आपस में प्रतिस्पर्धा करती हैं। तो, अब एआई की दुनिया में असली प्रतिस्पर्धा टोकन कीमतों को लेकर है। विशेषज्ञों का मानना है कि जिस तरह सस्ते इंटरनेट डेटा से डिजिटल क्रांति आई, उसी तरह टोकन सस्ते होने से शिक्षा, स्वास्थ्य, कृषि, कारोबार और मीडिया जैसे हर क्षेत्र में एआई का इस्तेमाल तेजी से बढ़ेगा।
अंग्रेजी की तुलना में हिंदी भाषा में 03 गुना अधिक टोकन का उपयोग किया जाता है।
आधुनिक AI मॉडल 2 मिलियन टोकन तक याद रख सकते हैं।
एआई का मेमोरी और टोकन का खेल
टोकन एआई की मेमोरी भी निर्धारित करते हैं। प्रत्येक एआई मॉडल की एक सीमा होती है कि वह एक बार में कितने टोकन याद रख सकता है; इसे 'संदर्भ विंडो' कहा जाता है। जब बातचीत बहुत लंबी हो जाती है, तो नए टोकन जोड़ दिए जाते हैं और पुराने टोकन हटा दिए जाते हैं। इसी कारण AI पुरानी बातों को भूल सकता है। इस कारण से, टोकन सीधे एआई की समझने और याद रखने की क्षमता से जुड़े हुए हैं। भविष्य में केवल वही कंपनी इस क्षेत्र में सबसे आगे होगी जो कम लागत पर अधिक टोकन प्रोसेस कर सकेगी और कम बिजली की खपत कर सकेगी। इसलिए, बड़ी तकनीकी कंपनियाँ अब AI फ़ैक्टरियाँ बना रही हैं जहाँ टोकन को बहुत तेज़ गति से संसाधित किया जा सकता है और AI को और भी अधिक शक्तिशाली बनाया जा सकता है।