एआई शब्दावली

📖

शब्द

कुशल ट्रांसफॉर्मर

ट्रांसफॉर्मर आर्किटेक्चर की एक श्रेणी जिसे ध्यान की द्विघात जटिलता को दूर करने के लिए डिज़ाइन किया गया है, जिसमें लंबी अनुक्रमों को संसाधित करने के लिए रैखिक, विरल या निम्न-रैंक ध्यान जैसी तकनीकों का उपयोग किया जाता है।

📖

शब्द

फ्लैशअटेंशन

एक सटीक, लेकिन मेमोरी और समय में तेज़ ध्यान एल्गोरिथम, जो GPU मेमोरी में बड़ी मध्यवर्ती ध्यान मैट्रिक्स के निर्माण से बचने के लिए टाइलिंग और पुनर्गणना का उपयोग करता है।

📖

शब्द

नाइस्ट्रॉमफॉर्मर

एक मॉडल जो नाइस्ट्रॉम विधि का उपयोग करके पूर्ण ध्यान मैट्रिक्स का अनुमान लगाता है, जिसमें कुछ 'लैंडमार्क' बिंदुओं का नमूना लिया जाता है, जिससे जटिलता O(n²) से O(n*m) तक कम हो जाती है, जहाँ m << n है।