एआई शब्दावली
आर्टिफिशियल इंटेलिजेंस का पूर्ण शब्दकोश
वितरित मशीन लर्निंग
एमएल मॉडल प्रशिक्षण का एक प्रतिमान जहां बड़े डेटासेट को संसाधित करने और प्रशिक्षण समय कम करने के लिए गणनाएं कई मशीनों पर वितरित की जाती हैं।
पैरामीटर सर्वर
एक वितरित आर्किटेक्चर जो मॉडल पैरामीटर को समर्पित सर्वरों पर केंद्रीकृत करता है, जिससे वर्कर्स एसिंक्रोनस तरीके से ग्रेडिएंट्स को अपडेट और सिंक्रोनाइज़ कर सकते हैं।
ऑलरिड्यूस
एक सामूहिक संचार एल्गोरिदम जो वितरित प्रशिक्षण वातावरण में सभी नोड्स के बीच ग्रेडिएंट्स के सिंक्रोनाइज़्ड रिडक्शन और प्रसारण की अनुमति देता है।
डेटा समानांतरता
समानांतरीकरण की एक रणनीति जहां डेटा को कई मशीनों पर विभाजित किया जाता है, प्रत्येक मशीन अलग-अलग बैचों के साथ मॉडल की एक समान प्रति को प्रशिक्षित करती है।
स्पार्क एमएललिब
अपाचे स्पार्क पर निर्मित एक स्केलेबल मशीन लर्निंग लाइब्रेरी, जो क्लासिक एमएल एल्गोरिदम के वितरित कार्यान्वयन प्रदान करती है।
टेंसरफ्लो वितरित
टेंसरफ्लो का वितरित प्रशिक्षण फ्रेमवर्क जो प्रशिक्षण को स्केल करने के लिए मिररडस्ट्रैटेजी और मल्टीवर्करमिररडस्ट्रैटेजी जैसी रणनीतियों का उपयोग करता है।
होरोवोड
उबर द्वारा विकसित एक ओपन-सोर्स फ्रेमवर्क जो डीप लर्निंग मॉडल के कुशल वितरित प्रशिक्षण के लिए एमपीआई के माध्यम से ऑलरिड्यूस एल्गोरिदम का उपयोग करता है।
रे
मशीन लर्निंग और एआई के लिए अनुकूलित एक वितरित कंप्यूटिंग फ्रेमवर्क, जो बड़े पैमाने पर समानांतर निष्पादन और स्टेट मैनेजमेंट के लिए प्रिमिटिव्स प्रदान करता है।
पेटास्टॉर्म
एपाचे पैराक्वेट में संग्रहीत बड़े डेटासेट तक कुशलतापूर्वक पहुंच के लिए एक लाइब्रेरी, जो वितरित डीप लर्निंग मॉडल प्रशिक्षण के लिए है।
डास्क-एमएल
डास्क का एक विस्तार जो स्केलेबल मशीन लर्निंग एल्गोरिदम और क्लस्टर पर एमएल वर्कफ़्लो के लिए समानांतरीकरण उपकरणों को एकीकृत करता है।
क्यूबफ़्लो
कुबेरनेट्स पर आधारित ओपन-सोर्स प्लेटफ़ॉर्म जो कंटेनर ऑर्केस्ट्रेशन के साथ बड़े पैमाने पर जटिल एमएल पाइपलाइनों को तैनात और प्रबंधित करने के लिए है।
एमएलफ़्लो
एमएल प्रोजेक्ट्स के पूर्ण जीवनचक्र को प्रबंधित करने के लिए ओपन सोर्स प्लेटफ़ॉर्म, जिसमें ट्रैकिंग, मॉडल प्रबंधन और स्केल पर पुनरुत्पादन शामिल है।
फ़ीस्ट
ओपन सोर्स फ़ीचर स्टोर जो बड़े पैमाने पर फ़ीचर्स के प्रबंधन, संस्करण और सर्विंग के लिए एक एब्स्ट्रक्शन लेयर प्रदान करता है।
वर्टेक्स एआई
गूगल क्लाउड की एकीकृत प्लेटफ़ॉर्म जो एकीकृत ऑटोएमएल और एमएलऑप्स के साथ स्केल पर एमएल मॉडल के प्रशिक्षण, तैनाती और प्रबंधन के लिए है।
सेजमेकर
एडब्ल्यूएस का पूरी तरह से प्रबंधित सेवा जो स्वचालित संसाधन अनुकूलन के साथ वितरित प्रशिक्षण, तैनाती और एमएल मॉडल मॉनिटरिंग के लिए है।
शार्डिंग
समानांतर प्रसंस्करण को सक्षम करने और प्रति मशीन लोड को कम करने के लिए कई नोड्स पर डेटा या मॉडल का क्षैतिज विभाजन।
लोचदार प्रशिक्षण
संसाधनों के उपयोग को अनुकूलित करने और लागत कम करने के लिए प्रशिक्षण के दौरान कार्यकर्ताओं की संख्या को गतिशील रूप से समायोजित करने की क्षमता।