এআই গ্লসারি
কৃত্রিম বুদ্ধিমত্তার সম্পূর্ণ অভিধান
এমএল পাইপলাইন অর্কেস্ট্রেশন
ডেটা ইনজেশন থেকে মডেল ডেপ্লয়মেন্ট পর্যন্ত মেশিন লার্নিং ওয়ার্কফ্লোতে আন্তঃসংযুক্ত ধাপগুলির ক্রমের সমন্বয় ও স্বয়ংক্রিয়করণ, কার্যনির্বাহ, পর্যবেক্ষণ এবং নির্ভরতা ব্যবস্থাপনা নিশ্চিত করা।
ডাইরেক্টেড অ্যাসাইক্লিক গ্রাফ (ডিএজি)
পাইপলাইনের কাজগুলির মধ্যে নির্ভরতা উপস্থাপনের জন্য ব্যবহৃত চক্রবিহীন নির্দেশিত গ্রাফ কাঠামো, যেখানে প্রতিটি নোড একটি কাজ এবং এজগুলি কার্যনির্বাহের ক্রম নির্ধারণ করে, অসীম লুপের অনুপস্থিতি নিশ্চিত করে।
ওয়ার্কফ্লো ম্যানেজার
জটিল ওয়ার্কফ্লোর পরিকল্পনা, কার্যনির্বাহ, পর্যবেক্ষণ এবং ত্রুটি থেকে পুনরুদ্ধারের জন্য দায়ী সফ্টওয়্যার সিস্টেম বা টুল, প্রায়শই বিতরণকৃত কাজগুলিকে অর্কেস্ট্রেট করতে ডিএজি-ভিত্তিক।
টাস্ক শিডিউলিং
একটি পাইপলাইনের পৃথক কাজগুলি কখন এবং কীভাবে কার্যনির্বাহ করা হবে তা তাদের নির্ভরতা, সম্পদের প্রাপ্যতা এবং পূর্বনির্ধারিত ট্রিগার (সময়, ইভেন্ট) অনুসারে নির্ধারণের প্রক্রিয়া।
পাইপলাইন নির্ভরতা ব্যবস্থাপনা
একটি পাইপলাইনের ধাপগুলির মধ্যে পূর্ববর্তী সম্পর্কের স্পষ্ট ব্যবস্থাপনা, নিশ্চিত করে যে একটি কাজ শুধুমাত্র তখনই কার্যনির্বাহ করে যখন এর সমস্ত প্যারেন্ট কাজ সফলভাবে সম্পন্ন হয়েছে।
ইডেম্পোটেন্স
একটি কাজ বা পাইপলাইন অপারেশনের বৈশিষ্ট্য যা নিশ্চিত করে যে একই ইনপুট সহ এর একাধিক কার্যনির্বাহ চূড়ান্ত অবস্থা উৎপন্ন করে, ত্রুটি থেকে পুনরুদ্ধার এবং নির্ভরযোগ্যতার জন্য অপরিহার্য।
পাইপলাইন ক্যাশিং
পাইপলাইনের মধ্যবর্তী কাজ বা ধাপগুলির আউটপুট ফলাফল সংরক্ষণের কৌশল, পরবর্তী লঞ্চে তাদের অপ্রয়োজনীয় পুনঃকার্যনির্বাহ এড়াতে, এইভাবে পুনরাবৃত্তি দ্রুততর করে।
পাইপলাইন প্যারামিটারাইজেশন
বাহ্যিক কনফিগারযোগ্য ভেরিয়েবল সহ পাইপলাইন ডিজাইনের অনুশীলন, বিভিন্ন হাইপারপ্যারামিটার, ডেটাসেট বা কনফিগারেশন সহ কার্যনির্বাহ চালু করতে দেয় পাইপলাইন কোড পরিবর্তন না করে।
পাইপলাইন ভার্সনিং
সময়ের সাথে সাথে একটি পাইপলাইনের বিভিন্ন পুনরাবৃত্তি এবং কনফিগারেশনের ট্র্যাকিং এবং ব্যবস্থাপনা, প্রায়শই একটি ভার্সন কন্ট্রোল সিস্টেমের মাধ্যমে, পরীক্ষার পুনরুত্পাদনযোগ্যতা এবং ট্রেসিবিলিটি নিশ্চিত করার জন্য।
রিসোর্স প্রোভিশনিং
পাইপলাইনের প্রতিটি কাজ চালানোর জন্য প্রয়োজনীয় কম্পিউটিং রিসোর্স (CPU, GPU, মেমরি) এর গতিশীল বরাদ্দ, অবকাঠামোর ব্যবহার এবং খরচ অপ্টিমাইজ করে।
পাইপলাইন চেইনিং
উন্নত অর্কেস্ট্রেশন কৌশল যেখানে একটি সম্পূর্ণ পাইপলাইনের আউটপুট অন্য পাইপলাইনের ইনপুট হিসেবে কাজ করে, যা শেষ থেকে শেষ পর্যন্ত আরও জটিল এবং মডুলার ওয়ার্কফ্লো গঠন করতে দেয়।
কন্ডিশনাল এক্সিকিউশন
অর্কেস্ট্রেশন লজিক যা পূর্ববর্তী ধাপের ফলাফল বা বাহ্যিক শর্তের ভিত্তিতে একটি পাইপলাইনের নির্দিষ্ট শাখা বা কাজগুলির এক্সিকিউশন সক্রিয় বা নিষ্ক্রিয় করে।
পাইপলাইন মনিটরিং
চলমান পাইপলাইনের অগ্রগতি, পারফরম্যান্স এবং ত্রুটির ক্রমাগত নজরদারি, ড্যাশবোর্ড, অ্যালার্ট এবং লগের মাধ্যমে তাদের সঠিক কার্যকারিতা নিশ্চিত করার জন্য।
ওয়ার্কফ্লো-অ্যাজ-কোড
একটি প্যারাডাইম যেখানে পাইপলাইনের সংজ্ঞা এবং তাদের অর্কেস্ট্রেশন লজিক সোর্স কোড হিসাবে ঘোষিত এবং পরিচালিত হয় (যেমন: পাইথন বা YAML এ), ইনফ্রাস্ট্রাকচার অ্যাজ কোড এবং সহযোগিতাকে উত্সাহিত করে।
পাইপলাইন রি-রান
একটি অর্কেস্ট্রেটরের একটি পাইপলাইনের অংশ বা সম্পূর্ণ অংশ নির্বাচনীভাবে পুনরায় চালানোর ক্ষমতা, তা একটি ত্রুটি সংশোধন, একটি পরিবর্তন পরীক্ষা বা ডেটা আপডেট করার জন্য হোক।
সার্ভিস লেভেল এগ্রিমেন্ট (SLA) মনিটরিং
পূর্বনির্ধারিত লক্ষ্যের (যেমন: সর্বোচ্চ এক্সিকিউশন সময়, সাফল্যের হার) তুলনায় একটি পাইপলাইনের পারফরম্যান্স ট্র্যাকিং, সেবার গুণমান নিশ্চিত করতে অসম্মতির ক্ষেত্রে অ্যালার্ট সহ।