এআই গ্লসারি
কৃত্রিম বুদ্ধিমত্তার সম্পূর্ণ অভিধান
MapReduce
বৃহৎ ডেটা সেট ক্লাস্টারে প্রক্রিয়াকরণের জন্য সমান্তরাল প্রোগ্রামিং মডেল, যা প্রক্রিয়াকরণকে দুটি প্রধান ধাপে বিভক্ত করে: ফিল্টারিং এবং রূপান্তরের জন্য Map এবং ফলাফল সমষ্টি করার জন্য Reduce।
Lambda Architecture
সম্পূর্ণ বিশ্লেষণের জন্য ব্যাচ পথ এবং রিয়েল-টাইম ফলাফলের জন্য স্পিড পথ একত্রিত করে ডেটা প্রক্রিয়াকরণ আর্কিটেকচার, উভয় দৃশ্য একত্রিত করার জন্য একটি ইউনিফাইড সার্ভিস লেয়ার সহ।
Kappa Architecture
Lambda আর্কিটেকচারের সরলীকরণ যা শুধুমাত্র একটি স্ট্রিম প্রসেসিং পাইপলাইন ব্যবহার করে, যেখানে ডেটা রিয়েল-টাইমে প্রক্রিয়া করা হয় এবং ঐতিহাসিক ক্যোয়ারী ইভেন্টগুলি পুনরায় চালানোর মাধ্যমে পূরণ করা হয়।
Batch Processing
প্রক্রিয়াকরণের মোড যেখানে ডেটা পূর্বনির্ধারিত ব্যবধানে সংগ্রহ এবং ব্যাচে প্রক্রিয়া করা হয়, লেটেন্সির চেয়ে থ্রুপুটের জন্য অপ্টিমাইজড, সাধারণত ঐতিহ্যবাহী ETL বিশ্লেষণের জন্য।
Stream Processing
ডেটা চলমান অবস্থায় ক্রমাগত প্রক্রিয়াকরণ, ক্যাপচার এবং প্রক্রিয়াকরণের মধ্যে ন্যূনতম লেটেন্সি সহ রিয়েল-টাইম বিশ্লেষণ সক্ষম করে।
Distributed File System
ফাইল সিস্টেম যা একাধিক সার্ভারে ডেটা সংরক্ষণ করে যখন ব্যবহারকারীদের কাছে একটি একক সিস্টেম হিসাবে উপস্থিত হয়, নির্ভরযোগ্যতার জন্য প্রতিলিপি এবং ফল্ট টলারেন্স নিশ্চিত করে।
HDFS
Hadoop Distributed File System, ব্লক প্রতিলিপির মাধ্যমে উচ্চ ফল্ট টলারেন্স সহ স্ট্যান্ডার্ড হার্ডওয়্যারে পেটাবাইট ডেটা সংরক্ষণের জন্য ডিজাইন করা ডিস্ট্রিবিউটেড ফাইল সিস্টেম।
YARN
Yet Another Resource Negotiator, Hadoop রিসোর্স ম্যানেজার যা ডেটা প্রক্রিয়াকরণকে রিসোর্স ম্যানেজমেন্ট থেকে আলাদা করে, একই ক্লাস্টারে একাধিক ফ্রেমওয়ার্ক চালানো সম্ভব করে।
RDD
Resilient Distributed Dataset, স্পার্কের মৌলিক ডেটা স্ট্রাকচার যা অবিচ্ছিন্ন এবং পার্টিশন করা অবজেক্টের সংগ্রহকে উপস্থাপন করে, যা স্বয়ংক্রিয় ফল্ট টলারেন্স সহ সমান্তরালভাবে গণনা করা যায়।
Data Locality
বিতরণকৃত কম্পিউটিং নীতি যেখানে কাজগুলি প্রয়োজনীয় ডেটা ধারণকারী নোডে চালানো হয়, নেটওয়ার্ক স্থানান্তর কমানো এবং কর্মক্ষমতা উল্লেখযোগ্যভাবে উন্নত করা।
Speculative Execution
ফল্ট টলারেন্স মেকানিজম যা ধীর কাজের কপি অন্যান্য নোডে চালায়, প্রথম সম্পূর্ণ ফলাফল ব্যবহার করে ত্রুটিপূর্ণ বা ওভারলোডেড নোডের প্রভাব কমায়।
DAG
Directed Acyclic Graph, স্পার্ক ওয়ার্কফ্লোর উপস্থাপনা যেখানে রূপান্তরগুলি চক্রবিহীন নির্দেশিত গ্রাফে সংগঠিত হয়, ধাপগুলির সমান্তরাল এক্সিকিউশন অপ্টিমাইজ করে।
Fault Tolerance
একটি বিতরণকৃত সিস্টেমের উপাদান ব্যর্থতার ক্ষেত্রে সঠিকভাবে কাজ চালিয়ে যাওয়ার ক্ষমতা, সাধারণত রিডানডেন্সি, রেপ্লিকেশন এবং স্বয়ংক্রিয় পুনরুদ্ধার মেকানিজমের মাধ্যমে।
Consistency Model
একটি বিতরণকৃত সিস্টেমে ডেটা সামঞ্জস্যের গ্যারান্টি সংজ্ঞায়িত চুক্তি, অ্যাপ্লিকেশন প্রয়োজন অনুযায়ী শক্তিশালী সামঞ্জস্য থেকে ইভেন্টুয়াল সামঞ্জস্য পর্যন্ত।
Combiner
MapReduce অপ্টিমাইজেশন ফাংশন যা স্থানীয়ভাবে প্রতিটি ম্যাপারে চালানো হয়, শাফল চলাকালীন স্থানান্তরিত ডেটার পরিমাণ কমাতে, রিডাকশন ফেজের আগে প্রি-এগ্রিগেশন প্রয়োগ করে।