এআই গ্লসারি
কৃত্রিম বুদ্ধিমত্তার সম্পূর্ণ অভিধান
ডকুমেন্ট চাঙ্কিং
বৃহৎ নথিগুলিকে ছোট এবং সুসংগত অংশে বিভক্ত করার প্রক্রিয়া, যা ভাষা মডেল এবং ভেক্টর অনুসন্ধান সিস্টেম দ্বারা তাদের প্রক্রিয়াকরণকে অপ্টিমাইজ করার জন্য।
স্থির আকারের চাঙ্কিং
একটি পূর্বনির্ধারিত সংখ্যার অক্ষর, শব্দ বা টোকেনের ভিত্তিতে নথিগুলিকে পূর্বনির্ধারিত আকারের অংশে বিভক্ত করার কৌশল।
সিম্যান্টিক চাঙ্কিং
বিষয়বস্তুর সিম্যান্টিক বোঝার উপর ভিত্তি করে বিভাজনের পদ্ধতি, যা বিষয়গত এবং প্রাসঙ্গিক সুসংগততা সংরক্ষণ করে এমন অংশ তৈরি করে।
রিকার্সিভ ক্যারেক্টার স্প্লিটিং
একটি শ্রেণিবদ্ধ বিভাজন পদ্ধতি যা নথিগুলিকে বিভাজকের একটি ক্রম অনুসারে (অনুচ্ছেদ, বাক্য, শব্দ) বিভক্ত করে যতক্ষণ না কাঙ্ক্ষিত অংশের আকার অর্জিত হয়।
টোকেন-ভিত্তিক চাঙ্কিং
টোকেনগুলিকে মৌলিক একক হিসাবে ব্যবহার করে বিভাজনের কৌশল, যা জিপিটি বা বার্টের মতো ভাষা মডেলগুলির প্রসঙ্গ সীমা মেনে চলার জন্য অপরিহার্য।
ওভারল্যাপিং চাঙ্কস
সংলগ্ন অংশগুলির মধ্যে প্রসঙ্গ সংরক্ষণ এবং পুনরুদ্ধারের সময় সুসংগততা উন্নত করার জন্য ওভারল্যাপিং অঞ্চল সহ অংশ তৈরি করার কৌশল।
হায়ারার্কিক্যাল চাঙ্কিং
বিভিন্ন গ্র্যানুলারিটিতে প্রাসঙ্গিক পুনরুদ্ধার সম্ভব করার জন্য একটি শ্রেণিবদ্ধ কাঠামো (অধ্যায়, বিভাগ, অনুচ্ছেদ) অনুসারে অংশগুলিকে সংগঠিত করার বহু-স্তরের পদ্ধতি।
স্লাইডিং উইন্ডো চাঙ্কিং
একটি নির্দিষ্ট ধাপ সহ একটি নির্দিষ্ট আকারের উইন্ডো নথির উপর স্লাইড করে ক্রমানুসারে অংশ তৈরি করার পদ্ধতি, যা নিয়ন্ত্রিত ওভারল্যাপ সহ।
মার্কডাউন-সচেতন চাঙ্কিং
ডকুমেন্টের মার্কডাউন কাঠামোকে সম্মান করে এমন বুদ্ধিমান সেগমেন্টেশন কৌশল, যা শিরোনাম, তালিকা এবং কোড ব্লকের যৌক্তিক সীমানায় বিভক্ত করে।
প্রসঙ্গ-সচেতন চাঙ্কিং
বর্ণনামূলক সামঞ্জস্য বজায় রাখার জন্য সর্বোত্তম বিভাজন বিন্দু নির্ধারণ করতে ডকুমেন্টের সামগ্রিক শব্দার্থিক প্রসঙ্গ বিবেচনা করে উন্নত পদ্ধতি।
এম্বেডিং-ভিত্তিক চাঙ্কিং
একটি ডকুমেন্টে বিষয়গতভাবে স্বতন্ত্র সেগমেন্টের মধ্যে প্রাকৃতিক সীমানা চিহ্নিত করতে শব্দার্থিক এম্বেডিং ব্যবহার করে পদ্ধতি।
হাইব্রিড চাঙ্কিং কৌশল
সামঞ্জস্য এবং দক্ষতা উভয়ই অপ্টিমাইজ করার জন্য একই সাথে শব্দার্থিক চাঙ্কিং এবং নির্দিষ্ট আকারের সীমা সহ একাধিক সেগমেন্টেশন কৌশলের সংমিশ্রণ।
গতিশীল চাঙ্ক সাইজিং
ডকুমেন্টের প্রতিটি বিভাগের তথ্যের ঘনত্ব এবং শব্দার্থিক জটিলতার উপর ভিত্তি করে খণ্ডের আকার সামঞ্জস্য করে অভিযোজিত পদ্ধতি।
মেটাডেটা-সমৃদ্ধ চাঙ্কিং
প্রসঙ্গ পুনরুদ্ধার এবং পুনর্গঠন উন্নত করতে প্রতিটি খণ্ডের সাথে প্রাসঙ্গিক মেটাডেটা (অবস্থান, প্যারেন্ট শিরোনাম, শ্রেণীবদ্ধ স্তর) যুক্ত করার কৌশল।
ক্রস-ডকুমেন্ট চাঙ্কিং
সম্পর্কিত ডকুমেন্টের সেটগুলিকে সামগ্রিক বোঝাপড়ার জন্য আন্তঃ-ডকুমেন্ট সম্পর্ক সংরক্ষণ করে সামঞ্জস্যপূর্ণ খণ্ডে বিভক্ত করার উন্নত কৌশল।
মাল্টি-লেভেল চাঙ্কিং
গ্র্যানুলারিটির প্রয়োজন অনুযায়ী নমনীয় পুনরুদ্ধার সক্ষম করতে একাধিক স্তরের খণ্ড (সারসংক্ষেপ, বিস্তারিত বিভাগ, অনুচ্ছেদ) তৈরি করার পদ্ধতি।
অ্যাডাপ্টিভ চাঙ্কিং
ডকুমেন্টের ধরন, ডোমেন এবং পর্যবেক্ষিত ব্যবহারের প্যাটার্নের উপর ভিত্তি করে গতিশীলভাবে সেগমেন্টেশন কৌশল সামঞ্জস্য করে এমন বুদ্ধিমান সিস্টেম।